ApacheSpark
-
Spark調(diào)優(yōu)之RDD算子調(diào)優(yōu)(面試常問,建議收藏)
Spark調(diào)優(yōu)之RDD算子調(diào)優(yōu)不廢話,直接進入正題!1. RDD復用在對RDD進行算子時,要避免相同的算子和計算邏輯之下對RDD進行重復的計算,如下圖所示:RDD的重復計算對上圖中的RDD計算架構進行
-
深度解析Spark底層執(zhí)行原理(建議收藏)
Spark簡介Apache Spark是用于大規(guī)模數(shù)據(jù)處理的統(tǒng)一分析引擎,基于內(nèi)存計算,提高了在大數(shù)據(jù)環(huán)境下數(shù)據(jù)處理的實時性,同時保證了高容錯性和高可伸縮性,允許用戶將Spark部署在大量硬件之上,形成集群
-
SparkSQL對于批流支持的特性及批流一體化支持框架的難點
轉載本文需注明出處:微信公眾號EAWorld,違者必究。本文介紹了 SparkSQL 和 Flink 對于批流支持的特性以及批流一體化支持框架的難點。在介紹批流一體化實現(xiàn)的同時,重點分析了基于普元 SparkSQL-Flow 框架對批流支持的一種實現(xiàn)方式
-
2020 Techo Park開發(fā)者大會召開,作業(yè)幫加速平臺架構容器化探索
12月19日-20日,由騰訊主辦的2020 Techo Park開發(fā)者大會在京舉行,全球200余位頂級技術專家以及數(shù)千位參會者在大會現(xiàn)場就云計算、大數(shù)據(jù)和人工智能等前沿技術話題展開深度交流。
2020 Techo Park開發(fā)者大會 2020-12-23 -
2020 Techo Park開發(fā)者大會召開,作業(yè)幫分享拍搜系統(tǒng)架構演變歷程
12月19日至20日,由騰訊主辦的2020 Techo Park開發(fā)者大會于北京召開。據(jù)悉,本次大會邀請了全球超200位頂級技術專家來到現(xiàn)場,與數(shù)千位參會者就云計算、大數(shù)據(jù)和人工智能等前沿技術話題展開深度交流,為中國及全球云計算愛好者、從業(yè)者、開發(fā)者提供最具參考價值的創(chuàng)新分享
-
AIPARK愛泊車獲D輪重磅融資,引領人工智能+智慧交通加速度向前
近日,人工智能靜態(tài)交通、智慧停車領軍企業(yè)AIPARK愛泊車完成D輪數(shù)億元融資,本輪由深創(chuàng)投領投、正和島投資與盛景資本跟投。這是AIPARK愛泊車半年內(nèi)第三度傳出融資喜訊,智慧停車的“隱形冠軍”企業(yè)正在其開拓的賽道上以加速度狂飆猛進
-
AIPARK愛泊車憑借人工智能硬科技榮獲2020“創(chuàng)客中國”大賽一等獎
2020年“創(chuàng)客中國”工業(yè)互聯(lián)網(wǎng)中小企業(yè)創(chuàng)新創(chuàng)業(yè)大賽決賽在湖北武漢成功舉辦,AIPARK愛泊車獲得大賽一等獎。
-
再獲加碼,智慧停車行業(yè)巨頭AIPARK愛泊車完成數(shù)億元C+輪融資
近日,智慧停車領軍企業(yè)AIPARK愛泊車宣布完成數(shù)億元C+輪融資,本輪投資方為交銀國際、58產(chǎn)業(yè)基金、湖南財信基金。
-
AIPARK愛泊車完成重磅C輪融資,按下智慧停車行業(yè)發(fā)展加速鍵
近日,智慧停車領軍企業(yè)AIPARK愛泊車宣布完成C輪3億元人民幣融資,本輪融資由高榕資本領投,長商昆仲、中關村科學城科創(chuàng)基金跟投。
-
基于Spark的數(shù)據(jù)分析實踐
轉載本文需注明出處:微信公眾號EAWorld,違者必究。引言:Spark是在借鑒了MapReduce之上發(fā)展而來的,繼承了其分布式并行計算的優(yōu)點并改進了MapReduce明顯的缺陷。Spark主要包含
-
AI芯天下丨工業(yè)大數(shù)據(jù)挖掘的利器——Spark MLlib
一提到大數(shù)據(jù),人們首先會想到在互聯(lián)網(wǎng)和商業(yè)等環(huán)境中,利用大量的行為數(shù)據(jù)來分析用戶行為和預測市場趨勢等應用。但是對工業(yè)大數(shù)據(jù)的定義和應用卻很難直觀地理解和想象。
-
大疆Mavic Air上手體驗:彌補了Spark和Mavic Pro不足
大疆在2018年1月23日晚上11點在紐約發(fā)布了最新的一款無人機產(chǎn)品——御Mavic Air。這是一款擁有御Mavic Pro性能、曉Spark體積設計的無人機,大小跟一臺iPhone 8 Plus差不多,除了續(xù)航時間差了點,只有21分鐘,其他該有的功能都配齊了。
-
大疆無人機占據(jù)統(tǒng)治地位 Parrot不愿硬鋼
說到無人機,很多人的第一印象都是大疆,毫不夸張的說,這家國內(nèi)無人機公司已經(jīng)搶占了大部分的消費端市場。在這樣的趨勢背景下,Parrot將眼光瞄準了專業(yè)應用領域。
最新活動更多 >
-
11月起立即報名>> 光電類專業(yè)2025年秋季空中雙選會
-
11月8日觀看直播>>> 抗凍不流汗——銳科激光『智能自冷卻激光器』重磅發(fā)布
-
11月8日立即預約>> 筑夢啟光 礪行致遠 | 新天激光數(shù)字化產(chǎn)研基地奠基儀式
-
即日-11.13立即報名>>> 【在線會議】多物理場仿真助跑新能源汽車
-
11月14日搶先報名>> OFweek 2024固態(tài)電池技術線上研討會
-
11月20日火熱報名中>>> 2024 智能家居出海論壇