首頁 > 運維 > Apache > 主體

apache spark是什麼意思?

藏色散人
發布: 2019-08-05 11:11:57
原創
3214 人瀏覽過

apache spark是什麼意思?

apache spark是什麼意思?

Apache Spark是基於記憶體運算的開源的叢集運算系統,目的是讓資料分析更快速。 Spark非常小巧玲瓏,由加州柏克萊大學AMP實驗室的Matei為主的小團隊所開發。使用的語言是Scala,專案的core部分的程式碼只有63個Scala文件,非常短小精悍。

Apache Spark的5個優點:

1.更高的效能,因為資料載入到叢集主機的分散式記憶體中。資料可以被快速的轉換迭代,並且快取用以後續的頻繁存取需求。許多對Spark有興趣的朋友可能也會聽過這樣一句話——在資料全部載入到記憶體的情況下,Spark可以比Hadoop快100倍,在記憶體不夠存放所有資料的情況下快Hadoop 10倍。

2.透過建立在Java、Scala、Python、SQL(應對互動式查詢)的標準API以方便各行各業使用,同時也含有大量開箱即用的機器學習函式庫。

3.與現有Hadoop v1 (SIMR) 和2.x (YARN) 生態相容,因此機構可以進行無縫遷移。

4.方便下載和安裝。方便的shell(REPL: Read-Eval-Print-Loop)可以對API進行互動的學習。

5.借助高等級的架構提高生產力,從而可以講精力放到計算上。

同時,Apache Spark由Scala實現,程式碼非常簡潔。

以上是apache spark是什麼意思?的詳細內容。更多資訊請關注PHP中文網其他相關文章!

相關標籤:
來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板
關於我們 免責聲明 Sitemap
PHP中文網:公益線上PHP培訓,幫助PHP學習者快速成長!