国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 學院 > 開發(fā)設(shè)計 > 正文

跟天齊老師學Spark（2）--spark基礎(chǔ)概念

2019-11-11 04:29:13
字體：大 中 小
供稿：網(wǎng)友
spark基礎(chǔ)概念：2014年才成為Apache的頂級項目，距今才兩年。但是發(fā)展迅速。spark是基于內(nèi)存的計算，現(xiàn)在搞spark的，現(xiàn)在內(nèi)存都不是問題，騰訊現(xiàn)在的集群達到上萬臺，每臺機器都是100多G的內(nèi)存。內(nèi)存不夠還可以落磁盤。spark的優(yōu)點：中間結(jié)果可以在內(nèi)存中，而MaPReduce中間結(jié)果落磁盤。spark是hadoop的一個替代方案，但是它只能替代MapReduce。可以很好的融入到hadoop的生態(tài)系統(tǒng)中，彌補MapReduce的不足。開發(fā)spark最好使用scala語言，因為spark就是用scala開發(fā)的。但是市面上仍然有很多公司用java來開發(fā)spark的。考慮到人力成本、技術(shù)成本、維護成本。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
主站蜘蛛池模板： 恩平市| 若尔盖县| 开原市| 莱芜市| 呼玛县| 安泽县| 桐梓县| 黑水县| 乌兰察布市| 商河县| 昭通市| 札达县| 江安县| 德庆县| 青海省| 繁峙县| 乐都县| 固安县| 琼海市| 安国市| 安徽省| 阿合奇县| 钟祥市| 大方县| 手游| 静乐县| 龙胜| 读书| 仙桃市| 象州县| 潼关县| 崇左市| 沁水县| 海淀区| 长岛县| 阿拉尔市| 太和县| 曲水县| 霞浦县| 色达县| 雷州市|