03
17-07
Apache Spark提供的兩種基于命令行的處理交互方式雖然足夠靈活，但在企業(yè)應(yīng)用中面臨諸如部署、安全等問題。為此本文引入Livy這樣一個基于Ap
28
17-06
6月，匯集當(dāng)今大數(shù)據(jù)界精英的Spark Summit 2017盛大召開，Spark作為當(dāng)今炙手可熱的大數(shù)據(jù)技術(shù)框架，向全世界展示了新的技術(shù)成果、
21
17-06
19
16-01
Spark是基于內(nèi)存的分布式計算引擎，以處理的高效和穩(wěn)定著稱。然而在實際的應(yīng)用開發(fā)過程中，開發(fā)者還是會遇到種種問題，其中一大類就是和性能相關(guān)。在本文中，筆者將結(jié)合自身實踐，談?wù)勅绾伪M可能地提高應(yīng)用程序性能。 分布式計算引擎在調(diào)優(yōu)方面有四個主要關(guān)注方向，分別是CPU、內(nèi)存、網(wǎng)絡(luò)開銷和I/O，其具體調(diào)優(yōu)目標(biāo)如下...
23
15-04
本文介紹的MemSQL 數(shù)據(jù)庫號稱是世界上快的分布式內(nèi)存數(shù)據(jù)庫（The World’s Fastest In-Memory Database）！它是由Eric Frenkiel（前Facebook員工）和Nikita Shamgunov（前微軟SQL Server高級工程師）創(chuàng)建的一款基于內(nèi)存的分布式關(guān)系數(shù)據(jù)庫，它通過將數(shù)據(jù)存儲在內(nèi)存中，并將SQL語句預(yù)編譯為C++而獲...
15
15-04
據(jù)估計，到2017年底，90%的CPU cycles 將會致力于移動硬件，移動計算正在迅速上升到主導(dǎo)地位。Spark為此重新設(shè)計了Spark體系結(jié)構(gòu)，允許Spark在移動設(shè)備上運(yùn)行Spark。Spark為現(xiàn)代化數(shù)據(jù)中心和大數(shù)據(jù)應(yīng)用進(jìn)行設(shè)計和優(yōu)化，但是它目前不適合移動計算。在過去的幾個月中，Spark社區(qū)正在調(diào)研個可以在移動設(shè)備上運(yùn)行架構(gòu)...
06
15-03
摘要：OpenCloud 2015將覆蓋OpenStack、Spark、Container三大時下熱門的云計算大數(shù)據(jù)核心技術(shù)，薈萃國內(nèi)外真正的云計算專家。懂技術(shù)的人都在這里！ 2015年，云計算已經(jīng)成為IT技術(shù)和服務(wù)領(lǐng)域新常態(tài)。IT基礎(chǔ)設(shè)施方面，云計算已成為主流選擇；開發(fā)平臺...
21
15-05
