教育行業(yè)A股IPO第一股（股票代碼 003032）

全國咨詢/投訴熱線：400-618-4000

大數據培訓：Hadoop框架中怎么來優(yōu)化?

更新時間:2023年11月23日11時00分 來源:傳智教育 瀏覽次數:

好口碑IT培訓

　　(1)調優(yōu)Hadoop參數。當前Hadoop系統(tǒng)配置參數已經超過了190個，該如何調整這些參數，使得Hadoop運行的更快，是一種優(yōu)化的思路。

　　(2)優(yōu)化應用程序。我們知道m(xù)apreduce解析數據文件是迭代逐行解析的，如何在迭代的情況之下去編寫高效率的應用程序，也是一種優(yōu)化思路。

Hadoop框架中怎么來優(yōu)化？

　　(3)從系統(tǒng)實現的角度出發(fā)進行優(yōu)化。這種優(yōu)化方式難度大是因為它站在Hadoop的實現機制角度，比如根據當前Hadoop設計和實現上的缺點進行源碼級的修改。難度大但是效果也最為明顯。

　　(4)調整linux內核參數。

0 分享到：
和我們在線交談！