部署：分為測試環(huán)境、生產(chǎn)環(huán)境。
Hadoop發(fā)行版本：Apache、CDH（tar包、rpm包、parcel包，必須由cloudera manager進行管理）、HDP
注意：大數(shù)據(jù)框架內(nèi)禁用IPV6；同時要修改用戶的大進程數(shù)、單個進程打開的大文件數(shù)量；
Hadoop 2 三大組件：1. HDFS 2.MapReduce 3 YARN
HDFS：分布式文件系統(tǒng)，從功能上分為namenode、datanode。其中，namenode用于存放集群元數(shù)據(jù)，例如文件名稱層、文件存放在哪個datanode之上、有沒有進行切片等；數(shù)據(jù)是以block形式存儲；namenode中數(shù)據(jù)存放在內(nèi)存中、本地磁盤包括鏡像文件、編輯日志；以塊為單位存儲，在V2中默認大小是128MB；datanode與namenode之間會發(fā)送心跳（證明存活狀態(tài)，默認是每隔3秒鐘，在心跳返回結(jié)果中含有namenode發(fā)送給datanode的指令，如復制或刪除數(shù)據(jù)塊）、塊狀態(tài)報告（默認是每隔一個小時上報一次）等，是通過底層協(xié)議如RPC進行通信；副本默認是3，默認策略是其中兩個副本在同一個rack不同節(jié)點，第三個副本在不同的rack上；
YARN架構(gòu)：分為node manager（每一個節(jié)點）、resource manager（管理整個集群）

成都創(chuàng)新互聯(lián)專注于濱湖企業(yè)網(wǎng)站建設,響應式網(wǎng)站開發(fā),購物商城網(wǎng)站建設。濱湖網(wǎng)站建設公司,為濱湖等地區(qū)提供建站服務。全流程按需定制網(wǎng)站，專業(yè)設計，全程項目跟蹤，成都創(chuàng)新互聯(lián)專業(yè)和態(tài)度為您提供的服務

另外有需要云服務器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務器15元起步，三天無理由+7*72小時售后在線，公司持有idc許可證，提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應用場景需求。

網(wǎng)站題目：企業(yè)級大數(shù)據(jù)平臺-創(chuàng)新互聯(lián)
文章地址：http://jinyejixie.com/article44/jejee.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站設計公司、云服務器、動態(tài)網(wǎng)站、營銷型網(wǎng)站建設、定制網(wǎng)站、網(wǎng)站改版

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)