国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 應(yīng)用 > 軟件技巧 > 正文

hadoop入門之hadoop集群驗(yàn)證任務(wù)存放在不同的節(jié)點(diǎn)上

2024-07-16 17:45:47
字體:
供稿:網(wǎng)友

Linux環(huán)境:CentOs6.4

Hadoop版本:Hadoop-1.1.2

master: 192.168.1.241      NameNode    JobTracker   DataNode   TaskTracker

slave:192.168.1.242    DataNode   TaskTracker

內(nèi)容:想hadoop文件系統(tǒng)中上傳一個(gè)大文件,驗(yàn)證文件分別分布在192.168.1.241節(jié)點(diǎn)和192.168.1.242節(jié)點(diǎn)上。

第一步: 前期工作:搭建Hadoop集群,

在hdfs-site.xml中的配置為2.


復(fù)制代碼代碼如下:
<property>
<name>dfs.replication</name>
<value>2</value>
</property>

運(yùn)行執(zhí)行start-all.sh命令,運(yùn)行結(jié)果如圖所示:

查看9000和9001的信息

9000是HDFS的入口9001是MapReduce的JobTracker的入口

從以上圖中可以確定Ip地址為192.168.1.241.

第二步:通過網(wǎng)頁查看節(jié)點(diǎn)的個(gè)數(shù)。在瀏覽器中輸入http://localhost:50070

以上看到LiveNodes的個(gè)數(shù)為2,說明啟動(dòng)成功。

第三步:上傳大文件。具體步驟如圖所示:

通過網(wǎng)頁查看運(yùn)行狀況:

大文件已經(jīng)上傳成功.文件的大小是244.91MBlock的大小是64M。所以每個(gè)節(jié)點(diǎn)能夠有4個(gè)Block。

Replication為2,表明每個(gè)Block有2個(gè)備份。

查看節(jié)點(diǎn)的使用情況:

從圖中可以看出,此文件分成了4個(gè)Block。(TotalNumberofblocks:4)。

每個(gè)Block在兩個(gè)節(jié)點(diǎn)上進(jìn)行了備份,分別是192.168.1.241192.168.1.242

hadoop集群至此測試結(jié)束。測試成功。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 防城港市| 德清县| 龙游县| 嘉禾县| 宁明县| 贡觉县| 饶阳县| 石嘴山市| 房产| 永川市| 安图县| 武鸣县| 元氏县| 罗城| 太仓市| 云霄县| 响水县| 赞皇县| 华坪县| 白水县| 桂东县| 巴林右旗| 韶山市| 苍南县| 邵东县| 湖北省| 万全县| 江华| 淮阳县| 乌兰县| 兰州市| 吐鲁番市| 新巴尔虎左旗| 龙陵县| 江西省| 和田市| 克什克腾旗| 商洛市| 柘荣县| 综艺| 奉贤区|