hadoop搭建時(shí)容易踩得坑(錯(cuò)誤合集一)-創(chuàng)新互聯(lián)

錯(cuò)誤合集1
    • 1、配置靜態(tài)ip時(shí)錯(cuò)誤
    • 2、啟動(dòng)HDFS服務(wù)，DataNode沒啟動(dòng)的錯(cuò)誤
    • 3、防火墻沒關(guān)閉、或者沒有啟動(dòng)YARN
    • 4、主機(jī)名稱配置錯(cuò)誤
    • 5、IP地址配置錯(cuò)誤
    • 6、ssh沒有配置好
    • 7、root用戶和atguigu兩個(gè)用戶啟動(dòng)集群不統(tǒng)一
    • 8、配置文件修改不細(xì)心
    • 9、未編譯源碼
    • 10、不識(shí)別主機(jī)名稱
    • 11、DataNode和NameNode進(jìn)程同時(shí)只能工作一個(gè)。
    • 12、執(zhí)行命令不生效，粘貼word中命令時(shí)，遇到-和長–沒區(qū)分開。導(dǎo)致命令失效
    • 13、jps發(fā)現(xiàn)進(jìn)程已經(jīng)沒有，但是重新啟動(dòng)集群，提示進(jìn)程已經(jīng)開啟。
    • 14、jps不生效。
    • 15 、8088端口連接不上

為息縣等地區(qū)用戶提供了全套網(wǎng)頁設(shè)計(jì)制作服務(wù)，及息縣網(wǎng)站建設(shè)行業(yè)解決方案。主營業(yè)務(wù)為成都網(wǎng)站制作、做網(wǎng)站、息縣網(wǎng)站設(shè)計(jì)，以傳統(tǒng)方式定制建設(shè)網(wǎng)站，并提供域名空間備案等一條龍服務(wù)，秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務(wù)。我們深信只要達(dá)到每一位用戶的要求，就會(huì)得到認(rèn)可，從而選擇與我們長期合作。這樣，我們也可以走得更遠(yuǎn)！1、配置靜態(tài)ip時(shí)錯(cuò)誤

錯(cuò)誤：配置好了靜態(tài)ip，配置文件沒有任何問題，重啟虛擬機(jī)，ip還是會(huì)還原或者變
原因分析：NetworkManager皆在能夠讓Linux用戶更輕松的處理現(xiàn)代網(wǎng)絡(luò)需求，尤其是無線網(wǎng)絡(luò)，能夠自動(dòng)發(fā)現(xiàn)網(wǎng)卡并配置IP地址
解決方法：就是關(guān)閉NetworkManager，重新修改配置文件，再重啟網(wǎng)絡(luò)服務(wù)

systemctl stop NetworkManager
systemctl disable NetworkManager
#修改配置文件ip即可
vim /etc/sysconfig/network-script/ifcfg-enss33
#重啟網(wǎng)絡(luò)服務(wù)
service network restart

到此問題1成功解決

2、啟動(dòng)HDFS服務(wù)，DataNode沒啟動(dòng)的錯(cuò)誤

錯(cuò)誤：啟動(dòng)HDFS服務(wù)，DataNode沒有啟動(dòng)
分析原因：多次格式化NameNode導(dǎo)致
解決方法：簡單粗暴

#找到HDFS數(shù)據(jù)存儲(chǔ)目錄刪除
rm -rf /opt/module/hadoop文件/data/*
#接著重新格式化
hadoop namenode -format

注意：格式化完成下次開機(jī)就不要再格式化NameNode

3、防火墻沒關(guān)閉、或者沒有啟動(dòng)YARN

INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032

4、主機(jī)名稱配置錯(cuò)誤 5、IP地址配置錯(cuò)誤 6、ssh沒有配置好 7、root用戶和atguigu兩個(gè)用戶啟動(dòng)集群不統(tǒng)一 8、配置文件修改不細(xì)心 9、未編譯源碼

Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 17/05/22 15:38:58 INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032

10、不識(shí)別主機(jī)名稱

java.net.UnknownHostException: hadoop102: hadoop102 at java.net.InetAddress.getLocalHost(InetAddress.java:1475) at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:146) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1290) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1287) at java.security.AccessController.doPrivileged(Native Method) at javax.security.auth.Subject.doAs(Subject.java:415)
解決辦法：
在/etc/hosts文件中添加192.168.1.102 hadoop102
主機(jī)名稱不要起hadoop hadoop000等特殊名稱

11、DataNode和NameNode進(jìn)程同時(shí)只能工作一個(gè)。

在這里插入圖片描述

12、執(zhí)行命令不生效，粘貼word中命令時(shí)，遇到-和長–沒區(qū)分開。導(dǎo)致命令失效

解決辦法：盡量不要粘貼word中代碼。

13、jps發(fā)現(xiàn)進(jìn)程已經(jīng)沒有，但是重新啟動(dòng)集群，提示進(jìn)程已經(jīng)開啟。

原因是在linux的根目錄下/tmp目錄中存在啟動(dòng)的進(jìn)程臨時(shí)文件，將集群相關(guān)進(jìn)程刪除掉，再重新啟動(dòng)集群。

14、jps不生效。

原因：全局變量hadoop java沒有生效。解決辦法：需要source /etc/profile文件。

15 、8088端口連接不上

[hduser@hadoop102 桌面]$ cat /etc/hosts 注釋掉如下代碼 #127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 #::1 hadoop102

最后：歡迎大家多多補(bǔ)充

貧僧會(huì)寫代碼博客
在這里插入圖片描述

你是否還在尋找穩(wěn)定的海外服務(wù)器提供商？創(chuàng)新互聯(lián)www.cdcxhl.cn海外機(jī)房具備T級(jí)流量清洗系統(tǒng)配攻擊溯源，準(zhǔn)確流量調(diào)度確保服務(wù)器高可用性，企業(yè)級(jí)服務(wù)器適合批量采購，新人活動(dòng)首月15元起，快前往官網(wǎng)查看詳情吧

本文標(biāo)題：hadoop搭建時(shí)容易踩得坑(錯(cuò)誤合集一)-創(chuàng)新互聯(lián)
網(wǎng)站URL：http://muchs.cn/article10/pgggo.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供移動(dòng)網(wǎng)站建設(shè)、定制網(wǎng)站、微信公眾號(hào)、靜態(tài)網(wǎng)站、品牌網(wǎng)站建設(shè)、App開發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)

成都定制網(wǎng)站網(wǎng)頁設(shè)計(jì)