hadoop搭建時容易踩得坑(錯誤合集一)-創新互聯

錯誤合集1

- 1、配置靜態ip時錯誤
- 2、啟動HDFS服務，DataNode沒啟動的錯誤
- 3、防火墻沒關閉、或者沒有啟動YARN
- 4、主機名稱配置錯誤
- 5、IP地址配置錯誤
- 6、ssh沒有配置好
- 7、root用戶和atguigu兩個用戶啟動集群不統一
- 8、配置文件修改不細心
- 9、未編譯源碼
- 10、不識別主機名稱
- 11、DataNode和NameNode進程同時只能工作一個。
- 12、執行命令不生效，粘貼word中命令時，遇到-和長–沒區分開。導致命令失效
- 13、jps發現進程已經沒有，但是重新啟動集群，提示進程已經開啟。
- 14、jps不生效。
- 15 、8088端口連接不上

為息縣等地區用戶提供了全套網頁設計制作服務，及息縣網站建設行業解決方案。主營業務為成都網站制作、做網站、息縣網站設計，以傳統方式定制建設網站，并提供域名空間備案等一條龍服務，秉承以專業、用心的態度為用戶提供真誠的服務。我們深信只要達到每一位用戶的要求，就會得到認可，從而選擇與我們長期合作。這樣，我們也可以走得更遠！1、配置靜態ip時錯誤

錯誤：配置好了靜態ip，配置文件沒有任何問題，重啟虛擬機，ip還是會還原或者變
原因分析：NetworkManager皆在能夠讓Linux用戶更輕松的處理現代網絡需求，尤其是無線網絡，能夠自動發現網卡并配置IP地址
解決方法：就是關閉NetworkManager，重新修改配置文件，再重啟網絡服務

systemctl stop NetworkManager
systemctl disable NetworkManager
#修改配置文件ip即可
vim /etc/sysconfig/network-script/ifcfg-enss33
#重啟網絡服務
service network restart

到此問題1成功解決

2、啟動HDFS服務，DataNode沒啟動的錯誤

錯誤：啟動HDFS服務，DataNode沒有啟動
分析原因：多次格式化NameNode導致
解決方法：簡單粗暴

#找到HDFS數據存儲目錄刪除
rm -rf /opt/module/hadoop文件/data/*
#接著重新格式化
hadoop namenode -format

注意：格式化完成下次開機就不要再格式化NameNode

3、防火墻沒關閉、或者沒有啟動YARN

INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032

4、主機名稱配置錯誤 5、IP地址配置錯誤 6、ssh沒有配置好 7、root用戶和atguigu兩個用戶啟動集群不統一 8、配置文件修改不細心 9、未編譯源碼

Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 17/05/22 15:38:58 INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032

10、不識別主機名稱

java.net.UnknownHostException: hadoop102: hadoop102 at java.net.InetAddress.getLocalHost(InetAddress.java:1475) at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:146) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1290) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1287) at java.security.AccessController.doPrivileged(Native Method) at javax.security.auth.Subject.doAs(Subject.java:415)
解決辦法：
在/etc/hosts文件中添加192.168.1.102 hadoop102
主機名稱不要起hadoop hadoop000等特殊名稱

11、DataNode和NameNode進程同時只能工作一個。

在這里插入圖片描述