厦门大学林子雨教授大数据技术原理及应用课程问题处理集锦
問題一:
關于“ Classorg.apache.hadoop.hdfs.DistributedFileSystem not found ”的問題
解決辦法:
參考網址一
參考網址二
問題二:
hdfs命令行上傳文件報錯org.apache.hadoop.ipc.RemoteException(java.io.IOException)
解決問題參考網址:
解決辦法網址
問題三:
啟動hbase時出現 問題:Java HotSpot? 64-Bit Server VM warning: INFO: os::commit_memory(0x00000000c5330000, 986513408
查看完整log .可以分析出 這個是因為內存不足。
解決辦法參考:
https://cloud.tencent.com/developer/article/1612297
問題四:
關于問題 “ WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-java classes where applicable ”
不能加載到native-hadoop庫問題
解決辦法:
在hadoop下/etc/hadoop/hadoop-env.sh文件下后面添加下方配置:
export HADOOP_OPTS=
“-Djava.library.path=${HADOOP_HOME}/lib/native”
參考博客:博客網址
問題五:
啟動hbase 時出現
解決添加交換空間:
可參考 https://blog.csdn.net/rosefun96/article/details/109300958
其中,糾正上述參考博客里邊內容:
查看swap使用情況:
總結
以上是生活随笔為你收集整理的厦门大学林子雨教授大数据技术原理及应用课程问题处理集锦的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 【转】linux su和sudo命令的区
- 下一篇: Unix——百度百科