hadoop3.10 安装配置

论坛 期权论坛 脚本     
匿名技术用户   2020-12-27 20:55   431   0

我的环境:ubuntu16

hadoop下载地址: http://mirrors.hust.edu.cn/apache/hadoop/common/

hadoop3所需环境:jdk8以上,ssh,pdsh

参考文章

http://www.powerxing.com/install-hadoop/

https://blog.csdn.net/weixin_39198406/article/details/79314164

https://blog.csdn.net/z309637962/article/details/79179205

小白建议按照第一篇安装,讲的很详细,这里补充几点因版本不同出现打问题。


一、sbin/start-dfs.sh时提示错误

解决:在/etc/pdsh下面新建文件rcmd_default,写入ssh,然后回车

见http://mowblog.com/start-dfs-sh%E6%8F%90%E7%A4%BArcmd-socket-permission-denied/

二、环境变量配置

~/.profile与~/.bashrc都可以,区别见https://blog.csdn.net/c406495762/article/details/62902871

但是运行hadoop时需要在/usr/local/hadoop/etc/hadoop/hadoop-env.sh中配置

export JAVA_HOME=/usr/local/jdk #此处为jdk路径

三、

hdfs-site.xml、core-site.xml配置,见第三篇文章



分享到 :
0 人收藏
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

积分:7942463
帖子:1588486
精华:0
期权论坛 期权论坛
发布
内容

下载期权论坛手机APP