博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
超图大数据环境搭建之单机版hadoop搭建
阅读量:4161 次
发布时间:2019-05-26

本文共 1110 字,大约阅读时间需要 3 分钟。

作者:夕阳

1 准备

1.1 软件版本

hadoop­2.7.3

1.2 绑定 IP 和修改计算机名

1.2.1 修改/etc/hosts,添加 IP 绑定
在这里插入图片描述
1.2.2 修改/etc/hostname,为绑定计算机名。(计算机名和上面 hosts 绑定名必须一致)

1.3 JDK 安装

下载jdk1.8软件包,放到/opt 下解压
1.3.1 将 JDK 环境变量配置到/etc/profile 中
export JAVA_HOME=/opt/jdk
export JRE_HOME=/opt/jdk/jre
export CLASSPATH=$ JAVA_HOME/lib:$ JRE_HOME/lib
export PATH=$ JAVA_HOME/bin:$ PATH
1.3.2 检查 JDK 是否配置好
source /etc/profile
java -version

2 Hadoop 部署

2.1 Hadoop 安装

解压 hadoop­2.7.3软件包 ,并在主目录下创建 tmp、dfs、dfs/name、dfs/node、dfs/data

2.2 Hadoop 配置

以下操作都在 hadoop-­2.7.3/etc/hadoop 下进行
2.2.1 编辑 文件,修改 JAVA_HOME 配置项为 JDK 安装目录
export JAVA_HOME=/opt/jdk
2.2.2 编辑 core-­site.xml 文件,添加以下内容,其中 master 为计算机名,/opt/hadoop­-2.7.3/tmp 为手动创建的目录
在这里插入图片描述
2.2.3 编辑hdfs­-site.xml文件,添加以下内容 其中master为计算机名,file:/opt/hadoop­-2.7.3/dfs/name和file:/opt/hadoop­2.7.3/dfs/data 为手动创建目录
在这里插入图片描述
2.2.4 将mapred-­site.xml.template重命名为mapred­-site.xml,编辑mapred-­site.xml文件,添加以下内容其中master为计算机名
在这里插入图片描述
2.2.5 编辑yarn-­site.xml文件,添加以下内容其中master为计算机名
在这里插入图片描述
2.2.6 修改slaves文件
在这里插入图片描述
2.3 Hadoop启动
2.3.1. 格式化一个新的文件系统,进入到hadoop-­2.7.3/bin下执行:
./hadoop namenode -format
2.3.2. 启动hadoop,进入到hadoop-­2.7.3/sbin下执行:
./start-all.sh
2.3.3. 打开浏览器输入ip:50070能访问则搭建成功

转载地址:http://fivxi.baihongyu.com/

你可能感兴趣的文章
程序员辞掉30W年薪接私活:6个月就能赚回30W,庆幸自己当初辞职
查看>>
马云四天三谈996被骂上热搜:抱歉,这届年轻人不好“骗”了!
查看>>
中国牛逼的程序员有哪些?入职华为两天转正,半个月升主任
查看>>
旁人眼中的程序员与真实的程序员,真是笑死我了!
查看>>
看招聘职位要c语言的占比真不多了,是否c语言真得落伍了?
查看>>
不是程序员都看得懂并爆笑的5个梗, 8秒钟了解面向对象
查看>>
你认为已经过时的C语言,是如何影响500万程序员的?
查看>>
人民日报大家谈:少儿编程热,需要冷思考
查看>>
为什么大学里的计算机老师,不去大公司当程序员呢?
查看>>
程序员集体意识大爆发:996背后的深问题
查看>>
55岁程序员跳槽腾讯?底下回复:98岁保洁复读考上北大!
查看>>
全球21个奇葩注释,程序员的心你不懂
查看>>
C语言中,数组相关知识点介绍
查看>>
35岁程序员裸辞两月,找不到工作,程序员真的是靠吃青春饭的吗?
查看>>
在Linux上高效开发的7个建议
查看>>
网站搭建笔记精简版---廖雪峰WebApp实战-Day1:搭建开发环境笔记
查看>>
网站搭建笔记精简版---廖雪峰WebApp实战-Day2:编写Web App骨架笔记
查看>>
网站搭建笔记精简版---廖雪峰WebApp实战-Day3:编写ORM笔记
查看>>
网站搭建笔记精简版---廖雪峰WebApp实战-Day4:编写Model笔记
查看>>
网站搭建笔记精简版---廖雪峰WebApp实战-Day5:编写Web框架笔记
查看>>