暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

Hadoop集群安装

IT那活儿 2025-01-13
89
点击上方“IT那活儿”公众号--专注于企业全栈运维技术分享,不管IT什么活儿,干就完了!!!  

安装环境


基础准备工作

2.1 配置/etc/hosts文件

vi etc/hosts,三台主机均要修改:

2.2 查看/关闭防火墙

2.3 时间同步,安装ntp服务器

master、slave1、slave2。

2.4 免密钥登录

2.5 Java安装和配置三台虚拟机都需要配置

2.6 配置环境变量

Zookeeper安装与配置

3.1 master机器

解压安装包:

配置文件zoo.cfg:

3.2 slave1和slave2机器

安装slave1和slave2机器的zookeeper:
修改slave1和slave2机器myid的内容:
修改slave1和slave2中的/etc/profile:

3.3 启动zookeeper


Hadoop安装与配置

4.1 master机器的安装配置

创建Hadoop的安装目录:
解压hadoop软件:
配置环境变量(三台机器都需要进行配置)
修改Hadoop-env.sh:
修改core-site.xml:
修改yarn-site.xml:
修改hdfs-site.xml:
修改mapred-site.xml:
修改/usr/hadoop/hadoop-2.7.3/etc/hadoop/slaves:
创建/usr/hadoop/hadoop-2.7.3/etc/hadoop/master:

4.2 slave1和slave2机器的安装配置

4.3 格式化hadoop

启动Hadoop:

结束Hadoop:



END


本文作者:事业二部(上海新炬中北团队)

本文来源:“IT那活儿”公众号

文章转载自IT那活儿,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论