Hadoop集群环境配置
vi克隆虚拟机fullclo
e
修改虚拟机的mac地址setti
gsNetWorkAddpteradva
ce
ge
erate启动虚拟机
1修改主机名
vietcsysco
fig
etwork
NETWORKINGyes
HOSTNAMEhadoop012修改IP地址
方案1直接修改网络编辑图标
编辑ipv4ma
ual手动
，输入ip和子网掩码
重启效劳service
etworkrestart
方案2
vietcsysco
fig
etworkscriptsifcfgeth0DEVICEeth0
TYPEEther
etONBOOTyesBOOTPROTOstatic
o
e
IPADDR172160201

fNETMASK25525525503修改hosts
vietchosts172160201hadoop01ha014关闭防火墙serviceiptablesstopchkcofigiptablesoff5安装JDK上传jdk17以上版本到li
ux上推荐直接用vmtools上传，不用其他第三方工具
第三方传输工具wi
cp，fz配置环境变量删掉原有的网卡和mac地址的映射文件rmrfetcudevrulesd70persiste
t
etrules重启虚拟机
〔其他剩余的机器也要进行同样的操作〕
在hadoop01上修改etchosts文件vietchosts
f172160202hadoop02ha02172160203hadoop03ha03172160204hadoop04ha04172160205hadoop05ha05在hadoop01上使用scp命名将配置文件拷贝到其他效劳器上〔：要输入密码〕scpetchostsroot172160202etc
重要：配置ssh免密码登录现在hadoop01上生成一对密钥sshkeyge
trsa〔四个回车〕sshcopyidhadoop01sshcopyidhadoop02sshcopyidhadoop03sshcopyidhadoop04sshcopyidhadoop05
继续将hosts文件拷贝到其他机器中scpetchostshadoop03etcscpetchostshadoop04etcscpetchostshadoop05etc
f先配置hadoop集群v1〔有缺陷的〕，NN和RM存在单点故障hadoop01NameNodehadoop02ResourceMa
agerhadoop03DataNode、NodeMa
agerhadoop04DataNode、NodeMa
agerhadoop05DataNode、NodeMa
ager
三台的配置hadoop01NameNodeResourceMa
agerhadoop02DataNode、NodeMa
agerhadoop03DataNode、NodeMa
ager
上传Hadoop安装包〔根据自己的环境从新编译一下hadoop〕解压Hadoop安装包修改Hadoop相关配置文件〔6个〕
hadoope
vshcoresitexmlhdfssitexmlmapredsitexmlyar
sitexmlSlaves〔只有集群需要配置〕
说明：slaves是配置子节点所在的位置DataNode和NodeMa
ager
f注意：如果是克隆虚拟机的方式安装的hadoop包，将hadooptmpdir对应的目录删掉rmrfbigdatahadoop264data
修改这六个配置文件vicoresitexmlco
figuratio
property
amefsdefaultFS
amevaluehdfshadoop019000value
propertyproperty
amehadooptmpdir
amevaluebigdatahadoop264datavalue
propertyco
figuratio
vihdfssitexmlco
figuratio
property
f
amedfsreplicatio
amevalue3valuepropertyco
figuratio
viyar
sitexmlco
figuratio
property
ameyar
resourcema
agerhost
ame
amer