时间:2023-06-28 18:48:02 | 来源:网站运营
时间:2023-06-28 18:48:02 来源:网站运营
虚拟机部署hadoop集群:参考文章192.168.10.100 hadoop100192.168.10.101 hadoop101192.168.10.102 hadoop102192.168.10.103 hadoop103192.168.10.104 hadoop104192.168.10.105 hadoop105
vi /etc/sysconfig/network-scripts/ifcfg-ens33
进行修改添加TYPE=EthernetPROXY_METHOD=noneBROWSER_ONLY=no# 将dhcp改为static,dhcp表示动态获取ip,static为固定ipBOOTPROTO=staticDEFROUTE=yesIPV4_FAILURE_FATAL=noIPV6INIT=yesIPV6_AUTOCONF=yesIPV6_DEFROUTE=yesIPV6_FAILURE_FATAL=noIPV6_ADDR_GEN_MODE=stable-privacyNAME=ens33UUID=058b7a7a-1bea-4058-be18-2244d061018cDEVICE=ens33ONBOOT=yes# 添加ip地址IPADDR=192.168.10.100# 网关GATEWAY=192.168.10.2# dns解析器DNS1=192.168.10.2
修改主机的hostnamevi /etc/hostname
配置host映射,相当于ip地址起别名(跟绑定域名一个道理)vi /etc/hosts
添加如下192.168.10.100 hadoop100192.168.10.101 hadoop101192.168.10.102 hadoop102192.168.10.103 hadoop103192.168.10.104 hadoop104192.168.10.105 hadoop105
重启服务器reboot
测试是否有网络ping meethigher.top
由于跟多rpm包在官方仓库是没有的,Centos需要额外安装一个软件仓库yum install epel-release # 加上-y表示自动选是
关闭防火墙、关闭防火墙自启systemctl stop firewalldsystemctl disable firewalld.servicefirewall-cmd --state #查看防火墙状态
实际开发中,单个服务器的防火墙关闭,对整个集群设置防火墙创建普通用户和其密码
useradd meethigher #创建用户passwd meethigher #设置该用户密码 提示输入密码
授予用户最高权限vi /etc/sudoers
在wheel后面追加## Allows members of the 'sys' group to run networking, software, ## service management apps and more.# %sys ALL = NETWORKING, SOFTWARE, SERVICES, STORAGE, DELEGATING, PROCESSES, LOCATE, DRIVERS## Allows people in group wheel to run all commands%wheel ALL=(ALL) ALL # 下面是追加内容 # 所有的用户都在wheel这个组里,所以需要放到他的后面,如果放到他的前面,最后会被wheel的值给覆盖# 第二个All如果改成NOPASSWD:ALL表示切换root时可以不用输密码meethigher ALL=(ALL) ALL
切换用户su meethigher
创建存储开发工具的文件夹sudo mkdir /opt/modulesudo mkdir /opt/software
如果不是命令行版的系统,需要卸载自带的jdkrpm -qa|grep -i java|xargs -nl rpm -e --nodeps# rpm -qa:查询所安装的所有 rpm 软件包# grep -i:忽略大小写# xargs -n1:表示每次只传递一个参数# rpm -e --nodeps:强制卸载软件
reboot重启# 进入环境变量路径下cd /etc/profile.d/
创建java_env.shsudo vi java_env.sh
添加环境变量JAVA_HOME=/opt/module/jdk1.8PATH=$PATH:$JAVA_HOME/binexport JAVA_HOME PATH
然后刷新环境变量source /etc/profile
输入java -version
、javac -version
查看版本如果提示没有java命令,则可能是安错版本了。比如,你是64位(x64)的,结果安装了32(x86)位
cd /etc/profile.d/
创建hadoop_env.shsudo vim hadoop_env.sh
添加环境变量HADOOP_HOME=/opt/module/hadoop3.3PATH=$PATH:$HADOOP_HOME/binPATH=$PATH:$HADOOP_HOME/sbinexport HADOOP_HOME
刷新环境变量source /etc/profile
输入hadoop version
查看版本信息关键词:部署,虚拟