旅游景点 旅游攻略 日本旅游 文化旅游 旅游景区 昆明旅游 桂林旅游 乡村旅游 上海旅游

在服务器上搭建spark集群环境

时间:2024-11-13 16:19:55

1、运行SecureCRT,连接上要集群的服务器,首先修改selinxu; 命令:vi /etc/selinux/config,将里面的SELINUX=enforcing修改为SELINUX=disabled

在服务器上搭建spark集群环境

2、修改完selinux,然后关闭防火墙;命令:chkconfig iptables off

在服务器上搭建spark集群环境

3、必须修改主机名HOSTNAME;命令:vi /etc/sysconfig/network修改HOSTNAME=spark+IP(例如:spark45)

在服务器上搭建spark集群环境

4、运行命令:service httpd status,检查是否有安装httpd,若没有则可以从yum上安装;具体操作如下:首先先创建yum;命令:vi /etc/yum.repos.d/yum.repo[isoyum]name=isoyumbaseurl=ftp://10.235.136.2/pubenabled=1gpgcheck=0将上面的代码复制上去,保存(注意baseurl修改为自己的yum)

在服务器上搭建spark集群环境在服务器上搭建spark集群环境

5、安装http、并设置启动;安装命令:yum install httpd开机启动命令:chkconfig httpd on

在服务器上搭建spark集群环境在服务器上搭建spark集群环境

6、设置ssh免登陆;命令: scp root@10.235.136.5:/root/.ssh/authorized_keys /root/.ssh/测试10.235.136.5 ssh到各个节点免登陆(注把ip改成自己的服务器)至此,集群环境就搭建好了!

在服务器上搭建spark集群环境
© 2025 途途旅游
信息来自网络 所有数据仅供参考
有疑问请联系站长 site.kefu@gmail.com