写了一些大数据开发中经常用到的脚本分享给有需要的人。
主要包含以下脚本:
linux 基础环境构建脚本
- 安装基础软件 vim rsync lrzsz wget
- 关闭防火墙
- 修改主机名
- 添加 hosts 映射
- 配置静态 Ip
- 创建工作目录
- 创建普通用户
- 配置 SSH 免密登录
java 集群构建脚本
- 为集群安装 java 环境
hadoop 集群构建脚本
- 为集群安装 hadoop
zookeeper 集群构建脚本
- 为集群安装 zookeeper
jpsall
查看集群所有机器的 jps 进程
xcall
一处命令,同步到集群所有机器上执行
xsync
集群文件分发
hadoop_cluster.sh
Hadoop 集群 启动/停止/重启 脚本
zk_cluster.sh
Zookeeper 集群 启动/停止/重启/查看状态 脚本
脚本地址: