方案规划 centOS6.10 + win10
- 方案
|
主机名 |
ip |
软件 |
|
node1 |
192.168.1.101 |
jdk,zookeeper,hadoop,spark,scala,hbase,hive,kafka,canal |
|
node2 |
192.168.1.102 |
jdk,zookeeper,hadoop,spark,scala,hbase,hive,kafka,canal |
|
node3 |
192.168.1.103 |
jdk,zookeeper,hadoop,spark,scala,hbase,hive,kafka,canal |
|
物理机 |
192.168.1.111 |
jdk,secureCRT&FX,IDEA |
- 版本
| 集群软件版本列表 | ||
| jdk-8u221 | apache-hive-2.3.7 | |
| hadoop-2.7.3 | hbase-1.4.13 | |
| zookeeper-3.4.5 | sqoop-1.4.7 | |
| spark-2.3.0 | kafka_2.12-2.2.2 | |
| scala-2.11.12 | canal.deployer-1.1.1 | |
| apache-hive-1.2.2 | ||
环境准备：虚拟环境准备
集群搭建
安装JDK
- 解压 tar -zxvf jdk-8u231-linux-x64.tar.gz -C /usr//local/java/
- 修改环境变量 vim /etc/profile
- 刷新环境变量 source /etc/profile
安装Hadoop ： Hadoop：集群搭建(2.0+)
安装HBase ： HBase 介绍 + 集群搭建
安装sqoop： Sqoop 介绍 + 配置使用
安装saprk：后续补充
声明：本站部分文章及图片源自用户投稿，如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢！