文章更新于:2020-04-09
注:用于汇总大数据相关软件安装教程。
文章目录
-
- 一、软件总览
- 二、安装过程提纲
-
- 2.1、安装 ssh
- 2.2、hadoop
-
- 2.2.1、core-site.xml
- 2.2.2、hdfs-site.xml
- 2.3、hbase
-
- 2.3.1、hbase-env.sh
- 2.3.2、hbase-site.xml
- 2.4、spark
-
- 2.4.1、spark-env.sh
- 2.4.2、sbt 打包声明文件
- 2.5、sbt
-
- 2.5.1、新建 sbt 文件
- 2.5.2、配置 sbt 国内镜像源(可选)
- 三、Enjoy!
一、软件总览
软件名 | 笔者博客 | 下载链接 | 备注 |
---|---|---|---|
安装 SSH | 使用 apt/yum 安装 | 安装 SSH | |
安装 JDK | 下载 JDK | 安装 JDK | |
安装 HADOOP | 下载 HADOOP | 安装 HADOOP | |
安装 HBase | 下载 HBASE | 安装 HBASE | |
安装 SCALA | 下载 SCALA | 安装 SCALA | |
安装 SPARK | 下载 SPARK | 安装 SPARK | |
安装 SBT | 下载 SBT(更多版本) | 安装 SBT | |
安装 MAVEN | 下载 MAVEN | 安装 MAVEN | |
安装 SCALA-IDE | 下载 IDE | 安装 IDE |
二、安装过程提纲
2.1、安装 ssh
稍后再写。。
2.2、hadoop
2.2.1、core-site.xml
2.2.2、hdfs-site.xml
2.3、hbase
2.3.1、hbase-env.sh
2.3.2、hbase-site.xml
2.4、spark
2.4.1、spark-env.sh
2.4.2、sbt 打包声明文件
2.5、sbt
安装 至少需要以下文件:
2.5.1、新建 sbt 文件
- 目录下新建下面文件 ,
并将 目录下的 拷贝到上一级路径下。
- 在
/conf/sbtconfig.txt文件中添加如下内容:
2.5.2、配置 sbt 国内镜像源(可选)
在 路径下新建 文件,
如配置华为云镜像则写入以下内容。
三、Enjoy!
声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!