让我来告诉你,学习大数据都是要安装哪些软件

文章更新于:2020-04-09
注:用于汇总大数据相关软件安装教程。

文章目录

    • 一、软件总览
    • 二、安装过程提纲
      • 2.1、安装 ssh
      • 2.2、hadoop
        • 2.2.1、core-site.xml
        • 2.2.2、hdfs-site.xml
      • 2.3、hbase
        • 2.3.1、hbase-env.sh
        • 2.3.2、hbase-site.xml
      • 2.4、spark
        • 2.4.1、spark-env.sh
        • 2.4.2、sbt 打包声明文件
      • 2.5、sbt
        • 2.5.1、新建 sbt 文件
        • 2.5.2、配置 sbt 国内镜像源(可选)
    • 三、Enjoy!

一、软件总览

软件名 笔者博客 下载链接 备注
安装 SSH 使用 apt/yum 安装 安装 SSH
安装 JDK 下载 JDK 安装 JDK
安装 HADOOP 下载 HADOOP 安装 HADOOP
安装 HBase 下载 HBASE 安装 HBASE
安装 SCALA 下载 SCALA 安装 SCALA
安装 SPARK 下载 SPARK 安装 SPARK
安装 SBT 下载 SBT(更多版本) 安装 SBT
安装 MAVEN 下载 MAVEN 安装 MAVEN
安装 SCALA-IDE 下载 IDE 安装 IDE

二、安装过程提纲

2.1、安装 ssh

稍后再写。。

2.2、hadoop

2.2.1、core-site.xml

2.2.2、hdfs-site.xml

2.3、hbase

2.3.1、hbase-env.sh

2.3.2、hbase-site.xml

2.4、spark

2.4.1、spark-env.sh

2.4.2、sbt 打包声明文件

2.5、sbt

安装 至少需要以下文件:

2.5.1、新建 sbt 文件

  1. 目录下新建下面文件 ,
    并将 目录下的 拷贝到上一级路径下。
  1. /conf/sbtconfig.txt文件中添加如下内容:

2.5.2、配置 sbt 国内镜像源(可选)

在 路径下新建 文件,
如配置华为云镜像则写入以下内容。

三、Enjoy!

声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2020年3月6日
下一篇 2020年3月6日

相关推荐