大数据常用软件安装指南

大数据常用软件安装指南,第1张

概述一、基础软件安装 Linux 环境下 JDK 安装 Linux 环境下 Python 安装 虚拟机静态 IP 及多 IP 配置 二、Hadoop Hadoop 单机环境搭建 Hadoop 集群环境搭建 基于 Zookeeper 搭建 Hadoop 高可用集群 三、Spark Spark 开发环境搭建 基于 Zookeeper 搭建 Spark 高可用集群 四、Storm Storm 单机环境搭建 一、基础软件安装 Linux 环境下 JDK 安装 Linux 环境下 Python 安装 虚拟机静态 IP 及多 IP 配置 二、Hadoop Hadoop 单机环境搭建 Hadoop 集群环境搭建 基于 Zookeeper 搭建 Hadoop 高可用集群 三、Spark Spark 开发环境搭建 基于 Zookeeper 搭建 Spark 高可用集群 四、Storm Storm 单机环境搭建 Storm 集群环境搭建 五、HBase HBase 单机环境搭建 HBase 集群环境搭建 六、Flume Linux 环境下 Flume 的安装部署 七、Azkaban Azkaban3.x 编译及部署 八、Hive Linux 环境下 Hive 的安装部署 九、Zookeeper Zookeeper 单机环境和集群环境搭建 十、Kafka 基于 Zookeeper 搭建 Kafka 高可用集群 版本说明

由于 Apache Hadoop 原有安装包之间兼容性比较差,所以如无特殊需求,本仓库一律选择 CDH (Cloudera‘s distribution,including Apache Hadoop) 版本的安装包。它基于稳定版本的 Apache Hadoop 构建,并做了兼容性测试,是目前生产环境中使用最为广泛的版本。

最新的 CDH 5 的下载地址为:http://archive.cloudera.com/cdh5/cdh/5/ 。这个页面很大且加载速度比较慢,需要耐心等待页面加载完成。上半部分是文档链接,后半部分才是安装包。同一个 CDH 版本的不同框架间都做了集成测试,可以保证没有任何 JAR 包冲突。安装包包名通常如下所示,这里 CDH 版本都是 5.15.2 ,前面是各个软件自己的版本 ,未避免出现不必要的 JAR 包冲突,请务必保持 CDH 的版本一致。

hadoop-2.6.0-cdh5.15.2.tar.gz hbase-1.2.0-cdh5.15.2hive-1.1.0-cdh5.15.2.tar.gz

更多大数据系列文章可以参见 GitHub 开源项目: 大数据入门指南

总结

以上是内存溢出为你收集整理的大数据常用软件安装指南全部内容,希望文章能够帮你解决大数据常用软件安装指南所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。

欢迎分享,转载请注明来源:内存溢出

原文地址:https://www.54852.com/langs/1191423.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2022-06-03
下一篇2022-06-03

发表评论

登录后才能评论

评论列表(0条)

    保存