如题所述
hadoop一键安装伪分布式
hadoop伪分布式和hive在openSUSE中的安装
在git上的路径为:https://github.com/huabingood/hadoop--------/tree/master
各个文件夹内容
一.lib文件夹,主要存放使用到的jar包
1. dom4j.jar 主要是用来解析xml文档的jar包
2. JavaStudy.jar 具体执行解析xml文档的jar包
3. mysql-connector-java-5.1.42-bin.jar hive中需要的Java连接MySQL数据库的驱动jar包
二.software文件夹,主要存放要安装的hadoop生态安装包
1. hadoop-2.6.0-cdh5.10.0.tar.gz CDH的hadoop安装包
2. hive-1.1.0-cdh5.10.0.tar.gz CDH的hive安装包
三.script文件夹,主要是一键安装的脚本
1. main.sh 主调函数,顺序执行安装步骤
2. install-env.sh 主要是安装需要用到的各种参数,比如安装目录,MySQL连接信息,xml配置信息等。有部分配置需要根据不同的机器进行修改。
3. functions.sh 安装步骤,主要是供main.sh调用的函数。不需要修改
如何执行
一.完成Linux环境的基本配置
1. 安装好Java
2. 安装好mysql
3. 停用防火墙
4. 配置网络,并能ping通外网
5. 设置好主机名
二.创建文件夹用于存放安装问价夹
1. root用户下修改/opt文件的权限
chown 用户名 /opt
2. 普通用户创建文件存放脚本的文件夹
mkdir /opt/install
3. 将安装文件夹放到刚才创建的文件夹中
4. 赋予脚本的执行权限
chmod 777 functions.sh install-env.sh main.sh
修改install-env.sh配置自己的安装环境
添加脚本的安装路径
添加MySQL的连接参数
给出要运行的Java的安装路径