只需要在namenode节点中安装即可 配置环境变量 将如下内容添加到 ~/.bash_profile中 export HIVE_HOME=/root/software/apache-hive-1.2.1-bin exp…
标签:home
构建大数据平台(五)Hbase集群搭建
一、前提: (1)Hbase服务,是基于zookeeper的,虽然本身自带,但是在这里我们并不使用自带的,而是单独部署。 (2)Hbase使用稳定版本:hbase-1.3.1-bin.tar.gz; (3)可在maste…
Jenkins 数据迁移演练
本次主要讲解jenkins数据迁移的主要几个步骤 1、 到ci/cd机子打包jenkins数据 cd /home tar -cvf jenkins.tar.gz jenkins 2、文件传输到需要迁移的机子,视具体服务器…
HBase 安装和配置
集群安装 环境要求 已经安装Hadoop 下载HBase安装包 http://mirror.bit.edu.cn/apache/hbase/1.2.6/ 解压到任意目录 tar -zxf hbase-1.2.6-bin.…
在hadoop上运行python程序
在hadoop上运行python程序 准备文件 测试文件test.txt (/home/hadoop/input/test.txt) mapper.py (/home/hadoop/input/code/mapper.p…
环境变量(gradle sdk jdk)
public class Test{ public static void main(String[] args){ System.out.println("Hello World."); } } JAVA_HOME =…
Jenkins 从1.x升级到2.x步骤
Jenkins 从1.x升级到2.x步骤 通过echo $JENKINS_HOME 和echo $MAVEN_HOME,确认是否在环境中设置了JENKINS_HOME,MAVEN_HOME,如果没有则在~/.bash_p…
Hbase 安装步骤
1.完成 JDK 安装(略) 2.完成 hadoop 安装(略) 3.把 hbase 安装包复制到 “/usr/local” cd /usr/local tar -zxvf hbase-0.94.…
Ubuntu14.04下Postgresql安装配置
1、安装PostgreSQL,当前版本是9.3 sudo apt-get install -y postgresql 2、修改数据库文件的保存路径(也可不调,默认路径为:/var/lib/postgresql/9.3/m…
hadoop mapreduce的python代码运行
在hadoop上运行python程序 准备文件 测试文件test.txt (/home/hadoop/input/test.txt) mapper.py (/home/hadoop/input/code/mapper.p…
Hive 3.1.0 安装
环境初始化 预先安装mysql 解压安装包 安装Hive 1.解压 tar -zxf apache-hive-3.1.0-bin.tar.gz Set the environment variable HIVE_HOME…
mac系统搭建单节点hadoop
1.下载hadoop http://hadoop.apache.org/releases.html 2.解压下载的hadoop文件 tar -zxvf /HADOOP-VERSION-FULL-PATH.tar.gz 3…