一、sqoop的配置 1、上传压缩包,解压 2、配置环境变量 3、添加数据库驱动包 cp mysql-connector-java-5.1.10.jar /sqoop/lib 4、重命名配置文件 mv sqoop-env…
标签:home
Hbse单机版 + 外部zookeeper安装配置
1.版本介绍 jdk: 1.8.0_111 zookeeper: 3.4.10 hbase: 1.2.6 2.配置环境变量 vi /etc/profile 在最下方加入: export JAVA_HOME=/usr/lo…
Hbase完全分布式安装指南
集群规模 前期准备工作 1.java环境安装 2.修改hosts文件 3.ssh无密码登陆设置 4.关闭防火墙 service iptables stop chkconfig iptables off Hadoop环境搭…
HBase 安装和配置
集群安装 环境要求 已经安装Hadoop 下载HBase安装包 http://mirror.bit.edu.cn/apache/hbase/1.2.6/ 解压到任意目录 tar -zxf hbase-1.2.6-bin.…
【4】安装hbase
环境准备 jdk hadoop zookeeper hbase-2.1.0-bin.tar.gz 安装步骤 解压重命名至/home/common/hbase tar -zxvf hbase-2.1.0-bin.tar.g…
1-Hadoop环境配置
配置 配置时间 2015年5月5日 操作系统 Mint-16,64bit Hadoop版本 2.2.0 安装模式 单机伪分布式 步骤 安装JAVA 下载安装JAVA —— Open-JDK 1.7 64bit 设置环境变…
Hbase 安装步骤
1.完成 JDK 安装(略) 2.完成 hadoop 安装(略) 3.把 hbase 安装包复制到 “/usr/local” cd /usr/local tar -zxvf hbase-0.94.…
Ubuntu14.04下Postgresql安装配置
1、安装PostgreSQL,当前版本是9.3 sudo apt-get install -y postgresql 2、修改数据库文件的保存路径(也可不调,默认路径为:/var/lib/postgresql/9.3/m…
打包方式运行编写的Spark程序
说明:windows环境下编写spark程序,在linux下运行 例:一个简单的求π的spark程序 一、先通过mvn命令打包 mvn clean : mvn package: 二、将生成的jar包,上传到linux(我…
ubuntu pyspark
目的:jieba + python + spark + kafka + streaming 材料…. image.png sudo gedit/ect/profile # add jdk export JAV…
hadoop mapreduce的python代码运行
在hadoop上运行python程序 准备文件 测试文件test.txt (/home/hadoop/input/test.txt) mapper.py (/home/hadoop/input/code/mapper.p…
Hive 基础搭建教程
需要安装Hadoop,教程:Hadoop 基础搭建教程 需要了解Hive基本概念:Hive 基础知识 1. 相关依赖与版本说明 JDK8 Hadoop 2.8.5 Hive2.3.3 一般的,Hive需要一个数据库用来保…