1.下载hbase wget http://mirrors.shu.edu.cn/apache/hbase/1.2.6/hbase-1.2.6-bin.tar.gz tar zxvf hbase-1.2.6-bin.ta…
标签:bin
ARM平台安装HBASE数据库
/* HBase是一个分布式的、面向列的开源数据库。在上一篇文章中我在ARM板集群上搭建了Hadoop环境,现在继续在此基础上安装HBASE数据库。基本软件环境和硬件配置也请参考上面那篇文章。 */ 1. 下载安装包 去…
HBase学习
HBase是一个开源的,分布式的,多版本的,面向列的存储模型。 官网: http://hbase.apache.org/ 安装(伪分布模式) 注:alias dfs="$HADOOP_HOME/bin/hdfs dfs"…
利用shell脚本抓取执行的sql语句
#!/bin/bash #this script used montor mysql network traffic.echo sql tcpdump -i eth0 -s 0 -l -w - dst port 3306…
CentOS 7下MongoDB的安装配置
一、Mongodb安装 以下安装步骤全部以dp用户执行 1. 下载mongodb 3.4.2的安装包: “mongodb-linux-x86_64-rhel70-3.4.2.tgz”,放在~/software下。 2. …
MAC Spark安装和环境变量设置
本文使用的是Spark和python结合Spark的API组件pyspark 安装Spark之前确保已有JDK环境和python环境(本文为JDK1.8.0_60和python3.6.5) Spark安装 1.官网下载s…
转载:Spark的运行架构分析(二)
转载:Spark的运行架构分析(二)之运行模式详解 一:Spark On Local 此种模式下,我们只需要在安装Spark时不进行hadoop和Yarn的环境配置,只要将Spark包解压即可使用,运行时Spark目录下…
【Spark入门】搭建Spark单节点本地运行环境
搭建步骤 使用的系统是macOS,搭建步骤如下: 下载Spark 下载地址:http://spark.apache.org/downloads.html 下载后的放置目录: /Users/anthony/Library …
spark-2.2.0安装和部署——集群学习日记
前言 在安装后hadoop之后,接下来需要安装的就是Spark。 scala-2.11.7下载与安装 具体步骤参见上一篇博文 Spark下载 为了方便,我直接是进入到了/usr/local文件夹下面进行下载spark-2…
51cto赵强HADOOP学习(十一)Hive安装
安装模式 嵌入模式 元数据信息被存储在Hive自带的Derby数据库中 只允许创建一个连接 多用于Demo hadoop用伪分布 #start-all.sh #tar -zxvf apache-hive-0.13.0-b…
Spark学习(Python版本):学习笔记目录
这个系列是跟着林子雨老师的子雨大数据之Spark入门教程(Python版)所做的学习笔记。 软件源以及版本: spark-2.1.0-bin-without-hadoop.tgz spark-2.1.0-bin-h27h…
windows hadoop
测试用windows 下无守护进程的 hadoop和虚拟机linux下的hadoop配合使用 环境变量 HADOOP_INCLUDE : D:\soft\hadoop-2.7.3 PATH : %HADOOP_INCLU…