董的博客 » Hadoop Streaming 编程 http://dongxicheng.org/mapreduce/hadoop-streaming-programming/ 1、概述 Hadoop Streamin…
标签:hadoop
hadoop+hive使用中遇到的问题汇总
http://godlovesdog.iteye.com/blog/1897602
hadoop – Cloudera Manager安装无法从代理接收心跳 – 将新主机添加到群集
我尝试使用标准版在Ubuntu 12.04.1 LTS上安装cloudera管理器,当我想添加新主机时,我得到下一个错误: Installation failed.Failed to receive heartbeat …
大数据Hadoop Hive sql语法详解无标题文章
时间:2017-08-16 19:36:53 来源:CSDN Hive 是基于Hadoop 构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系…
Spring集成Hadoop和Hbase
hadoop是大数据环境下必备的一套系统,使用hadoop集群可以充分的共享服务器资源,在离线处理上已经有了多年的应用。 Spring Hadoop简化了Apache Hadoop,提供了一个统一的配置模型以及简单易用的…
Hadoop 部署使用
Hadoop 使用笔记 1、单机部署 环境准备 centos 7,作为系统环境 hadoop 版本使用hadoop-2.8.2 在安装 Hadoop 前还需要做一些必备工作 1、 创建hadoop用户 #这条命令创建了可…
Spark系列--OutputFormat 详解
前言 本文主要内容 什么是OutputFormat及其运行机制? 如何自定义自己的OutputFormat? 实战自定义mysql OutputFormat。 一丶什么是OutputFormat? 定义了 spark 的…
搭建Hadoop-HA + ZooKeeper + Yarn + Hive环境
前提:搭建Hadoop-HA + ZooKeeper + Yarn环境 node01 node02 node03 node04 NameNode01 NameNode02 NameNode03 DataNode01 Da…
alluxio安装 集群模式
alluxio1.8.0版本集成hive metastor时存在连接耗时较长的问题,更换1.7.1版本后正常,安装步骤相同 官方安装文档:https://www.alluxio.org/docs/1.8/cn/Getti…
docker中安装hadoop过程及错误解决
本文主要记录build 支持hdfs的docker过程中遇到的问题,以及解决方法。 自己写的Dockerfile文件,可以参考学习下: # Creates pseudo distributed hadoop 2.7.1 …
0基础学习hadoop怎么学?怎么进行hadoop入门学习
学hadoop需要什么基础?Hadoop作为大数据工业中的主引擎,Hadoop就像是大数据世的一把钥匙,想要进入数据世界,首先你得显得得到这把钥匙,才能打开大门。那么科多大数据带你来看看。 学hadoop需要什么基础?H…
ubuntu16.04 给hadoop2.7.7 配置yarn
1.安装hadoop 2.配置yarn cd /usr/share/hadoop/hadoop-2.7.7/etc/hadoop 配置yarn-site.xml sudo vim yarn-site.xml <co…