声明:作者原创,转载注明出处。 作者:帅气陈吃苹果 1、下载Hadoop压缩包 wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.6.5/hado…
分类:MapReduce
Hadoop CentOS 7 安装配置
本篇根据 给力星 改动而来,文尾有来源 简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 [1] H…
HDFS+MapReduce+Hive+HBase十分钟快速入门
1. 前言 本文的目的是让一个从未接触Hadoop的人,在很短的时间内快速上手,掌握编译、安装和简单的使用。 2.  …
「译」 MapReduce in MongoDB
在这篇文章里面,我们会演示如何在 MongoDB 中使用 MapReduce 操作。我们会用 dummy-json 这个包来生成一些虚假的数据,然后用 Mongojs 如果想要快速看到结果,可以到 这里 里看看。 什么是…
MRJob 十分钟入门: 用 Python 轻松运行 MapReduce
概览 前言 本教程取材翻译于mrjob v0.5.10 documentation。有删减。最近在学mapreduce, 用到mrjob,在网上没有找到好的中文教程,就自己翻译了一下官方文档的重点。 简介 mrjob是用…
2018年第24周-大数据的YARN
Hadoop可以说是一个大型的操作系统,HDFS就是其文件系统,那么YARN就是其计算系统。 YARN (Yet Another Resource Negotiator,另一种资源协调者)是一种新的 Hadoop 资源管…