董的博客 » Hadoop Streaming 编程 http://dongxicheng.org/mapreduce/hadoop-streaming-programming/ 1、概述 Hadoop Streamin…

Mapper任务： Mapper任务是一个名词，用来形容在记录读取器中用来读取每条记录和产生对应中间件键值对儿的过程，Hadoop Mapper存储输出介质数据在本地磁盘上。 2.2 LZO 压缩用法 有一个非常的概念去…

排序、hash分组、压缩格式、内存设定 -Option： -input：输入文件路径 -output：输出文件路径 -mapper：用户自己写的mapper程序，可以是可执行文件或者脚本 -reducer：用户自己写的r…