源码走读到这个阶段，其实整个 Hdfs 的交互流程都已经完全走读完了，虽然肯定有一些细节的地方没有进行走读，但是不会影响对整个 Hdfs 的架构认知。 这一篇文章也将是整个 Hdfs 源码走读的最后一篇，在本文中，将介绍…

前言：在Hadoop 1.x版本，HDFS集群的NameNode一直存在单点故障问题：集群只存在一个NameNode节点，它维护了HDFS所有的元数据信息，当该节点所在服务器宕机或者服务不可用，整个HDFS集群都将处于不…

zookeeper是一个类似hdfs(Hadoop分布式文件系统或HDFS是基于Java的分布式文件系统，允许您在Hadoop集群中的多个节点上存储大量数据。因此，如果您安装Hadoop，您将HDFS作为底层存储系统来存…

HBase一个十分高效的非关系型数据库。可以处理 百亿行X百万列的数据量，且速度在毫秒级，很强大！ 1. Hbase 特点 面向列 HBase是面向列的存储和权限控制，并支持独立检索，根据数据的增加，动态增加列。 多版本…

hive介绍 Hive 基于Hadoop的一个数据仓库工具，构建于hadoop的hdfs和mapred之上，用于管理和查询结构化/非结构化数据的数据仓库。可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。…

janusgraph 0.2.0 相关问题与解决方案 由于janusgraph 0.2.0的lib文件夹下面缺少hadoop-hdfs-2.7.2.jar,需要手动添加相关文件到lib文件夹下面。 No FileSyst…

官方参考文档： http://hbase.apache.org/book.html 0x00    前提 1.Zookeeper正常运行 2.Hadoop HDFS正常运行 具体请参照上一篇文章：Ha…

HDFS常用命令 1.启动与关闭hadoop $ cd /usr/local/hadoop $ ./sbin/start-dfs.sh #启动hadoop $ cd /usr/local/hadoop $ ./sbin/…

一、环境安装 3台服务器的搭建，为了好描述我把服务器的地址分成hadoop1、hadoop2、hadoop3, 实际生产环境可以用域名来代替。 注意：配置里面尽量用域名，不要用IP，因为我曾经用IP配置出现了主机服务器联…

zookeeper与HDFS 在2.0之前HDFS中只有一个NameNode，但对于在线的应用只有一个NameNode是不安全的，故在2.0中对NameNode进行抽象，抽象成NamService其下包含有多个NameN…

公司内网环境，发现ambari的collector进程启动，但是无数据显示，查看日志后，提示无法连接hdfs的mater，到master节点查看hdfs日志，提示安全模式开启 到了这一步就基本判定是block出现了问题，…

HBase是Hadoop的分布式数据库，用于大数据存储。是独立于Hadoop但依赖其HDFS的另一个开源项目。项目的目标是用于支持大数据表：十亿级的行数和百万级的列数。Hbase也是个分布式的、开源的、描述性的、非关系型…