本文主要包括两部分的内容,第一部分主要包HBase的四种安装方法,分别是:① 单机版模式,② 伪集群模式,③ 使用HBase自带的zookeeper构建分布式集群,④ 使用独立安装的zookeeper构建分布式集群。第二…
分类:Hadoop
Hadoop运行在Kubernetes平台实践
Hadoop与Kubernetes就好像江湖里的两大绝世高手,一个是成名已久的长者,至今仍然名声远扬,一个则是初出茅庐的青涩少年,骨骼惊奇,不走寻常路,一出手便惊诧了整个武林。 Hadoop与Kubernetes就好像江…
hadoop学习遇到的错误4 JAVA操作HDFS下载文件
使用java API操作HDFS,老师说只要掌握了FileSystem这个类就OK(的确,翻了源码,这个类里面的内容还真不少)。 下面写上JAVA操作的代码: “`java package HDFS; imp…
Hadoop 权限认证
最近在Hadoop大数据分析上很流行一个叫/var/tmp/java -c /var/tmp/w.conf的病毒程序,当然了,我本人也被中招了,后来就把在/var/tmp/里面的程序删除了,并且将定时任务crontab也…
Hadoop实验——NoSQL与关系型数据库的比较
实验目的 理解四种数据库(MySQL,HBase,Redis,MongoDB)的概念以及不同点。 熟练使用四种数据库操作常用的Shell命令。 熟悉四种数据库操作常用的Java API。 实验平台 操作系统:Ubuntu…
Hadoop诞生历史
创始人:人称Hadoop之父的Doug Cutting,Apache软件基金会主席,是Lucene、Nutch 、Hadoop等项目的发起人。 最开始Hadoop只是Apache Lucene的子项目Nutch的一部分。…
hbase安装问题记录
stop-hbase.sh stopping hbase………………. Slave2: no zookeeper to stop because n…
hadoop集群管理软件CDH的安装(完全离线)
写于安装前 关于hadoop集群管理软件,我选择了cdh的免费版。本文参照官方文档、网上大神的帖子,加上自己几十次的搭建,踩了无数的坑总结而成。由于每个人的现场环境不同,参照本文档可能会出现报错情况,欢迎留言讨论交流。 …
HBase的Region定位
本文转载自:https://blog.csdn.net/mingyuezh/article/details/80844925 早期 HBase 版本的 Region定位 系统如何找到某个row key (或者某个 row…
【Hadoop学起来】Hadoop2.9.0的单机模式成功运行!!!
正文之前 今天新装了Ubuntu 17.10 感觉贼棒,具体怎么搞双系统大家伙可以看我以前的文章,很详细了。所以我就重新弄了个hadoop,希望本次能成功了。感觉功能更加接近mac了。图形界面也更加有好了。不过这也是趋势…
Hadoop 源码学习笔记(4)--Hdfs 数据读写流程分析
Hdfs 的数据模型 在对读写流程进行分析之前,我们需要先对 Hdfs 的数据模型有一个简单的认知。 数据模型 如上图所示,在 NameNode 中有一个唯一的 FSDirectory 类负责维护文件系统的节点关系。文件…
大数据学习- Hadoop的快速入门
大数据不得不提到最有用的利器Hadoop,本文最快的方式让你上手Hadoop,hadoop快速入门,并且有一个感性的认识,也可以当做步骤的快速索引,本文解决以下问题: 理解Hadoop是什么 Hadoop用于做什么以及怎…