hive的使用方式 1.使用CLI 直接使用hive命令即可进入客户端。 2. 使用hiveserver2服务 修改hdfs-site.xml,core-site.xml 在hdfs-site.xml加上dsf.webh…
标签:hive
HBase和Hive整合
HBase版本:1.2.6 Hive版本:1.2.1 1. 把HIVE_HOME/lib/hive-hbase-handler-1.2.1.jar 复制到HBASE_HOME/lib/下 2. 把HBASE_HOME/l…
hadoop体系的简单学习笔记
Mahout mahout:运行在hadoop集群上的机器学习库 使用mahout: 下载,解压安装包 设置环境变量,编译配置文件 键入mahout --help命令,检查Mahout是否安装完好 在hdfs的目标目录中…
[一起学Hive]之五-Hive的视图和分区
同关系型数据库一样,Hive中也支持视图(View)和分区(Partition),但与关系型数据库中的有所区别,本文简单介绍Hive中视图和分区的示例。 在真实业务场景下,视图的应用比较少,分区使用的非常多,因此建议对分…
hdfs,hive大数据的存储管理和显示管理
1.Hive中内部表和外部表及其对应的hdfs路径 1.1 Hive内部表和外部表的区别 Hive 创建内部表时,会将数据移动到数据仓库指向的路径;若创建外部表,仅记录数据 所在的路径, 不对数据的位置做任何改变。在删除…
[一起学Hive]之六-Hive的动态分区
前面文章介绍了Hive中是支持分区的。 关系型数据库(如Oracle)中,对分区表Insert数据时候,数据库自动会根据分区字段的值,将数据插入到相应的分区中,Hive中也提供了类似的机制,即动态分区(Dynamic P…
Hive行转列实现Pivot
前言 传统关系型数据库中,无论是Oracle(11g之后)还是SQLserver(2005之后),都自带了Pivot函数实现行转列功能,本文主要讲述在Hive中实现行转列的两种方式。 传统数据库方式 这种方式是借鉴在Or…
Hive Beeline使用
// Hive Beeline使用 – 黄刚的技术博客 – 博客频道 – CSDN.NET http://blog.csdn.net/huanggang028/article/deta…
Hive 基础搭建教程
需要安装Hadoop,教程:Hadoop 基础搭建教程 需要了解Hive基本概念:Hive 基础知识 1. 相关依赖与版本说明 JDK8 Hadoop 2.8.5 Hive2.3.3 一般的,Hive需要一个数据库用来保…
6月04日第二十四次早课【Hive】
1. hive数据分为哪两块?分别存储在哪? metadata data | mysql hdfs 2. hive的建表SQL语句你们觉得里有哪些内容?…
Hive-ES配置实例
配置过程如下: 1)添加jar包 add jar file:///path/to/elasticsearch-hadoop-hive-5.2.0.jar; 2)创建一个hive-es对应表 create external…
Hive存储文件命名的规则
Hive命令行 Hive在存储文件时候,有一些文件命名的规则,现在还不是很懂底层的原理,但是把现象记录下来,以备之后讨论。 hive> insert into table db.table PARTITION (p…