1.Hive 日志位置 [hadoop@hadoop001 ~]$ cd $HIVE_HOME/conf [hadoop@hadoop001 conf]$ cat hive-log4j.properties.templa…
标签:hive
Hive中的内部表以及外部表
Hive中的Managed Table以及External Table 原文:Hive中的Managed Table以及External Table(译) Hive有两种类型的表: Managed Table 内部表 E…
Hive配置事务
Hive从0.14版本开始支持事务和行级更新,但缺省是不支持的,需要一些附加的配置。要想支持行级insert、update、delete,需要配置Hive支持事务。 Hive具有ACID语义事务的使用场景 1. 流式接收…
hive中条件判断函数if/COALESCE/CASE/
•If函数: if •非空查找函数: COALESCE •条件判断函数:CASE • If 函数 语法: if(boolean testCondition, T valueTrue, T valueFalseOrNull…
Hive 分区字段限制
hivesql分区字段不可以有中文,否则会报错如下: Failed with exception MetaException(message:javax.jdo.JDOException: Exception throw…
spark从入门到放弃四十:hive on spark
文章地址:http://www.haha174.top/article/details/259225 知识背景(1) hive 是目前大数据领域,事实上的sql 标准。其底层默认是基于MapReduce实现的,但是由于M…
HBase+Phoenix进行报表统计及查询的分析与考虑
本文主要是对使用HBase进行报表统计及按非RowKey字段进行查询的思考。 在文章开始之前很有必要简单介绍一下HBase适用的场景 HBase是Hadoop Database的简称,也就是基于Hadoop的数据库,是一…
配置Hive支持update
配置 hive-site.xml配置参数(CDH的配置参考如下图) hive.support.concurrency=true hive.enforce.bucketing=true hive.exec.dynamic.…
关于Hive正则表达式
正则表达式(Regular Expression)是一种文本模式,包括普通字符(例如,a 到 z 之间的字母)和特殊字符(称为”元字符”)。 正则表达式使用单个字符串来描述、匹配一系列匹配某个句法…
Hive DML&分区表
1.INSERT 官网说明: INSERT OVERWRITE TABLE tablename1 [PARTITION (partcol1=val1, partcol2=val2…)[IF NOT EXIST…
Hive实践分享:存储和压缩的坑
码代码,写程序,总是麻烦一大堆。Hive在存储和压缩的时候,总是避免不了踩进坑里面。今天,我们一起来看看一位大神Hive实践分享:存储和压缩的坑。 这位大神最近在阿里云跑数据,想分析一下借款用户的行为路径轨迹,由于数据量…
<>学习笔记(一)----数据类型和文件格式
Hive支持关系型数据库中的大多数基本数据类型,同时也支持关系型数据库中很少出现的3种集合数据类型。 一、数据类型 以下截图内容来自Hive官方文档 1.1 数值类型 Hive日期/时间类型 1.3字符串类型 Hive其…