日期函数UNIX时间戳转日期函数: from_unixtime语法: from_unixtime(bigint unixtime[, string format]) 返回值: string 说明: 转化UNIX时间戳（从…

翻译： https://www.cloudera.com/documentation/enterprise/latest/topics/cdh_ig_filesystem_perm.html 版本： 5.14.2 Hiv…

1.使用explain 和 explain extended expain select * from dual; expain extended select * from dual; 2.限制调整 limit 在使用…

利用 hive 做数据查询或者分析的时候，原生的 hive 函数可能无法满足我们的需求，这时候我们可以自定义 hive udf,函数； 自定义 hive udf 函数，有以下两点要求： 函数类必须继承 UDF 类 必须实…

hive中用户可通过4种方式配置hive运行时的参数，分别是： （1）通过配置文件配置    默认设置都在${HIVE_HOME}/conf/hive-default.xml文件中，如果需要修改默认设…

1.修改默认的数据仓库位置，在hive-site.xml文件中配置如下参数： <property>      <name>hive.metastore.warehou…

// Hive 元数据表结构详解 http://mp.weixin.qq.com/s?__biz=MzA3ODUxMzQxMA==&mid=2663993556&idx=1&sn=0e5291bd…

配置hive时出现不能加载自己修改的hive-site.xml等配置文件的问题。发现它总是加载默认的配置文件。 解决： hadoop的配置文件hadoop-env.sh中加上export HADOOP_CLASSPATH…

Hive数据源实战 Spark SQL支持对Hive中存储的数据进行读写。操作Hive中的数据时，必须创建HiveContext，而不是SQLContext。HiveContext继承自SQLContext，但是增加了在…

hive的基本操作 – 奏乐 – 博客园 http://www.cnblogs.com/hankedang/p/5649473.html 指定hive sql 运行队列 set mapreduce…

为提升hive数据的查询和写入性能， hive提供了分区表机制。hive每个表格可以指定多个分区key, 这些分区key决定数据的存储方式，比如表格T有个日期型分区列ds, 表格的数据会存储在：表在hdfs路径/ds=&…

折腾了很久，被领导天天督促&指点，算是有个最基本的性能优化。 1. 背景介绍： Hive使用hive-hbase-handler建立HBase external table。在hive查询包含count(*)、j…