静态分区static partition:手动输入数据分区名称。 动态分区dynamic partition:通过数据来判断数据分区名称。 开启动态分区：set hive.exec.dynamic.partition=t…

安装mysql centos7安装mariaDB 安装mysql教程1 安装mysql教程2 安装教程3 安装mysql教程4 hadoop版本和hive版本要兼容 2.7hdp兼容1.2hive 安装HIVE教程1 重…

Hive2.3版本的安装 参考文章： http://m.blog.csdn.net/lym152898/article/details/77334997 注意事项： 下载的mysql-connector-java-5.1…

文本文件数据编码 csv 逗号分割值 tsv 制表符tab分割值 hive默认是文本文件格式，默认的字段分隔符是^A，行分隔符是\n，可以指定 row format delimited fileds terminated…

一、hadoop2.6.4 hive-2.1.1 presto-server-0.172.tar.gz, jdk1.8u121 二、配置 hadoop搭建分布式集群 hive搭建配置 安装 将文件上传到安装目录下/usr…

环境 hadoop2.7.1+ubuntu 14.04 hive 2.0.1 集群环境 namenode节点：master (hive服务端) datanode 节点：slave1,slave2（hive客户端） hiv…

1.进入hive客户端 >hive 2.查看数据库 >show databases; 3.查看表 >show tables; 4.对表进行的查询操作与sql几乎相同，需要注意的是尽量不要查看或操作过多数…

安装hive包 [CDH下载地址]（http://archive.cloudera.com/cdh5/cdh/5/） 1、将hive-0.13.1-cdh5.3.10.tar.gz使用WinSCP上传到sparkproj…

数据库 数据库，仅仅是表的一个目录、命名空间，如果没有指定则默认使用default数据库。 create database xx; create database if not exists xx; show datab…

[root@dn001 ~]# hive Logging initialized using configuration in file:/etc/hive/conf/hive-log4j.properties SLF4…

Hive SQL的能力 Hive’s SQL提供了基本SQL操作。这些操作作用于表和分区，具有以下能力： 可使用WHERE过滤表中的行 可使用SELECT选择表中指定的列 可进行表连接 可使用group by…

Hive中SQL的优化技巧，核心思想是避免数据倾斜。 1、避免在同一个查询中同时出现count, distinct,group by 2、left join 时把小数据量的表放在前面 3、尽量使用子查询 参数配置 SET…