Apache Hive可以帮助您快速查询和管理大型数据集。 它是Hadoop生态系统的ETL工具。 在本教程中,您将学习Hive的重要主题,如HQL查询,数据提取,分区,bucket等。 Hive简介 Hive是在Had…
分类:Hive
Spark SQL(一)入门介绍
假设有如下文本文件: id, name, age, city 1001,zhangsan,45,beijing 1002,lisi,35,shanghai 1003,wangwu,29,tianjin ……
微商AI教程
微商AI最新防封代码,稳定,安全,6.7.2版本,已修复所有已知问题 图片发自简书App 图片发自简书App 常用功能使用介绍如下: 图片发自简书App 图片发自简书App 图片发自简书App 图片发自简书App 图片发…
Hive元数据基础
一、存储Hive版本的元数据表 1.version:存储Hive版本 version表存hive的版本信息,该表中数据只有一条,如果存在多条,会造成hive启动不起来。 mysql> SELECT * FROM V…
06-Hive高级01
Hive高级 1)产生背景 2)部署 3)DDL 4)DML 5)JOIN 6)function:build-in & udf 7)Sqoop hive cli:hive/webui/beeline/Java A…
大数据学习之Hive进阶
Hive不支持传统数据库中insert插入操作,可通过load语句和sqoop进行数据的导入。 数据的导入 使用load语句执行数据的导入 使用load语句 -语法:load data [local] inpath ‘f…
最简大数据Spark-2.1.0
0.0 前言 本文主要基于最新的Spark 2.1.0版本。阅读本文可以对Spark 2.1.0的学习过程,运行流程,关键组件,原理有所了解。文章有点长,你也可以直接阅读感兴趣的部分,但是还是建议全面了解。 1.0 简介…
Hive安装与使用
简介 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 安装 API hive ddl 如果文件数…
Spark访问与HBase关联的Hive表
Spark访问与Hbase关联的Hive表需要引用jar 包 hive-hbase-handler-<version>.jar 不然要报错 MetaException(message:java.lang.Cl…
一起学Hive系列文章
转载:http://lxw1234.com/archives/2015/07/365.htm 这一系列都是转载,做个学习记录 [一起学Hive]之一–Hive概述,Hive是什么 [一起学Hive]之二–Hive函数大全…
Spark填坑之旅
0 背景 公司最近迁移 Hadoop 集群到堡垒机内部,我顺手把这些机器统一重命名了一下,折腾了几个小时,集群终于正常上线。但是其他部门的同事跑来说 spark-sql 不能建表了,报错如下: Error in quer…
Hadoop安装指南
hadoop单机/伪分布式安装指导链接: hadoop集群安装 HDFS学习资源: HDFS入门 Hbase学习资源: Hbase入门 数据库汇总: mongodb安装及操作 Redis安装及操作 MySQL安装及入门 …