使用Sqoop从MySQL导入数据到Hive和HBase 及近期感悟 Sqoop 大数据 Hive HBase ETL 使用Sqoop从MySQL导入数据到Hive和HBase 及…
分类:nosql
关系型数据库与NoSQL的对比
SQL(结构化的查询语言)数据库是过去四十年间存储数据的主要方式。20世纪90年代末随着Web应用和MySQL、PostgreSQL和SQLite等开源数据库的兴起,用户爆炸式的增长。 NoSQL数据库自从20世纪60年…
关于这个专栏
今天开了个Elasticsearch的专栏,为啥开这个专栏?因为在互联网上找了很久,与Elasticsearch有关的文章,要么是介绍语法,要么是介绍运维经验,很少有从系统,内核层介绍的。就算是介绍语法或者运维经验,都很…
Redis命令详解:Keys
介绍完Redis连接相关命令后,再来介绍一下与Key相关的命令,Redis作为一个key-value数据库,对Key进行操作是无法避免的。 DEL 最早可用版本1.0.0 删除指定的键值对,如果指定的key不存在,则忽略…
redis数据迁移
前期准备 在进行数据迁移之前,一定要做好迁移前的准备。 环境调研,源和目标数据库环境、版本、数据量大小、业务场景、操作系统版本等 方案准备,尽量详细、迁移失败导致源数据库挂了是否有数据备份回退方案 人员角色到齐,数据迁移…
如何利用数据架构带动企业增长?
对于架构师而言,技术的发展是无尽的,在搭建和实践智能数据架构的过程中,架构师们都会或多或少地遇到一些疑惑和挑战,如何解决在架构建设中遇到的某些问题?架构建设的领域又有什么新的行业动态和技术方法? 近日,在个推TechDa…
Redis的特性以及优势(附官网)
NoSQL:一类新出现的数据库(not only sql) 泛指非关系型的数据库 不支持SQL语法 存储结构跟传统关系型数据库中的那种关系表完全不同,nosql中存储的数据都是KV形式 NoSQL的世界中没有一种通用的语…
CAP定理、ACID模型、BASE模型
参考资料:http://www.jdon.com/37625 CAP定理:在理论计算机科学中,CAP定理(CAP theorem),又被称作布鲁尔定理(Brewer’s theorem),它指出对于一个分布式…
NoSQL数据库技术实战-第1章 NoSQL与大数据简介 NoSQL产生的原因
NoSQL产生的原因: 关系型数据库不擅长的操作,是NoSQL应运而生的原因: 大量的数据写入操作书上写的是“大量数据的写入操作“,我理解的应该是“大量的数据写入操作”,因为大量的数据写入操作才会引起并发,并发和锁是关系…
Hadoop技术简介
1. 概述 1.1 简介 hadoop 擅长日志分析,facebook 就用 Hive 来进行日志分析,2009 年时 facebook 就有非编程人员的 30%的人使用 HiveQL 进行数据分析;淘宝搜索中的 自定义…
10个大数据领域的杰出公司
本文筛选了近几年在大数据领域具有独特建树的10家企业,涵盖云计算、数据可视化、数据分析应用、商业智能等不同范畴。在大数据领域虽然国外的优秀企业占众多数,但是国内也有不少企业在国数据应用市场创造了不可磨灭的贡献。所以,这1…
Amazon DynamoDB 入门8:删除项目
上一篇介绍了DynamoDB 的更新,这一篇将会介绍项目删除操作和dynamoab-py 从表中删除数据 在 SQL 中,DELETE 语句从表中删除一个或多个行。DynamoDB 使用 DeleteItem 操作一次删…