hadoop生态系统的组件hdfs,mapreduce,hive,pig,zookeeper,hbase大家应该都比较熟了,这里简单总结一下其他不太常用的组件的作用。 Oozie Oozie是可扩展可伸缩的工作流协调管理…
分类:nosql
当前最火IT专业术语(以后陆续完善)
我国大数据产业保持高速发展态势,各级政府和企业大力推进,技术创新取得明显突破,大数据应用推进势头良好产业体系初具雏形,支撑能力日益增强。展望未来,大数据产业发展将迎来“黄金期III 在满城尽谈大数据的时代,与时俱进地了解…
hadoop HDFS 总结 - 校招准备
HDFS概述 分布式文件系统特点 超大存储 流式数据访问 适用于一次写入 多次读取 高吞吐吞吐量 不适用于低时间延时的数据访问 Hbase更低延时 不适用于小文件 大量小文件会导致太多的元数据 可以使用相关容器 基本概念…
NoSQL开篇——为什么要使用NoSQL[转]
NoSQL在2010年风生水起,大大小小的Web站点在追求高性能高可靠性方面,不由自主都选择了NoSQL技术作为优先考虑的方面。今年伊始,InfoQ中文站有幸邀请到…
为什么不要使用ionic
首先 我声明一下,黑ionic 和 angularjs 是我毕生的使命。没错,特别是angularjs ,如果你觉得我哪条说的不对 ,请在下面评论回复我,我很喜欢吵架的。嗯,还有我叫Jimmy。 这篇文章写在2016.8…
[硬广] 华为2012实验室分布式数据团队招聘
分布式数据库团队隶属于华为2012实验室-中央软件院-分布式数据实验室,实验室由华为Fellow胡子昂亲自筹建,团队成员来自IBM、TeraData、神通数据库、阿里巴巴等,目前在进行华为自研的分布式数据项目。我本人也是…
Redis常见的应用场景解析
Redis是一个key-value存储系统,现在在各种系统中的使用越来越多,大部分情况下是因为其高性能的特性,被当做缓存使用,这里介绍下Redis经常遇到的使用场景。 Redis特性 一个产品的使用场景肯定是需要根据产品…
mongodb在WEB开发中的应用与实践
一、mongodb是什么? 一套高性能、易开发的文档型数据库。他使用键值对形式存放数据,能够存放包括字符串、数组、数据序列、图片、视频等在内的大多数数据文档。MongoDB完善的设计,搞笑的可编程性使其成为当前NoSQL…
MongoDB 分页查询的方法及性能
最近有点忙,本来有好多东西可以总结,Redis系列其实还应该有四、五、六…不过《Redis in Action》还没读完,等读完再来总结,不然太水,对不起读者。 自从上次Redis之后呢,算是对Nosql类型…
测算Redis处理实际生产请求的QPS/TPS
测算Redis处理实际生产请求的QPS/TPS Benchmark工具 redis发布版本中自带了redis-benchmark性能测试工具; 示例: 使用50个并发连接,发出100000个请求,每个请求的数据为2kb,…
常用NoSql数据库比较
1. CouchDB 所用语言: Erlang 特点:DB一致性,易于使用 使用许可: Apache 协议: HTTP/REST 双向数据复制, 持续进行或临时处理, 处理时带冲突检查, 因此,采用的是mast…
优秀Go存储开源项目和库推荐
Go语言在2016年越来越火热,区块链账本Hyperledger就使用了Go作为主要开发语言,本文整理了一些优秀的 Go 存储相关开源项目和库,希望对大家有所帮助 本文翻译原文来自GitHub,下文具体项目链接可参考 A…