上一节介绍了DynamoDB 的查询，本来计划这一节介绍使用索引的查询，不过随机看到了更新操作，就先写更新操作吧 update (修改表中的数据) SQL 语言提供用于修改数据的 UPDATE 语句。DynamoDB 使…

一 .Zookeeper功能简介     ZooKeeper 是一个开源的分布式协调服务，由雅虎创建，是 Google Chubby 的开源实现。 分布式应用程序可以基于 ZooKeeper 实现诸如…

Hadoop 是一个能够对大量数据进行分布式处理的软件框架。分布式集群框架通常是Hadoop+Hbase+Zookeeper做分布式集群 ZooKeeper跟HadoopCore、HBase有什么关系呢？ZooKeepe…

SDN分布式集群 修改后记得 maven clean install 分布式事务之2PC和3PC storm – 可靠机制 kafka 分布式消息系统：Kafka Kafka剖析（一）：Kafka背景及架构介…

程序在单台应用的时候，程序上完全可以用synchronized同步锁来限制多线程对共享资源的访问，但在分布式环境下同步锁无法控制不同进程之间的线程，这种情况下就需要找一种单进程可串行处理的“锁”， 所以产生了分布式锁这个…

研究一款产品的时候，我们要从设计，架构的角度，来考虑其设计者为何要这样设计，这样设计的优点是什么，缺点是什么，其适用场景是什么，还有没有更好的解决方案． 在研究其实现时，也不能仅仅思考其功能上是如何实现的，还要考虑如何保…

在一次工作中，出现了一个小意外，一个存在redis写与读的方法中得出的结果总是和预想的不一样，后面仔细思考了以后，发现是因为集群中各个节点都使用共享的缓存、队列这些，有些场景中各个节点之间可能会发生资源竞争，可能会发各个…

文章也同时在个人博客 http://kimihe.com/更新 1. 引言 笔者目前已经开启了博士预科，方向偏系统工程，涉及到分布式架构的设计与改进。Apache基于Google的MapReduce体系开发的hadoop…

锁是开发过程中十分常见的工具，在处理高并发请求的时候和订单数据的时候往往需要锁来帮助我们保证数据的安全。 场景1.前端点击太快，导致后端重复调用接口。两次调用一个接口，这样就会产生同一个请求执行了两次，而从用户的角度出发…

深度剖析Spark分布式执行原理

分布式锁的几种实现方式 概述 目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性（Consistency）…

ZooKeeper是一个典型的发布/订阅模式的分布式数据管理与协调框架，开发人员可以使用它来进行分布式数据的发布与订阅。另一方面，通过对ZooKeeper中丰富的数据节点类型进行交叉使用，配合Watcher事件通知机制，…