Master定理也叫主定理。它提供了一种通过渐近符号表示递推关系式的方法。应用Master定理可以很简便的求解递归方程。 T(N)=a(N/b)+N^d其中 n 表示原始的样本量, a 表示子过程发生的次数,n/b 表示…
标签:master
缓存架构之Redis(八)Redis选择方案
我之前一直在redis的各个知识点的讲解之前都强调一下,我们要讲解的每个知识点,要解决的问题是什么? redis:持久化、复制(主从架构)、哨兵(高可用,主备切换)、redis cluster(海量数据+横向扩容+高可用…
缓存架构之13:redis哨兵的多个核心底层原理的深入解析(包含slave选举算法)
1、sdown和odown转换机制 sdown和odown两种失败状态 sdown是主观宕机,就一个哨兵如果自己觉得一个master宕机了,那么就是主观宕机 odown是客观宕机,如果quorum数量的哨兵都觉得一个ma…
spark sql with hive
spark standalone spark-1.5.0-bin-hadoop2.6 spark-env.sh配置 export SPARK_MASTER_IP=172.16.31.11 export SPARK_MAS…
HBase 对比 Kudu
对比方面 HBase Kudu 开发语言 Java Java、C++(核心) 数据模型 key-value系统,无模式 强类型的结构化表 软件架构 利用ZK进行Master选举,数据存储到HDFS实现容错 使用Raft协…
[转]Spark-OpenTSDB 设置
https://libraries.io/github/SeelozInc/opentsdb-spark opentsdb-spark Module for accessing OpenTSDB data through…
[第七章] spark 资源调度算法深入剖析
前面几章我们重点讲述了spark的的原理,sparkContext的初使化,spark主备切换,master的注册等。其中我们分析源码时,不管是driver,还是application在注册Master时都,在最后都有这…
Redis Sentinel机制与用法(一)
概述 Redis-Sentinel是Redis官方推荐的高可用性(HA)解决方案,当用Redis做Master-slave的高可用方案时,假如master宕机了,Redis本身(包括它的很多客户端)都没有实现自动进行主备…
主从复制-添加新slave服务器
假如master已经运行很久了,想对新安装的slave进行数据同步,甚至它没有master的数据。 此时,有几种方法可以使slave从另一个服务开始,例如,从master拷贝数据,从另一个slave克隆,从最近的备份开始…
Hive常用设置
切换计算引擎(Hive CLI内设置) 设置MapReduce为计算引擎 set hive.execution.engine=mr; 设置Spark为计算引擎 set hive.execution.engine=spar…
[第九章]Job触发流程原理剖析
上一节我们是不是讲到,Driver,Application注册到Master上面后,Master中调用scheduler()进行资源调度,在这个里面通过LaunchDriver(),LaunchExecutor(),向W…
hbase 常用参数
摘自:http://debugo.com/hbase-params/ 通用和master配置 hbase.rootdir 默认: file:///tmp/hbase-${user.name}/hbase region s…