什么是Redis的主从复制 主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。前者称为主节点(master),后者称为从节点(slave);数据的复制是单向的,只能由主节点到从节点。 默认情况下,…
标签:节点
【译】使用MongoDB时,如何停止失控的索引创建过程?
【原文】https://scalegrid.io/blog/how-to-stop-a-runaway-index-build-in-mongodb/ 【译文】 在MongoDB上建索引可能会对MongoDB集群对可用性…
ZooKeeper、Eureka对比
简介 Eureka本身是Netflix开源的一款提供服务注册和发现的产品,并且提供了相应的Java封装。在它的实现中,节点之间相互平等,部分注册中心的节点挂掉也不会对集群造成影响,即使集群只剩一个节点存活,也可以正常提供…
mac下安装及使用zookeeper
安装zookeeper 1.下载zookeeper https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.4.9/ 2.解压,在conf目录下…
Spark硬件配置及性能调研报告
Spark官方推荐硬件配置 存储系统 让Spark尽可能的与HDFS运行在同一节点上,最简单的方式是使用Sparkstandalone mode部署Spark,然后分配Spark和Hadoop的内存和CPU使用,避免冲突…
Hadoop机架感知
Hadoop机架感知 (手机码字不容易…) 1.背景 Hadoop在设计时考虑到数据的安全与高效,数据文件默认在HDFS上存放三份,存储策略为本地一份,同机架内其它某一节点上一份,不同机架的某一节点上一份。这…
使用zookeeper实现配置动态管理
zookeeper典型应用场景之一就是利用发布订阅模式实现配置动态管理。基本原理就是将配置信息存在zk的某个节点中,客户端启动时从这个节点读取配置信息,并Watcher,一旦配置发生变化,客户端会接收到变化通知,便可以再…
[DataNode]新增一个HDFS的DataNode节点
新增一个HDFS的DataNode节点 | 干货笔记-OpenSkill-大不六文章网(wtoutiao.com) http://www.wtoutiao.com/p/Z24iFG.html 场景 在hadoop中的分布…
redis生产实战
redis原理简单介绍 redis 3x版本已支持集群模式,集群之间的各个节点至少需要两个TCP连接:一个是为客户端服务的监听端口,一个用于集群之间各个节点的通信。集群版本并没有用到普通的hash算法来对数据进行分区存储…
zookeeper编程01-循环监听
zookeeper可以对某个节点进行监听,监听的事件有以下4种: NodeCreated (节点创建) NodeDeleted (节点删除) NodeDataChanged (节点数据变化) NodeChildrenCh…
新增节datanode点到Hadoop集群
新增节点系统要求 1.CentOS7 2.Java8(任意现有节点/root目录下均有,建议保持一致jdk-8u71-linux-x64.rpm) rpm -Uvh jdk-8u71-linux-x64.rpm 切换正确…