配置参数详解(主要是%ZOOKEEPER_HOME%/conf/zoo.cfg文件) 参数名说明 clientPort客户端连接server的端口,即对外服务端口,一般设置为2181吧。 dataDir存储快照文件sna…
标签:zk
Zab系列4 zookeeper特性
特性 类似于Raft系统,zookeeper也有 log 和 状态机的概念,zk中的状态机是一棵内存树。 zk写的顺序是 先写到日志中保存命令,再运用到内存树中,再返回客户端 zk的读操作不需要转发到leader,每个N…
Zookeeper 扩容实战
场景描述: zookeeper 版本 3.4.6 现有zk集群是五台, myid分别为 0, 1, 2, 3, 4 三地机房 (1). 机房1, 现有集群在该机房, 主机房, 服务的主要流量在该机房. 目前zk的5台机器…
[zookeeper 系列] curator 分布式锁InterProcessMutex
写这篇文章的目的主要是为了记录下自己在zookeeper 锁上踩过的坑,以及踩坑之后自己的一点认识; 从zk分布式锁原理说起,原理很简单,大家也应该都知道,简单的说就是zookeeper实现分布式锁是通过在zk集群上的路…
学习zookeeper
最近研究了一下zookeeper(后续以zk简称),对于一个自认为泡在服务器领域多年的老油条来说,现在才开始关注zk这个东西,其实有点晚了,但没办法,以前的工作经历让我压根用不到这个玩意。只是最近因为要考虑做ledisd…
Zookeeper之JAVA API学习笔记
Zookeeper提供了多种编程语言API来编写Zookeeper(后面简称zk)客户端程序,典型的如JAVA和C语言。在本文中,我们介绍如何使用Java Api。本文包含如下章节的内容: 开发环境配置客户端 基本流程 …
HBASE & ZK搭建
一、机器 配置/etc/hosts, 且ssh信任关系已配置 10.139.25.208 mhbase.sogou-in.domain mhbase 10.134.74.173 s1hbase.sogou-in.doma…
Zookeeper 环境搭建&zk命令详解
1. 安装 1.1 下载zookeeper 下载网址:http://www.apache.org/dyn/closer.cgi/zookeeper 1.2. 解压 tar zxvf zookeeper-3.4.8.tar…
安装配置Zookeeper和Kafka集群
环境配置参考 ELK环境配置 安装配置zookeeper 部署在zk集群节点机器上(最少需要三台) 安装zookeeper tar zxf zookeeper-3.4.9.tar.gz mv /opt/elk/zooke…
Zookeeper简单使用
zookeeper命令行操作 运行 zkCli.sh –server <ip>进入命令行工具 使用 ls 命令来查看当前 ZooKeeper 中所包含的内容: ls / 创建一个新的 znode ,使用 cr…
Zookeeper运维小结--CancelledKeyException
项目中用到storm+kafka+zookeeper,在实际应用中zk和kafka常出问题,这里记录下在使用zk过程中的问题。 注:zk版本是3.4.8,kafka是0.8.2.0。zk、storm和kafka都是运行在…
sparkstreaming将offset存到hbase
之前一直将offset存到zookeeper,由于streaming程序会对zk有大量的读取操作,故将offset存到zk不太好,现已将offset都改到hbase中 kafka版本:0.10.2.0 spark版本:2…