1 前言 Mycat安装比较简单,这里就简单说一下。如果有不清楚的地方,可以Baidu一下,网上很有相关资源,也可以直接访问Mycat官网。http://www.mycat.io/ 2 Mycat安装 2.1 从Myca…
标签:集群
如何配置Kubernetes以实现最大程度的可扩展性
Kubernetes的设计初衷是要解决管理大规模容器化环境时的困难。不过,这并不意味着Kubernetes在任何的环境下都可以进行扩展。有一些方法可以让用户最大限度地发挥Kubernetes的扩展能力,而在扩展Kuber…
学习笔记TF064:TensorFlow Kubernetes
AlphaGo,每个实验1000个节点,每个节点4个GPU,4000 GPU。Siri,每个实验2个节点,8个GPU。AI研究,依赖海量数据计算,离性能计算资源。更大集群运行模型,把周级训练时间缩短到天级小时级。Kube…
学习笔记TF064:TensorFlow Kubernetes
AlphaGo,每个实验1000个节点,每个节点4个GPU,4000 GPU。Siri,每个实验2个节点,8个GPU。AI研究,依赖海量数据计算,离性能计算资源。更大集群运行模型,把周级训练时间缩短到天级小时级。Kube…
一步一步来实践,MySQL主从配置
本打算买个云数据,为我的新项目做点安全保障。阿里云,腾讯云转了一圈,两个字太贵。不就数据有备份吗,既然这样那我不如自己来做备份。 家里有2个树莓派直接把mysql备份到他们上就好了,网上有教程,这就开整。在segment…
hadoop HA高可用集群模式搭建指南
简述 hadoop 集群一共有4种部署模式,详见《hadoop 生态圈介绍》。 HA模式的集群里面会部署两台NN(最多也只能两台),以形成主备NN节点,达到高可用的目的。两台NN之间同步数据有两种方法:QJM和NFC。本…
5分钟让你了解 ZooKeeper 的功能和原理
一 .Zookeeper功能简介 ZooKeeper 是一个开源的分布式协调服务,由雅虎创建,是 Google Chubby 的开源实现。 分布式应用程序可以基于 ZooKeeper 实现诸如…
Redis集群(一)安装配置和简便槽分配
为什么要用Redis集群 Redis集群是Redis提供的分布式数据库方案,集群通过分片(sharding)来进行数据提供,并提供复制和故障转移功能。 学习记录以下几点: 节点 槽指派 命令执行 重新分片 转向 故障转移…
基于springBoot的zookeeper集群搭建(dubbo2.*版本)
主机系统环境准备 Jdk1.7+,window系统(使用window10+window7),或者linux系统(本次测试使用centos7) 第一步:主机名称到ip地址映射配置 zookeeper集群中具有两个关键的角色…
Zookeeper配置中的Group和Weight
简单理解 Zookeeper的集群有一个法则,整个集群的数量要过半存活,集群就是稳定的。在这法则之外,官方文档中还提供了Group和Weight的配置。Zookeeper的Group配置的意思就是对整个大的zk集群进行分…
redis集群设置密码
redis集群设置密码 1,如果是使用redis-trib.rb工具构建集群,集群构建完成前不要配置密码,集群构建完毕再通过config set + config rewrite命令逐个机器设置密码 2,如果对集群设置密…
通过hadoop distcp进行集群间数据迁移
问题描述 我所在的部门是BI,平时业务计算有两个Hadoop集群A和B。其中一个集群A因为大部分业务线计算都在上面,最近开始经常出问题,并且计算变慢。为了进行热备,决定把A集群的计算迁到B上一份,新抽取的数据可以在A和B…