今天花了一些时间,过了一下这几年自己用Python开发的自动化测试框架,然后将其中常用到Python库抽出来,简单整理了一下它们的用处。我觉得,只要掌握了这些常用的Python库,足以应对大多数自动化测试框架和工具的开发…
分类:kafka
【技术总结】一起聊聊Kubernetes
上次talk show我们介绍了Docker,它具有轻量级,易操作,易部署等优点。 Why Kubernetes? 下图是一个真实的Docker脚本。 这个脚本用于构建一个镜像,脚本要提前运行生成镜像。一般的shell脚…
重构工业物联网大数据处理平台的存储栈(下)
在上篇文章中,我们介绍了工业物联网平台的基本架构和特征,阐述了设计工业物联网平台会遇到的挑战,从而引出了“以数据流向为核心”的设计理念。本文将重点阐述数据流平台的设计思想,以解决上文中提出的挑战。 作者:DellEMC中…
大数据学习路线指南(最全知识点总结)
大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段,处理的数据量通常是TB级,甚至是PB或EB级的数据,这是传统数据处理手段所无法完成的,其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等…
史上最全的大厂Mysql面试题在这里!
1、MySQL的复制原理以及流程 基本原理流程,3个线程以及之间的关联; 主:binlog线程——记录下所有改变了数据库数据的语句,放进master上的binlog中; 从:io线程——在使用start slave 之后…
TiDB Binlog 源码阅读系列文章(一)序
作者:黄佳豪 TiDB Binlog 组件用于收集 TiDB 的 binlog,并准实时同步给下游,如 TiDB、MySQL 等。该组件在功能上类似于 MySQL 的主从复制,会收集各个 TiDB 实例产生的 binlo…
支持异构消息引擎!滴滴开源分布式消息中间件DDMQ
本文由 「AI前线」原创(ID:ai-front),原文链接:支持异构消息引擎!滴滴开源消息中间件DDMQ 策划编辑|Tina 作者|臧磊,江海挺 编辑|Debra AI 前线导读:滴滴出行消息队列团队近日开源了其内部广…
如何进入大数据领域,学习路线是什么?
学习大数据首先我们要学习Java语言和Linux操作系统,这两个是学习大数据的基础,学习的顺序不分前后。Java大家都知道Java的方向有JavaSE、JavaEE、JavaME,学习大数据要学习那个方向呢?只需要学习J…
开源 GIS 技术简史
摘要: – 1.1、GIS 的起源: MOSS and GRASS – 1.2、GIS 的发展:GeoTools, GDAL, PostGIS 和 GeoServer – 1.3、创新…
大数据架构师——目录
怎么成为一个架构师? 如果只是职称上面的,那就错了。 什么样的能力,能称得上架构师呢? 1.大靠山:能解决问题,做最后的技术保障。 2.灯塔:避免走弯路,能判断技术选型的适应范围。 3.善分享:愿意帮助他人的心态,不怕被…