本文基于 incubator-livy 0.4.0-incubating 关于Apache Livy(下文简称 livy)是什么以及有什么用,请移步:Livy:基于Apache Spark的REST服务 一、实现思路 在…
标签:server
Spark History Server 架构原理介绍
也可以看我的CSDN的博客 https://blog.csdn.net/u013332124/article/details/88350345 Spark History Server 是spark内置的一个http服务…
kerberos体系下的应用(yarn,spark on yarn)
kerberos 介绍 阅读本文之前建议先预读下面这篇博客 kerberos认证原理—讲的非常细致,易懂 Kerberos实际上一个基于Ticket的认证方式。Client想要获取Server端的资源,先得通…
【译】Cloudera Manager(CDH)入门系列之二 (架构)
请输入图片描述 扫码关注微信公众号”Kooola大数据” <font color=grey size=1 >扫码关注微信公众号号”Kooola大数据”,一起聊聊…
CDH5快速入门手册
CDH5快速入门手册 标签:CDH5 1. 体系架构 CM分为Server与Agent两部分及数据库(自带更改过的嵌入Postgresql), 它主要做三件事件: 1.管理监控集群主机; 2.统一管理配置; 3.管理维护…
Spark Streaming 妙用之实现工作流调度器
之前有说过要设计一个工作流调度器。开发一个完善的工作流调度器应该并不是一件简单的事情。但是通过Spark Streaming(基于Transfomer架构的理念),我们可能能简化这些工作。我在这块并没有什么经验,这只是一…
spark thrift server 查询日志留存
spark thrift server的web ui在运行时可以看到sql查询的提交用户,执行sql等信息 image.png image.png 但是当这个实例停掉或者异常终止以后,你再去spark history s…
【MySQL】MGR入门指南
原文:https://dev.mysql.com/doc/refman/8.0/en/group-replication-getting-started.html 译者:kun 最近在翻译MySQL8.0官方文档 本文是…
MySql的使用解析
一 进入退出mysql 登录MYSQL 语法如下: mysql -u用户名 -p用户密码 例如: 用户名:root,密码:root. 键入命令mysql -u root -p, 回车后提示你输入密码,输入root,然后回…
【MySQL】MySQL审计操作记录
server_audit是一款内嵌在mariadb的审计插件,在mysql中同样适用,主要用于记录用户操作 1.安装: 通过show variables like 'plugin_dir';查看你的插件目录, 我的是:/…
mysql的innodb引擎索引优化
在数据量较小时,innodb引擎会自行优化,有时候不会使用索引。 创建数据库: /* Navicat Premium Data Transfer Source Server : 127.0.0.1 Source Serv…
【MySQL】组复制背景
原文:https://dev.mysql.com/doc/refman/8.0/en/group-replication-background.html 译者:kun 最近在翻译MySQL8.0官方文档 第18章组复制部…