如题，一生文名寂寞的卡夫卡，估计是想不到自己死后会被追认成一代文宗吧。他的创作具有一种独特的风格，用平静冷淡的语言写荒诞压抑的故事，重在表现压抑的感情，其还特意营造寓言式的风格，使其在晦涩的作品中传达隐秘的意义。 |生平…

摘要 看过前面几篇博客的盆友可能会问，逼逼了这么多还不知道消息到底存到哪儿了，分明标题党嘛。这一次我们就来看与存储切实相关的底层操作类FileMessageSet。它是MessageSet的一个子类，操作消息和文件之间的…

1.啤酒化妆品Manufaktura是一种传统的捷克品牌的化妆品，它使用全天然，非动物成分来生产高质量的产品。 虽然他们制作从沐浴盐到护手霜等各种各样的化妆品 ，但最著名的是啤酒化妆品，其中包括洗发水，护发素和沐浴露。 …

Flume-agent内部架构：Flume-agent内部架构如封面，图片来源Welcome to Apache Flume。 1. 下载flume及kafka 地址：http://flume.apache.org/版本…

Spark 实战, 第 2 部分:使用 Kafka 和 Spark Streaming 构建实时数据处理系统 https://www.ibm.com/developerworks/cn/opensource/os-cn-…

0x00 背景知识 基本上想去用flume的同学都知道点flume的用途了。flume是一个分布式，可靠的，易用的，可以将不同源的日志进行，收集，汇总，或者存储的中间件。 0x01 使用场景 数据来源：系统现有日志，有p…

因为Kafka 依赖ZooKeeper，所以需要先安装ZooKeeper。 ZooKeeper 安装ZooKeeper，并设置dataDir $ wget http://mirrors.cnnic.cn/apache/z…

总的来说不算太难，面试官也是根据你简历上写的点来问，对于实习生没有太为难，然后对于后端开发有一个基础的认识就OK。 一面 大概面了50分钟，从java基础、项目、框架、设计模式等各个方面做了提问。对于技术难点没有太深究，…

一、大数据平台 大数据在工作中的应用有三种： 与业务相关，比如用户画像、风险控制等； 与决策相关，数据科学的领域，了解统计学、算法，这是数据科学家的范畴； 与工程相关，如何实施、如何实现、解决什么业务问题，这是数据工程师…

在开发环境中，为减少服务器成本和提高开发效率，通常在一台测试服务器部署各种服务，使用不同的本地 IP 和不同端口号将涉及到集群的服务往往跑在一台机器上模拟集群，在这里我们称做伪集群。 最近在研究一个矿池的源码，在搭建服务…

1、删除kafka存储目录（server.properties文件log.dirs配置，默认为”/tmp/kafka-logs”）相关topic目录 2、Kafka 删除topic的命令是： ./…

kafka集群安装 前提 一、安装包获取 二、安装kafka 三、Kafka命令行操作 本人是一名在校大三学生，所选专业大数据技术，为了毕业能有一份可观的工作， 目前正在致力于努力学习中，在学习中的一些笔记和经验，希望可…