我们是否还需要另外一个新的数据处理引擎?当我第一次听到flink的时候这是我是非常怀疑的。 在大数据领域,现在已经不缺少数据处理框架了,但是没有一个框架能够完全满足不同的处理需求。 自从Apache spark出现后,貌…
标签:框架
Spark介绍、环境搭建及运行
Apache Spark 简介 Apache Spark 是什么 Apache Spark是一个分布式计算框架,旨在简化运行于计算机集群上的并行程序的编写。该框架对资源调度,任务的提交、执行和跟踪,节点间的通信以及数据并…
Gradle 中 exclude group 关键字运用
开发中添加了一个第三方框架,结果框架里的 design 包为25,我的版本为24,由于网络原因,不想下载.但是或报错. Error:Failed to resolve: com.android.support:desig…
五种大数据处理架构Hadoop、Storm、Samza、Spark、Flink
大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。 本文将…
常用框架
功能类: okhttp网络请求3.4.1https://github.com/square/okhttp retrofit网络请求2.1.0https://github.com/square/retrofit RxJav…
网络请求框架对比
HttpClient 高效稳定,但是维护成本高昂,故android 开发团队不愿意在维护该库而是转投更为轻便的HttpUrlConnection HttpUrlConnection 在android 2.2及以下版本中H…
起点爬虫-scrapy实践
通过这几个月以来对爬虫的基础库的研究和使用之后,个人觉得已经可以进一步拓展技能深度,学习当今流行的开源爬虫框架。当然,前期的调研工作需要做好,即了解下目前市场上的主流爬虫框架。 经过初步搜索,市面上流行的主要就Scrap…
RPC框架Pigeon简析(一)
最近有些时间对我曾经用过的RPC框架做一个回顾,所以顺便写了些东西,也算是一个记忆吧。 这里以我曾经用过的pigeon为例,目前该框架是开源的,所以也比较方便我去分析,主要是没有版权问题:)。 该框架主要分为以下几个部分…
Android常用开发框架
收集了一些比较常见的开源库,特此记录(已收录350+)。另外,本文将持续更新,大家有关于Android 优秀的开源库,也可以在下面留言。 一 、基本控件 TextView HTextView 一款支持TextView文字…
Android -Okhttp框架 工具类
网络请求的封装 package com.lt.okhttpfirst.helper; import android.content.Context; import com.squareup.okhttp.Cache; i…
2019-02-20 分布式服务框架原理与实践
目录 编辑 第1章应用架构演进1 1.1传统垂直应用架构2 1.1.1垂直应用架构介绍2 1.1.2垂直应用架构面临的挑战4 1.2RPC架构6 1.2.1RPC框架原理6 1.2.2最简单的RPC框架实现8 1.2.3…
PHP 新手入门指南 - PHP 框架
对于 Web 开发者来说,PHP 是一款非常强大而又受欢迎的编程语言。世界上很多顶级的网站都是基于 PHP 开发的。例如,Facebook 就是利用 PHP 来创建和维护他们的内部系统;流行的开源博客系统 WordPre…