1 Spark设计目的 设计的目的就是能快速处理多种场景下的大数据问题,能高效挖掘大数据中的价值,从而为业务发展提供决策支持。 2 Spark特点 Spark特点: 1.轻量级快速处理 Spark通过减少磁盘IO来达到性…
标签:磁盘
Spark 之RDD
为什么要设计RDD 网上资料很多,这里我给罗列出来,许多的迭代算法和交互式数据挖掘工具,这些应用场景的共同点是:在不同的运行阶段或者说是计算阶段,都会重用中间…
MySQL听讲(三)——索引
索引前言 索引,简单来说,就是数据库的目录。目的是为了提高查询效率。 索引依赖于数据结构,所以每一种索引除了自身的优缺点外,还有该数据结构的优缺点: 数据结构 适用场景 使用场景时间复杂度 缺点 hash索引 等值查询 …