基本概念或假设： 1、FT, Fungible Token 同质化通证，如BTC, ETH 2、NFT, Non-Fungible Token 非同质化通证，如BAYC 3、数字藏品是NFT的一个子集（如下图，需要注意不…

整理自《架构解密从分布式到微服务》第七章——聊聊分布式计算.做了相应补充和修改。 前言 一 不得不说的Actor模型 1.1 Actor模型的诞生与发展 1.2 Actor模型是什么？ 1.3 Actor模型原理简单介绍…

本文为数盟原创译文，欢迎转载，注明出处“数盟社区”即可 作者：Natalino Busa 机器学习，特别是聚类算法，可以用来确定哪些地理区域被一个给定的用户经常访问和“入住”而哪些区域不是。这样的地理分析使范围广泛的服务…

讨论UUID的定义、分类、应用及生成工具。 什么是UUID？ UUID是Universally Unique Identifier的缩写，它是在一定的范围内（从特定的名字空间到全球）唯一的机器生成的标识符。UUID具有以…

从RDDs到Spark – Blueve 湛蓝 http://blueve.me/archives/1437 QQ20160212-2@2x Spark是近年来非常火爆的分布式计算框架，可以说它紧跟Hadoop的脚步，并…

分布式计算的核心思想在没有包裹业务之前并不复杂，简单而言，如果有一个任务（可以是查询，排序，搜索）可以被拆分为互不影响的若干个重复的小任务，那么我们就可以使用多台计算机并行的执行这些小任务。 任务执行必然需要对各种资源进…

关于举办 “Spark大数据处理与案例分析高级工程师” 实战培训班的通知 当下是大数据时代，为构建大数据平台，技术人员需要对分布式计算平台有一定深入的理解和应用。MapReduce作为一个经典的分布式计算框架，已经广为人…

Spark是什么呢？    Spark是一款为快速处理大数据通用计算引擎；负责读取数据，完成分布式计算；弥补了Hadoop的在分布式运算慢的缺点；Hadoop的缺陷：无论是Mapreduce或YARN…

1.hadoop是什么? 一个适合大数据的分布式存储和计算平台. 是一个平台,分布式的存储和分布式的计算,在平台之上跑的一般都是大数据.抽象的层面理解hadoop就是一个分布式的平台. 2.什么是分布式的存储系统? 数据…

内容摘要：hadoop 是Apache开源组织的一个分布式计算开源框架，在很多大型网站上都已经得到了应用，如亚马逊、Facebook和Yahoo等等。 在SIP项目设计的过程中，对于它庞大的日志在开始时就考虑使…

Spark自定义累加器的实现 Java版本： package com.luoxuehuan.sparkproject.spark; import org.apache.spark.AccumulatorParam; /*…