dag

小h漫谈(15):Spark运行基本流程

当一个 Spark 应用被提交时,首先需要为这个应用构建基本的运行环境,即由任务控制节点(Driver)创建一个 SparkContext 对象,由 SparkContext 负责与资源管理器(Cluster Manager)的通信以及进行资源的申请、任务的分

executor dag scheduler 2025-02-03 21:49  5

构建分布式账本除了区块链技术还可以用什么?

构建分布式账本除了区块链技术,还可以使用其他技术来实现。例如,有向无环图(DAG)是一种常见的替代技术,它通过使用拓扑排序来组织数据单元,并通过哈希值链接不同数据单元,从而形成一个无向有环图。这种技术不需要像区块链那样将所有数据打包成区块,因此在某些场景下可能

分布式 拜占庭 dag 2025-01-09 06:31  10