分布式技术原理与算法解析 - 15 - 分布式计算模式之MR:一门同流合污的艺术

1、Map:分解原问题为同质的子问题; 2、求解子问题; 3、Reduce:合并值问题的解;

2020-09-20 通过网页

分布式技术原理与算法解析 - 13 - 分布式调度架构之共享状态调度:物质文明、精神文明多手协商抓

多个调度器、共享全局资源状态,每个子集群调度器都可以看到并利用集群的全局资源信息

2020-09-20 通过网页

分布式技术原理与算法解析 - 12 - 分布式调度架构之两层调度:物质文明、精神文明两手抓

中央调度器从整体上进行资源的管理并分配到第二层调度器,第二层调度器根据任务资源需求匹配到节点

2020-09-16 通过网页

分布式技术原理与算法解析 - 11 - 分布式调度架构之单体调度:物质文明、精神文明一手抓

单体调度特点: 1、易于实现全局最优调度策略,适合批处理任务,适合数据量大、执行时间长的任务。 2、易于实现状态同步管理。 3、策略扩展性(任务类型)不强。 4、无调度并发性,存在性能瓶颈、单点故障可能。

2020-09-10 通过网页

分布式技术原理与算法解析 - 10 - 分布式体系结构之非集中式结构:众生平等

解决单点瓶颈、单点故障、并发量问题的集群框架:Akka、Redis、Cassandra

2020-09-10 通过网页

分布式技术原理与算法解析 - 09 - 分布式体系结构之集中式结构:一人在上,万人在下

市面上流行的集中结构框架:Google Borg、Kubernetes、Mesos

2020-09-10 通过网页

分布式技术原理与算法解析 - 08 - 分布式技术是如何引爆人工智能的?

数据、模型(算法)、算力

2020-09-09 通过网页

分布式技术原理与算法解析 - 07 - 分布式锁:关键重地,非请勿入

基于关系型数据库;基于Redis缓存;基于ZooKeeper

2020-09-09 通过网页

分布式技术原理与算法解析 - 06 - 分布式事务:All or nothing

对分布数据库进行事务提交或回滚:二阶段提交算法、三阶段提交算法

2020-09-09 通过网页

分布式技术原理与算法解析 - 05 - 分布式共识:存异求同

区块链技术:PoW(Proof-of-Work,工作量证明)、PoS(Proof-of-Stake,权益证明)、DPos(Delegated- Proof-of-Stake,委托权益证明)

2020-09-08 通过网页