分布式计算背景、任务类型

分布式计算的背景​

计算机已经发展到成为大多数复杂计算任务的第一工具。常见的计算方法分为集中式计算和分布式计算，集中式计算任务完全依靠一台大型中央计算机的处理能力。

分布式计算则相反，大量的计算任务被仔细地切分到集群中的各个节点。分布式计算比集中式计算面临更多挑战，但由于其各种优势，它也可以处理更多的任务。

三种计算任务类型

以下是三种比较常见的分布式计算任务类型：

不需要迭代处理的计算任务。例如典型的WordCount，可以使用Hadoop MapReduce进行处理。

需要迭代处理的图计算任务。例如网页PageRank计算，可以使用Spark、Naiad进行处理。

需要迭代处理的机器学习任务。例如计算拥有大数据逻辑回归任务，可以使用Spark、参数服务器进行处理。