开发者社区 问答 正文

分布 Python 的设计逻辑是什么?

分布 Python 的设计逻辑是什么?

展开
收起
芯在这 2021-12-12 20:49:05 300 分享 版权
1 条回答
写回答
取消 提交回答
  • Mars本质上设计思路是把数据科学库分布式化掉,比如Python,可以把Dataframe做一个拆分,包括Numpy,Scikit-Learn。

    把大规模作业拆分成小作业来做分布式计算。本身框架就是拆成作业用的,首先客户端提交一个作业,Mars框架把作业拆分,做一个DAG图,最后汇总收集计算结果。

    2021-12-12 20:49:19
    赞同 展开评论
问答分类:
问答地址: