开发者社区> 问答> 正文

分布 Python 的设计逻辑是什么?

分布 Python 的设计逻辑是什么?

展开
收起
芯在这 2021-12-12 20:49:05 274 0
1 条回答
写回答
取消 提交回答
  • Mars本质上设计思路是把数据科学库分布式化掉,比如Python,可以把Dataframe做一个拆分,包括Numpy,Scikit-Learn。

    把大规模作业拆分成小作业来做分布式计算。本身框架就是拆成作业用的,首先客户端提交一个作业,Mars框架把作业拆分,做一个DAG图,最后汇总收集计算结果。

    2021-12-12 20:49:19
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
From Python Scikit-Learn to Sc 立即下载
Data Pre-Processing in Python: 立即下载
双剑合璧-Python和大数据计算平台的结合 立即下载