我有一些问题可以很好地应用于Map-Reduce模型。我想尝试实现它们,但是在此阶段,我不想麻烦地安装像Hadoop或Disco这样的重量级系统。
是否有用于map-reduce的轻量级Python框架,该框架使用常规文件系统进行输入,临时文件和输出?
专门针对大数据的Coursera课程建议使用以下轻量级python Map-Reduce框架:
http://code.google.com/p/octopy/ https://github.com/michaelfairley/mincemeatpy 为使您快速入门,请尝试以下示例:
https://github.com/michaelfairley/mincemeatpy/zipball/v0.1.2
(提示:对于本例中的[服务器地址],请使用localhost)
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。