DataWorks在pyodps3上写py代码, 读取mc表数据, 本地处理是什么意思呢？
DataWorks在pyodps3上写py代码, 读取mc表数据, 对数据进行处理(XGB算法), 但是由于读的表数据量很大,导致内存不足？
就是这个节点跑py任务; 你讲的本地处理是什么意思呢, 是否有更好的办法在DW跑python任务呢
展开
收起
1
条回答
写回答
写回答
-
参考看下 https://help.aliyun.com/zh/dataworks/user-guide/create-a-pyodps-3-node?spm=a2c4g.11186623.0.i2
，此回答整理自钉群“DataWorks交流群(答疑@机器人)”2024-04-22 20:36:53赞同 1 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
热门讨论
热门文章
数据来源：com.alibaba.fastjson.JSONException: syntax er
5049
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2107
离线同步报错Communications link failure，该如何处理？
756
DataWorks我该如何访问A项目安装了项目的package资源？
1693
datax同步完成后，reader表怎么进行修改数据
1091
DataWorks数据地图这里的变更记录，对于OSS的外部表，所有的历史记录都会捕获到嘛？
1168
Python3怎么连接holo？
343
Dataphin和 Dataworks 有啥区别呢？
1566
DataWorks如何收费？
97
报错信息：invalid jdbc url, DatabaseName not configured
931
展开全部
DataWorks售前咨询
7519
DataWorks操作报错合集之错误提示“ODPS-0130161: Parse exception - invalid token 'WITH', expect 'SEMICOLON'”，该怎么办
333
DataWorks重磅推出Serverless资源组，实现低成本灵活付费和动态平滑扩缩容
54598
2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
27530
DataWorks操作报错合集之配置项目连通oss数据源 , 报The request signature we calculated does not match the signature you provided.如何解决
444
【云栖实录】DataWorks：新一代智能湖仓一体数据开发与治理平台
40
数据中台的智能进化—阿里巴巴十二年数据平台发展历程
8914
DataWorks产品使用合集之如何解决查询列数太多不展示结果
52
DataWorks百问百答69：有哪些数据集成报错（数据集成报错归类）？
9944
智能风控未来已来
5307
展开全部
相关文章
相关电子书
更多
