maxcompute开发环境问题之同步到生产环境失败如何解决

简介: MaxCompute开发环境是指设置和配置用于开发MaxCompute项目的本地或云端环境;本合集将指导用户如何搭建和管理MaxCompute开发环境,包括工具安装、配置和调试技巧。

问题一:在大数据计算MaxCompute怎样能让开发环境和生产环境的表版本一致?

在大数据计算MaxCompute怎样能让开发环境和生产环境的表版本一致?



参考答案:

把开发的删了,从生产拉下来,在提交到开发。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/529884?spm=a2c6h.13066369.question.11.65da66bfyLqKZZ&scm=20140722.S_community@@%E9%97%AE%E7%AD%94@@529884._.ID_529884-RL_maxcompute%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83-LOC_search~UND~community~UND~item-OR_ser-V_3-P0_12



问题二:MaxCompute怎么批量把开发环境表结构同步到生产环境?

MaxCompute怎么批量把开发环境表结构同步到生产环境?



参考答案:

我看了下批量同步表结构的方式没有,需要手动单个来提交;如果有表的ddl的话,可以试一下use 生产环境project;执行各个表的ddl。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/525576?spm=a2c6h.13066369.question.14.65da66bfVWRKaw&scm=20140722.S_community@@%E9%97%AE%E7%AD%94@@525576._.ID_525576-RL_maxcompute%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83-LOC_search~UND~community~UND~item-OR_ser-V_3-P0_13



问题三:MaxCompute中现在用的是标准模式odps ,在开发环境下设置参数 是否可以改生产库的表类?

MaxCompute中现在用的是标准模式odps ,在开发环境下设置参数 是否可以改生产库的表类型?是不应该这样写 : use 生产库 setproject odps.schema.evolution.enable=true;



参考答案:

改不了,在开发环境下使用,可以通过set (单会话级别)、setproject(项目级别);生产环境使用方式是一样的。



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/523555?spm=a2c6h.13066369.question.15.65da66bfoCXLPV&scm=20140722.S_community@@%E9%97%AE%E7%AD%94@@523555._.ID_523555-RL_maxcompute%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83-LOC_search~UND~community~UND~item-OR_ser-V_3-P0_14



问题四:MaxCompute的python-udf引用表资源,已经添加进去了,但为什么开发环境跑还是提示?

问题1:MaxCompute的python-udf引用表资源,已经添加进去了,但是开发环境跑还是提示是什么原因?


问题2:资源类型没自动填充为table,提交不了。



参考答案:

针对问题1的回答:在左侧下方点一下MaxCompute的标,将资源添加到数据开发,提交后再操作一下,  

针对问题2的回答:我试了一下不需要在这里再添加了,按照这个文档直接操作是可以的https://help.aliyun.com/document_detail/423418.html?spm=a2c4g.172397.0.i171. 添加表作为表资源2. 添加py文件作为py资源3. 创建函数4. 执行另外需要确认一下,资源添加进去的这个project,是开发环境?上边这些操作需要在同一个环境操作,如果需要在开发环境测试就需要在开发环境操作,如果需要在生产操作,需要把资源和函数都提交到生产操作。

关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/522860?spm=a2c6h.13066369.question.16.65da66bfz0z1wK&scm=20140722.S_community@@%E9%97%AE%E7%AD%94@@522860._.ID_522860-RL_maxcompute%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83-LOC_search~UND~community~UND~item-OR_ser-V_3-P0_15



问题五:MaxCompute 的UDF函数如何批量从一个开发环境注册到生产环境?

MaxCompute 的UDF函数如何批量从一个开发环境注册到生产环境?不想一个个点击注册了,有没有办法批量从开发直接注册到生产



参考答案:

开发环境添加资源 和 注册函数的命令还有吗?有的话,直接use 生产;执行一遍



关于本问题的更多回答可点击进行查看:

https://developer.aliyun.com/ask/509896?spm=a2c6h.13066369.question.15.65da66bfV4Xb5o&scm=20140722.S_community@@%E9%97%AE%E7%AD%94@@509896._.ID_509896-RL_maxcompute%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83-LOC_search~UND~community~UND~item-OR_ser-V_3-P0_16

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
2月前
|
分布式计算 NoSQL 大数据
maxcompute开发环境问题之删除字段报错如何解决
MaxCompute开发环境是指设置和配置用于开发MaxCompute项目的本地或云端环境;本合集将指导用户如何搭建和管理MaxCompute开发环境,包括工具安装、配置和调试技巧。
|
2月前
|
数据采集 分布式计算 DataWorks
maxcompute开发环境问题之申请生产环境和开发环境的表权限失败如何解决
MaxCompute开发环境是指设置和配置用于开发MaxCompute项目的本地或云端环境;本合集将指导用户如何搭建和管理MaxCompute开发环境,包括工具安装、配置和调试技巧。
|
2月前
|
分布式计算 大数据 数据库连接
maxcompute开发环境问题之参数解析失败如何解决
MaxCompute开发环境是指设置和配置用于开发MaxCompute项目的本地或云端环境;本合集将指导用户如何搭建和管理MaxCompute开发环境,包括工具安装、配置和调试技巧。
|
2月前
|
DataWorks 关系型数据库 对象存储
dataworks数据集问题之同步任务如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
43 4
|
1月前
|
分布式计算 DataWorks 关系型数据库
DataWorks报错问题之dataworks同步rds数据到maxcompute时报错如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
2月前
|
数据采集 SQL 分布式计算
maxcompute开发环境问题之自定义2个环境变量失败如何解决
MaxCompute开发环境是指设置和配置用于开发MaxCompute项目的本地或云端环境;本合集将指导用户如何搭建和管理MaxCompute开发环境,包括工具安装、配置和调试技巧。
|
2月前
|
SQL 分布式计算 DataWorks
maxcompute开发环境问题之访问开发环境失败如何解决
MaxCompute开发环境是指设置和配置用于开发MaxCompute项目的本地或云端环境;本合集将指导用户如何搭建和管理MaxCompute开发环境,包括工具安装、配置和调试技巧。
|
2月前
|
DataWorks 关系型数据库 分布式数据库
dataworks数据集问题之数据中台报错如何解决
DataWorks数据集是指在阿里云DataWorks平台内创建、管理的数据集合;本合集将介绍DataWorks数据集的创建和使用方法,以及常见的配置问题和解决方法。
36 1
|
2月前
|
分布式计算 DataWorks IDE
MaxCompute数据问题之忽略脏数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
48 0
|
2月前
|
SQL 存储 分布式计算
MaxCompute问题之下载数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
40 0

热门文章

最新文章