AI 助理
备案控制台
开发者社区 大数据与机器学习 大数据开发治理DataWorks 正文

来自kafka的log想持续消费写入maxcompute分区表，这个有文档吗？

如题

展开
收起
游客3oewgrzrf6o5c 2022-06-30 10:50:32 671 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客bcfx2q4kttgbm

    可以使用实时同步 但kafka源端的数据必须得是json格式的 https://help.aliyun.com/document_detail/181656.html（此答案整理自DataWorks交流群(答疑@机器人)）

    2022-06-30 12:03:50
    赞同 展开评论
问答分类：
消息中间件 分布式计算 Kafka MaxCompute 大数据开发治理平台 DataWorks 云原生大数据计算服务 MaxCompute 云消息队列 Kafka 版 日志服务
问答标签：
云原生大数据计算服务 MaxCompute kafka 云原生大数据计算服务 MaxCompute log kafka日志服务 云原生大数据计算服务 MaxCompute文档 日志服务kafka
问答地址：
开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 问答
相关问答
DataWorks
在大数据计算MaxCompute中同步数据报错，kafka中一直有数据在产出，如何解决？
47
0
0
Flink的SQL脚本接kafka 当一条消息来了可不可以在日志中打印出来？
61
1
0
在大数据计算MaxCompute中，不同分区的数据能同时写入一张分区表吗？
58
2
0
大数据计算MaxCompute在odps上有一个kafka同步到es的离线任务 任务是这么配置的？
32
0
0
在大数据计算MaxCompute中log view怎么查看？
28
0
0
DataWorks在odps上有一个kafka同步到es的离线任务 任务是这么配置的 ？
40
1
0
大数据计算MaxCompute有没有sql可以查看库内所有表，是否是分区表呢？
45
1
0
塑云科技如何通过KafKa+OTS+MaxCompute完成物联网系统技术重构？
60
2
0
dataworks读kafka写maxcompute按照这个update_time分区要怎么排查？
59
0
0
Flink CDC程序怎么配置log4j日志输出到mysql吗？
134
1
0
大数据与机器学习

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

我要提问
收录在圈子:
DataWorks
2704
+ 订阅

相关文章

  • 用马斯克五步工作法重构支付宝商家账单
  • 基于 Flink CDC YAML 的 MySQL 到 Kafka 流式数据集成
  • 静态代理IP对SEO优化工作的效率提升研究
  • 深度剖析数据中台架构图，铸造数字文明的基石
  • ACK One多集群Service帮助大批量应用跨集群无缝迁移

    • 热门讨论

    热门文章

  • DataWorks我该如何访问A项目安装了项目的package资源？
  • 数据来源：com.alibaba.fastjson.JSONException: syntax er
  • DataWorks当前操作被显示拒绝，请联系资源目录管理员授权怎么办？
  • dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
  • Dataphin和 Dataworks 有啥区别呢？
  • DataWorks中ak 的 都加了管理员角色， 但仍然报 错？
  • 你好，DataWorks中怎么看是怎么收费的？
  • DataWorks failed: ODPS-0130071:[0,0] Semantic ana？
  • 如何通过DataWorks管理项目角色权限角色与权限关系？
  • DataWorks生产节点今天总报：FAILED: 重跑就又可以？
    • 展开全部
  • DataWorks售前咨询
  • DataWorks操作报错合集之配置项目连通oss数据源 , 报The request signature we calculated does not match the signature you provided.如何解决
  • 大数据AI一体化开发再加速：DataWorks 支持GPU类型资源
  • 2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
  • DataWorks：新一代 Data+AI 数据开发与数据治理平台演进
  • 限时优惠体验！DataWorks数据治理中心全新升级为数据资产治理
  • 大数据&AI的16种可能，2020阿里云客户最佳实践合集下载
  • DataWorks重磅推出Serverless资源组，实现低成本灵活付费和动态平滑扩缩容
  • DataWorks Copilot：让你的数据质量覆盖率一键飞升！
  • DataWorks智能交互式数据开发与分析之旅
    • 展开全部
    还有其他疑问?
    咨询AI助理