备案控制台

开发者社区

开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC读取, 直接写入hive, 这样操作对吗?

Flink CDC读取, 直接写入hive, 报错事不支持update|delete, 所以目前通过kafka做了层转换操作这样操作对吗?

展开

收起

cuicuicuic 2023-10-18 16:57:04 34 0

1 条回答

写回答

取消提交回答

xin在这

从你启动开始就开始，此回答整理自钉群“Flink CDC 社区”

2023-10-18 19:16:02

赞同展开评论打赏

问答分类：

流计算 SQL HIVE 消息中间件 Kafka 实时计算 Flink版云消息队列 Kafka 版

问答标签：

cdc Hive 实时计算 Flink版cdc hive 实时计算 Flink版操作

问答地址：

开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答

相关产品：

实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答

实时计算 Flink版

flink cdc写hdfs文件的时候，如果开启文件合并的话，最终的文件不能通过hive映射读取吗？

25

0

0

请问下flink消费hologres Binlog时，这样操作会有什么风险吗？

40

3

0

Flink有没有小伙伴试过直接操作mapstate的迭代器来删除其中的key？

17

0

0

Flink CDC里为啥我只有最初读的内容读不到后面增删改的操作呀？

32

2

0

flink cdc可以对ClickHouse进行操作吗？

34

2

0

谁有flink cdc 可以连接hive的格式？

9

1

0

Flink CDC里 hive 读取 rt表报错，有人遇到过吗？

15

0

0

Flink在source端进行了CTAS不支持的操作后，是否支持手动在sink端进行相应调整？

21

1

0

Flink CDC里flink yarn session 模式中这个操作怎么做？

21

1

0

Flink告警界面可以查询到是谁操作的吗？

13

1

0

大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关产品

实时计算 Flink版

文档详情产品详情

热门讨论

热门文章

使用Flink CDC，生产环境要申请的服务器如何评估

flink1.15启动后无法访问webui的问题有人遇到过吗

哪位大佬有遇到过Flink这个问题呢？同步pg的时候，是不是类冲突了，所以导致抓不到这个类？

Flink 语句有啥方法不写字段能直接拥有源表的所有字段？

Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行

flinkcdc3.0整库同步mysql的数据到starrocks中全量能过去增量过不去怎么排查？

Alink是什么意思？

FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？

Flink CDC有遇见这个问题的吗？

Flink-CDC 文档网站地址是什么？

展开全部

Flink SQL 功能解密系列 —— 流式 TopN 挑战与实现

为什么说流处理即未来？

Flink 在人工智能领域的应用实践

在 Cloudera Data Flow 上运行你的第一个 Flink 例子

修改代码150万行！与 Blink 合并后的 Apache Flink 1.9.0 究竟有哪些重大变更？

超强攻略！看完拿 Apache Flink 极客挑战赛全场最佳「MVP」

菜鸟供应链实时数仓的架构演进及应用场景

日均万亿条数据如何处理？爱奇艺实时计算平台这样做

这场大数据+AI Meetup，一次性安排了大数据当下热门话题

官宣｜Apache Flink 1.19 发布公告

展开全部

相关课程

更多

开源 Flink 极速上手教程

1752

7

去学习

大数据实时计算框架Spark快速入门

778

93

去学习

大数据Hive教程精讲

799

25

去学习

Apache Flink 入门

4826

9

去学习

相关电子书

更多

Hive Bucketing in Apache Spark 立即下载

spark替代HIVE实现ETL作业 立即下载

2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践 立即下载

相关实验场景

更多