开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

我们公司有最近有这个需求,把oracle数据抽取到clickhouse,在技术选型上看到flinkc

我们公司有最近有这个需求,把oracle数据抽取到clickhouse,在技术选型上看到flinkcdc跟chunjun,感觉都能做,不知道有哪些不一样的地方

展开
收起
雪哥哥 2022-11-13 20:04:50 987 0
3 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    CDC主要应用于数据同步、数据分发、数据分发。

    chunjun着重于异构数据源的同步,两者的侧重点不同。

    所以我的建议还是使用chunjun。

    2022-11-28 10:33:05
    赞同 展开评论 打赏
  • CDC它是一个比较广义的概念,只要能捕获变更的数据,我们都可以称为CDC。其主要的应用场景: - 异构数据库之间的数据同步或备份 / 建立数据分析计算平台 - 微服务之间共享数据状态 - 更新缓存/CQRS的Query视图更新

    2022-11-23 17:47:20
    赞同 展开评论 打赏
  • 天下风云出我辈,一入江湖岁月催,皇图霸业谈笑中,不胜人生一场醉。

    从Oracle导大量数据到Clickhouse,用Airbyte进行数据调度,而且试用了下Airbyte,可以不用提前在CH里面建表,就能直接拉取的工具,它会自己建库建表,而且默认表引擎就是强大的mergetree,而且所有工具全部基于docker容器,环境隔离,建议尝试下。 Airbyte的官网地址:https://docs.airbyte.com/ git clone https://github.com/airbytehq/airbyte.git cd airbyte docker-compose up 直接拉取就可以直接用

    2022-11-23 15:10:18
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
PostgresChina2018_樊文凯_ORACLE数据库和应用异构迁移最佳实践 立即下载
PostgresChina2018_王帅_从Oracle到PostgreSQL的数据迁移 立即下载
Oracle云上最佳实践 立即下载