开发者社区> 问答> 正文

我用flinkcdc 读取mysql数据。 数据量并不大。一天大概1W条数据。 但是带宽特别高。

我用flinkcdc 读取mysql数据。 数据量并不大。一天大概1W条数据。 但是带宽特别高。 一共同步27张表。 27个insert 语句。 我怎么排查这块问题??

展开
收起
真的很搞笑 2023-04-19 21:43:31 357 0
1 条回答
写回答
取消 提交回答
  • 随心分享,欢迎友善交流讨论:)

    如果Flink CDC同步MySQL的数据量不大,但是带宽占用较高,有可能是以下几个原因导致的:

    同步频率过高:如果Flink CDC同步MySQL的频率过高,会导致带宽占用较高。您可以检查一下同步频率是否过高,可以适当降低同步频率来解决问题。

    网络延迟较高:如果Flink CDC和MySQL服务器之间的网络延迟较高,会导致同步数据的速度变慢,从而占用更多的带宽。您可以检查一下网络延迟,如果网络延迟较高,可以考虑优化网络设置或增加带宽。

    数据类型较大:如果同步的数据类型较大,例如BLOB或CLOB类型的数据,会导致同步数据量较大,从而占用更多的带宽。您可以检查一下同步的数据类型,如果数据类型较大,可以考虑优化数据结构或者选择合适的数据存储方式。

    另外,您可以通过监控系统资源占用情况,例如CPU、内存、网络带宽等,来确定问题所在,并进行进一步排查和分析。

    2023-04-21 10:45:51
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品,拥有全球统一商业化品牌,完全兼容开源 Flink API,提供丰富的企业级增值功能。
问答排行榜
最热
最新

相关电子书

更多
One Box: 解读事务与分析一体化数据库 HybridDB for MySQL 立即下载
One Box:解读事务与分析一体化数据库HybridDB for MySQL 立即下载
如何支撑HTAP场景-HybridDB for MySQL系统架构和技术演进 立即下载

相关镜像