开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flinkcdc连Oracle为什么是一个连接有三个session?

flinkcdc连Oracle为什么是一个连接有三个session?

展开
收起
真的很搞笑 2023-07-02 18:04:55 92 0
3 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    使用Flink CDC连接Oracle数据库时,每个连接可能会创建多个会话(session)。这是因为Flink CDC插件在内部使用了Oracle的JDBC驱动程序,而Oracle JDBC驱动程序在处理连接请求时可能会创建多个会话。
    具体来说,Oracle JDBC驱动程序使用了Oracle Net Services协议来与数据库进行通信,该协议支持多种会话模型,包括共享服务器模型和独立服务器模型。在共享服务器模型下,多个会话可以共享同一个数据库连接,而在独立服务器模型下,每个会话都需要独立的数据库连接。
    在Flink CDC中,默认情况下会使用共享服务器模型,这意味着多个会话可以共享同一个连接。在某些情况下,可能需要使用独立服务器模型,以便每个会话都具有独立的连接。可以在Flink CDC任务的配置文件中设置connection.sessionMode参数来控制会话模型的选择。

    2023-07-30 09:36:40
    赞同 展开评论 打赏
  • Flink CDC 连接 Oracle 数据库时为什么一个连接会有三个会话(session),可能是由于以下原因:

    1. 读取会话(Reader Session):该会话用于执行从 Oracle 数据库读取数据的操作。通过该会话,Flink CDC 会定期轮询 Oracle 数据库的日志文件或其他机制来获取增量更新的数据。

    2. 写入会话(Writer Session):该会话用于将 CDC 数据写入 Flink 中进行处理。Flink CDC 将从读取会话中获取到的数据写入 Flink 的数据管道中,供下游任务进行处理。

    3. 心跳会话(Heartbeat Session):此会话用于监测连接的状态和保持连接的活跃性。Flink CDC 使用心跳会话来检测 Oracle 连接是否处于活动状态,并确保连接不断开。

    这种设计可以提高 Flink CDC 与 Oracle 数据库之间的并发性和可靠性。通过拆分成多个会话,可以同时进行数据读取和写入,并且可以在需要时重启或恢复部分会话,而不影响整体的数据同步过程。

    2023-07-30 09:39:05
    赞同 展开评论 打赏
  • 存在即是合理

    连接 Oracle 数据库时,每个连接可能会创建多个会话(session)。这是由于 Oracle 数据库的工作机制和 Flink CDC 的实现方式所导致的。

    在 Oracle 中,会话(session)是与数据库建立的连接相关联的执行上下文。每个会话都有自己的状态、变量和资源。在 Flink CDC 中,为了提高读取数据的效率和并行性,每个连接可能会使用多个会话。

    具体而言,Flink CDC 连接 Oracle 时,通常会有以下三个会话(session):

    控制会话(Control Session):控制会话用于管理和协调整个 Flink CDC 的运行过程。它负责启动和监控其他会话,并接收和发送控制指令。

    抽取会话(Extract Session):抽取会话用于实际的数据读取操作。它从 Oracle 数据库中读取变更数据,并将其发送给 Flink 用于处理。抽取会话可以并行执行,提高数据读取的效率。

    恢复会话(Recovery Session):恢复会话用于处理任务的恢复和容错操作。当任务发生故障或需要恢复时,恢复会话负责重新初始化和恢复任务的状态,确保数据同步的连续性。

    这种多会话的设计可以实现更高的并行性和可靠性,提高数据同步的效率和稳定性。每个会话负责不同的功能,彼此协同工作,完成数据的抽取、控制和恢复等任务。

    2023-07-03 14:07:38
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
PostgresChina2018_樊文凯_ORACLE数据库和应用异构迁移最佳实践 立即下载
PostgresChina2018_王帅_从Oracle到PostgreSQL的数据迁移 立即下载
Oracle云上最佳实践 立即下载

相关镜像