开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink Sql写HBase,设置最大缓冲行,和flush时间。没有开mini-batch,是不是

Flink Sql写HBase,设置最大缓冲行,和flush时间。没有开mini-batch,是不是这样设置不起作用

展开
收起
游客3oewgrzrf6o5c 2022-08-09 14:09:15 590 0
1 条回答
写回答
取消 提交回答
  • 全栈JAVA领域创作者

    在Flink中使用HBase时,可以通过配置Flink SQL中的参数来设置最大缓冲行和flush时间。 如果没有开启Mini-Batch模式,那么Flink SQL的写入方式将会直接将数据写入HBase表中。此时,可以通过以下参数来设置最大缓冲行和flush时间:

    hbase.client.max.buffer.size:最大缓冲行大小,单位为字节。 hbase.client.max.flush.time.ms:最大缓冲区清空时间,单位为毫秒。 如果需要更多的信息,请参考Flink官方文档中的HBase API文档。另外,还建议查看Flink中的相关配置文件,以便更好地配置Flink SQL的写入方式。

    2023-06-30 11:12:46
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    大数据时代的存储 ——HBase的实践与探索 立即下载
    Hbase在滴滴出行的应用场景和最佳实践 立即下载
    阿里云HBase主备双活 立即下载