开发者社区> 问答> 正文

写hbase+接口的时候是否需要单例模式,hbase+连接是否需要关闭?【应用场景:sparkstreaming+从kafka+拿数据存入hbase

写hbase+接口的时候是否需要单例模式,hbase+连接是否需要关闭?【应用场景:sparkstreaming+从kafka+拿数据存入hbase

展开
收起
你们的好朋友 2019-06-28 14:48:59 6193 0
3 条回答
写回答
取消 提交回答
  • 可以使用单例模式,同时可以使用broadcast方式把变量broadcast出去,具体可以参考: https://github.com/aliyun/aliyun-apsaradb-hbase-demo/blob/master/spark/sparkstreaming/src/main/scala/com/aliyun/spark/SparkStreamingOnKafka010ToHBasePerformance.scala

    2020-03-21 17:36:03
    赞同 展开评论 打赏
  • 最好使用单例,如果每个线程都创建容易造成zk 链接过多的问题

    2020-03-20 14:22:49
    赞同 展开评论 打赏
  • 在HBase中Connection类已经实现了对连接的管理功能,所以不需要自己在Connection之上再做额外的管理。Connection是线程安全的,而Table和Admin不是线程安全的,因此正确的做法是一个进程共用一个Connection对象,而在不同的线程中使用单独的Table和Admin对象

    2019-07-17 23:37:44
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Java Spring Boot开发实战系列课程【第16讲】:Spring Boot 2.0 实战Apache Kafka百万级高并发消息中间件与原理解析 立即下载
MaxCompute技术公开课第四季 之 如何将Kafka数据同步至MaxCompute 立即下载
消息队列kafka介绍 立即下载