开发者社区> 问答> 正文

写hbase+接口的时候是否需要单例模式,hbase+连接是否需要关闭?【应用场景:sparkstreaming+从kafka+拿数据存入hbase

写hbase+接口的时候是否需要单例模式,hbase+连接是否需要关闭?【应用场景:sparkstreaming+从kafka+拿数据存入hbase

展开
收起
你们的好朋友 2019-06-28 14:48:59 6185 0
3 条回答
写回答
取消 提交回答
  • 可以使用单例模式,同时可以使用broadcast方式把变量broadcast出去,具体可以参考: https://github.com/aliyun/aliyun-apsaradb-hbase-demo/blob/master/spark/sparkstreaming/src/main/scala/com/aliyun/spark/SparkStreamingOnKafka010ToHBasePerformance.scala

    2020-03-21 17:36:03
    赞同 展开评论 打赏
  • 最好使用单例,如果每个线程都创建容易造成zk 链接过多的问题

    2020-03-20 14:22:49
    赞同 展开评论 打赏
  • 在HBase中Connection类已经实现了对连接的管理功能,所以不需要自己在Connection之上再做额外的管理。Connection是线程安全的,而Table和Admin不是线程安全的,因此正确的做法是一个进程共用一个Connection对象,而在不同的线程中使用单独的Table和Admin对象

    2019-07-17 23:37:44
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
大数据时代的存储 ——HBase的实践与探索 立即下载
Hbase在滴滴出行的应用场景和最佳实践 立即下载
阿里云HBase主备双活 立即下载

相关实验场景

更多