写hbase+接口的时候是否需要单例模式,hbase+连接是否需要关闭?【应用场景:sparkstreaming+从kafka+拿数据存入hbase-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

写hbase+接口的时候是否需要单例模式,hbase+连接是否需要关闭?【应用场景:sparkstreaming+从kafka+拿数据存入hbase

写hbase+接口的时候是否需要单例模式,hbase+连接是否需要关闭?【应用场景:sparkstreaming+从kafka+拿数据存入hbase

展开
收起
你们的好朋友 2019-06-28 14:48:59 5936 0
3 条回答
写回答
取消 提交回答
  • 可以使用单例模式,同时可以使用broadcast方式把变量broadcast出去,具体可以参考: https://github.com/aliyun/aliyun-apsaradb-hbase-demo/blob/master/spark/sparkstreaming/src/main/scala/com/aliyun/spark/SparkStreamingOnKafka010ToHBasePerformance.scala

    2020-03-21 17:36:03
    赞同 展开评论 打赏
  • 最好使用单例,如果每个线程都创建容易造成zk 链接过多的问题

    2020-03-20 14:22:49
    赞同 展开评论 打赏
  • 在HBase中Connection类已经实现了对连接的管理功能,所以不需要自己在Connection之上再做额外的管理。Connection是线程安全的,而Table和Admin不是线程安全的,因此正确的做法是一个进程共用一个Connection对象,而在不同的线程中使用单独的Table和Admin对象

    2019-07-17 23:37:44
    赞同 展开评论 打赏
问答排行榜
最热
最新
相关电子书
更多
第十二届 BigData NoSQL Meetup — 基于hbase的New sql落地实践
立即下载
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载