写hbase 接口的时候是否需要单例模式,hbase 连接是否需要关闭?【应用场景:sparkstreaming 从kafka 拿数据存入hbase】-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

写hbase 接口的时候是否需要单例模式,hbase 连接是否需要关闭?【应用场景:sparkstreaming 从kafka 拿数据存入hbase】

hbase小能手 2018-11-08 14:05:43 2273

1、使用单例的时候,程序里边始终只有一个connection实例,但是,我spark程序本身就是一个多线程,一个线程在使用连接的时候其 他的线程是不是在等待?
2、spark程序处理的时候 假设我有是个计算节点,如果每个节点使用一个连接,或者每个线程使用一个连接,效率会不会更高一点?
3、如果我的benchtime 设置时间为5s 我实际处理的时间为3s 剩余的时间sparkstreaming 占用连接会不会一直消耗资源,

所以每一个批次处理完成以后需不需要关闭?

相关链接 :
http://hbase.group/article/93

消息中间件 分布式计算 Kafka 分布式数据库 Spark Hbase
分享到
取消 提交回答
全部回答(1)
  • hbase小能手
    2019-07-17 23:13:00

    参考社区文章连接HBase的正确姿势即可解决你的疑虑

    0 0
数据库
使用钉钉扫一扫加入圈子
+ 订阅

分享数据库前沿,解构实战干货,推动数据库技术变革

推荐文章
相似问题
推荐课程