HBase代码_1| 学习笔记

简介: 快速学习 HBase代码_1

开发者学堂课程【HBase入门教程HBase代码_1】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/397/detail/5073


HBase代码_1


一、创建查询通话详单项目示例

1.HBase 存储数据库

电信行业中手机等通信工具产生的数据量巨大,用户可以查询移动、联通等在一定时间期限内的通信信息的数据详单,超出时间范围就无法查询。在数据库中,所有数据库都存在一台 mysql 服务器数据库中,但是数据库对数据的支撑量和储存量有上限,当系统使用时间过长后数据量过于庞大时,数据库无法支撑。这时,需要再创建一台数据库,编写一个存储功能,定期把历史的数据库内的历史数据,接收并保存到新的 mysql 数据库中。

//例如:移动、联通等通信数据在一段时间内并不会被删除,但是用户无法查询到,正常的应用在进行查询这些历史数据的时候能力有限,所以无法查询到通信信息。因为公司在后台将历史的通信数据,保存到一个新的历史数据库中进行存储,此数据库只开放了一部分接口来提供用户使用,并没有全部开放给所有的用户,所以普通用户查询不到一定期限外历史的通信信息。原因是因为原数据库能力有限,无法存储过于庞大的数据量。

2.项目:

查询通话详单

本机号码 主叫/被叫类型01通话时长 时间 对方号码

//查询通话详单,内容包含主机号码、主叫与被叫的类型、通话的时长、通话时间以及对方的号码等信息。

创建 hbase 项目:

//注意:在创建新型项目时,尽量不使用 jre7,可以使用自带的 JDK

项目创建成功后导入工具包。

//应该将 hadoop 的加包拷贝过后替换至2.5的版本的加包,也可以直接使用加包

image.png

//可以将目录下所有加包都引用至新建的项目中,可以先寻找到 HBase 最少的依赖,然后进行引用。如果需要使用 hadoop 也可以将 hadoop 中的加包进行引用。

示例代码:

package com.sxt.hbase;

import org.apache.hadoop.conf.Configuration;

import org.apache.hadoop.hbase.client.HBaseAdmin;

import org.junit.Before;

public class HBaseDemo {

@Before

public void begin ( ) throws Exceptiont{

//初始化变量

Configuration conf = new Configuration ( );

//加载 src 中的配置文件

HBaseAdmin hBaseAdmin;

//将 hbase 文件:

hbase-env.cmd

hbase-env.shhbase-policy.xmlhbase-site.xml

拷贝到 src 文件目录下

@Before

public void begin () throws Exception {

configuration conf = new Configuration ( );

hBaseAdmin = new HBaseAdmin (conf);

//创建表对象可以使用 HBaseAdimin

}

@After

public void end () {

if (hBaseAdmin != null){

try {

hBaseAdmin.close ( );

//如果不为空,则需要释放资源

}catch (IOException e){

e.printstackTrace ( );

}

}

}

public void createTbl(){

//创建表

HTableDescriptor desc = new HTableDescriptor(name).

//创建一个新的表名

hBaseAdmin.createTable (desc);

//创建一个新的描述

相关实践学习
lindorm多模间数据无缝流转
展现了Lindorm多模融合能力——用kafka API写入,无缝流转在各引擎内进行数据存储和计算的实验。
云数据库HBase版使用教程
  相关的阿里云产品:云数据库 HBase 版 面向大数据领域的一站式NoSQL服务,100%兼容开源HBase并深度扩展,支持海量数据下的实时存储、高并发吞吐、轻SQL分析、全文检索、时序时空查询等能力,是风控、推荐、广告、物联网、车联网、Feeds流、数据大屏等场景首选数据库,是为淘宝、支付宝、菜鸟等众多阿里核心业务提供关键支撑的数据库。 了解产品详情: https://cn.aliyun.com/product/hbase   ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
存储 SQL 自然语言处理
基于 HBase 的海量数据查询与检索解析|学习笔记
快速学习基于 HBase 的海量数据查询与检索解析
基于 HBase 的海量数据查询与检索解析|学习笔记
|
6月前
|
SQL 分布式计算 Hadoop
Hadoop学习笔记(HDP)-Part.16 安装HBase
01 关于HDP 02 核心组件原理 03 资源规划 04 基础环境配置 05 Yum源配置 06 安装OracleJDK 07 安装MySQL 08 部署Ambari集群 09 安装OpenLDAP 10 创建集群 11 安装Kerberos 12 安装HDFS 13 安装Ranger 14 安装YARN+MR 15 安装HIVE 16 安装HBase 17 安装Spark2 18 安装Flink 19 安装Kafka 20 安装Flume
137 1
Hadoop学习笔记(HDP)-Part.16 安装HBase
|
存储 前端开发 Cloud Native
基于 HBase 快速构架海量订单存储系统|学习笔记
快速学习基于 HBase 快速构架海量订单存储系统
基于 HBase 快速构架海量订单存储系统|学习笔记
|
存储 搜索推荐 Java
如何基于 HBase 构建图片、视频数据的统一存储检索方案|学习笔记
快速学习如何基于 HBase 构建图片、视频数据的统一存储检索方案
如何基于 HBase 构建图片、视频数据的统一存储检索方案|学习笔记
|
SQL 存储 边缘计算
HBase&Hive 2(三)|学习笔记
快速学习 HBase&Hive 2(三)
131 0
HBase&Hive 2(三)|学习笔记
|
SQL 存储 分布式计算
HBase&Hive 2(二)|学习笔记
快速学习 HBase&Hive 2(二)
HBase&Hive 2(二)|学习笔记
|
存储 SQL 分布式计算
HBase&Hive 2(一)|学习笔记
快速学习 HBase&Hive 2(一)
116 0
HBase&Hive 2(一)|学习笔记
|
存储 SQL 缓存
HBase&HIve 1|学习笔记
快速学习 HBase&HIve 1
172 0
HBase&HIve 1|学习笔记
|
SQL 消息中间件 存储
基于 HBase 的大数据在线分析|学习笔记
快速学习基于 HBase 的大数据在线分析
基于 HBase 的大数据在线分析|学习笔记
|
XML 缓存 分布式计算
集成 Oozie 服务&集成 Hbase 服务 | 学习笔记
快速学习 集成 Oozie 服务&集成 Hbase 服务
101 0
集成 Oozie 服务&集成 Hbase 服务 | 学习笔记