Hive metastore表结构设计分析
今天总结下,Hive metastore的结构设计。什么是metadata呢,对于它的描述,可以理解为数据的数据,主要是描述数据的属性的信息。它是用来支持如存储位置、历史数据、资源查找、文件记录等功能。
[Hive]窗口函数与分析函数
本文介绍了用于窗口函数和分析函数的Hive QL增强功能。所有窗口和分析函数操作都按照SQL标准。 当前版本支持以下窗口函数和分析函数:
1 窗口函数
窗口函数
描述
LAG()
LAG()窗口函数返回分区中当前行之前行(可以指定第几行)的值。
Hive SQL去重a,b和b,a类型
昨天开发找到我们DBA,要我们写一条Hive SQL。
需求:
有一个t表,主要有机场名称airport,机场的经纬度distance这两个列组成,想得到所有距离小于100的两个机场名。
完全分布式Hadoop集群安装Phoenix
应用场景
当我们按照之前的博文,安装完Hadoop分布式集群之后,再安装了Hbase,当准备通过hbase shell命令开始使用Hbase的时候,发现hbase非常的难用,都是一些scan,status,describe命令等,无法像mysql,oracle,hive等通过一些简单的SQL语句来操作数据,但是通过Phoenix,它可以让Hbase可以通过SQL语句来进行操作。