• 关于

    hive查询指定分区数据库

    的搜索结果
  • 数据库必知词汇:Hive

    Hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Apache Hive数据仓库软件有助于使用SQL读取,写入和管理驻留在分布式存储中的大型数据集。 可以将结构投影到已经存储的数据上。提供了命令行工具和J...

    文章 萌萌怪兽 2020-02-23 194浏览量

  • hive中的表、外部表、分区和桶的理解

    一、概念介绍         Hive 没有专门的数据存储格式,也没有为数据建立索引,用户可以非常自由的组织 Hive 中的表,只需要在创建表的时候告诉 Hive 数据中的列分隔符和行分隔符,Hive 就可以解析数据         Hive 中的 Table 和数据库中的 Table 在概念上...

    文章 thinkgamer.cn 2015-08-02 1061浏览量

  • Hive的HQL(2)

    Hive基础(1) Hive的HQL(2) 1. HQL的数据定义,HQL是一种SQL方言,支持绝大部分SQL-92标准。但是和SQL的差异为:不支持行级别的操作,不支持事务等。HQL的语法接近于MySQL。 2. Hive的数据库,本质仅仅是个表的目录或者命名空间。一般用数据库将生产表...

    文章 王小雷 2016-04-17 1274浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • Hive的表的创建(转载)

    创建表的三种方式 第一种创建方式:普通方式(最常用) 创建格式 # 指定标的类型和表的名称 CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.]table_name # 指定每列的名称和类型 [(col_name data_t...

    文章 晴天哥 2017-09-03 791浏览量

  • Hadoop Hive概念学习系列之hive里的分区(九)

     为了对表进行合理的管理以及提高查询效率,Hive可以将表组织成“分区”。   分区是表的部分列的集合,可以为频繁使用的数据建立分区,这样查找分区中的数据时就不需要扫描全表,这对于提高查找效率很有帮助。     分区是一种根据“分区列”(partition column)的值对表进行粗略划分的机制...

    文章 技术小哥哥 2017-11-12 645浏览量

  • Hadoop Hive概念学习系列之hive里的分区(九)

       为了对表进行合理的管理以及提高查询效率,Hive可以将表组织成“分区”。   分区是表的部分列的集合,可以为频繁使用的数据建立分区,这样查找分区中的数据时就不需要扫描全表,这对于提高查找效率很有帮助。     分区是一种根据“分区列”(partition column)的值对表进行粗略划分的...

    文章 技术小哥哥 2017-11-06 625浏览量

  • 《Hadoop大数据分析与挖掘实战》——3.2节Hive原理

    本节书摘来自华章社区《Hadoop大数据分析与挖掘实战》一书中的第3章,第3.2节Hive原理,作者张良均 樊哲 赵云龙 李成华 ,更多章节内容可以访问云栖社区“华章社区”公众号查看 3.2 Hive原理3.2.1 Hive架构Hive的架构如图3-2所示。 从图3-2中可以看到,Hive...

    文章 华章计算机 2017-05-02 1649浏览量

  • 一文看懂HIVE和HBASE的区别

    两者分别是什么? Apache Hive是一个构建在hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够进行交互查询–因为它只能够在H...

    文章 反向一觉 2017-10-02 1225浏览量

  • 一文看懂HIVE和HBASE的区别

    两者分别是什么? Apache Hive是一个构建在hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够进行交互查询–因为它只能够在H...

    文章 知与谁同 2017-08-01 1176浏览量

  • Hive简介、什么是Hive、为什么使用Hive、Hive的特点、Hive架构图、Hive基本组成、Hive与Hadoop的关系、Hive与传统数据库对比、Hive数据存储(来自学习资料)

    1.1 Hive简介 1.1.1   什么是Hive Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。 1.1.2   为什么使用Hive Ø  直接使用hadoop所面临的问题 人员学习成本太高 项目周期要求太短 Ma...

    文章 涂作权 2017-06-10 3871浏览量

  • Hive和HBase区别

    1. 两者分别是什么?    Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够进行交互查询...

    文章 sh_jepson 2016-03-29 839浏览量

  • 跟我一起hadoop(3)——hive

    hive架构图: 用户接口,包括 CLI,Client,WUI。 元数据存储,通常是存储在关系数据库如 mysql, derby 中。 解释器、编译器、优化器、执行器。 Hadoop:用 HDFS 进行存储,利用 MapReduce 进行计算。 用户接口主要有三个:CLI,Client 和 ...

    文章 skyme 2016-05-05 3005浏览量

  • Hive介绍与核心知识点

    Hive Hive简介 Facebook为了解决海量日志数据的分析而开发了Hive,后来开源给了Apache软件基金会。 官网定义: The Apache Hive ™ data warehouse software facilitates reading, writing, and manag...

    文章 高广超 2018-10-10 1662浏览量

  • hadoop——hive学习

    一、前言 Hive 是一个基于 Hadoop 文件系统之上的数据仓库架构。它可以将结构化的数据文件映射为一张数据库表,并提供简单的 sql 查询功能。还可以将 sql 语句转换为 MapReduce 任务运行。 二、什么是hive Hive是建立在Hadoop上的数据仓库基础构架。它提供了一系列的...

    文章 sunt_dota 2016-11-18 982浏览量

  • 浅谈Hive和HBase区别

    1. 两者分别是什么?        Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够进行交互查...

    文章 技术小哥哥 2017-11-21 758浏览量

  • Hive之 数据存储

    首先,Hive 没有专门的数据存储格式,也没有为数据建立索引,用户可以非常自由的组织 Hive 中的表,只需要在创建表的时候告诉 Hive 数据中的列分隔符和行分隔符,Hive 就可以解析数据。      其次,Hive 中所有的数据都存储在 HDFS 中,Hive 中包含以下数据模型:Table...

    文章 技术小美 2017-11-12 758浏览量

  • Hive的数据管理

    Hive是建立在Hadoop上的数据仓库基础构架。它提供了一系列的工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive定义了简单的类SQL查询语言,称为QL,它允许熟悉SQL的用户查询数据。作为一个数据仓库,Hive的数据管理按照使用层次...

    文章 skyme 2016-05-05 1969浏览量

  • Apache Kylin权威指南2.2 在Hive中准备数据

    2.2 在Hive中准备数据 2.1节介绍了Kylin中的常见概念。本节将介绍准备Hive数据的一些注意事项。需要被分析的数据必须先保存为Hive表的形式,然后Kylin才能从Hive中导入数据,创建Cube。 Apache Hive是一个基于Hadoop的数据仓库工具,最初由Facebook开...

    文章 华章计算机 2017-05-02 5093浏览量

  • Hive创建索引

    1.索引的作用 Hive支持索引,但是Hive的索引与关系型数据库中的索引并不相同,比如,Hive不支持主键或者外键。 Hive索引可以建立在表中的某些列上,以提升一些操作的效率,例如减少MapReduce任务中需要读取的数据块的数量。 在可以预见到分区数据非常庞大的情况下,索引常常是优于分区的。...

    文章 hiekay 2018-11-28 1825浏览量

  • 那些年使用Hive踩过的坑

    1.概述   这个标题也是用血的教训换来的,希望对刚进入hive圈的童鞋和正在hive圈爬坑的童鞋有所帮助。打算分以下几个部分去描述: Hive的结构 Hive的基本操作 Hive Select Hive Join Hive UDF Hive的M/R 使用Hive注意点 优化及优化详情 优化总结...

    文章 潇湘隐者 2016-04-25 3327浏览量

  • 那些年使用Hive踩过的坑

    1.概述   这个标题也是用血的教训换来的,希望对刚进入hive圈的童鞋和正在hive圈爬坑的童鞋有所帮助。打算分以下几个部分去描述: Hive的结构 Hive的基本操作 Hive Select Hive Join Hive UDF Hive的M/R 使用Hive注意点 优化及优化详情 优化总结...

    文章 smartloli 2016-04-19 5808浏览量

  • Hadoop学习笔记(三):Hive简介

    定义       Hive是一个构建在Hadoop上的数据仓库框架。可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapRed...

    文章 卢子召 2015-05-07 1578浏览量

  • Hive SQL汇总

    创建数据库create database if not exists sopdmcomment 'this is test database'with dbproperties('creator'='gxw','date'='2014-11-12') --数据库键值对属性信息location '/...

    文章 神巧合 2016-08-28 2434浏览量

  • MaxCompute SQL与Hive对比分析及使用注意事项

    摘要:一个使用过Hadoop的Hive框架的大数据开发工程师,往往基本掌握了阿里云的大数据计算服务MaxCompute的90%。本次分享主要通过详细对比MaxCompute和Hive各个方面的异同及开发使用的注意事项,方便用户来开发使用MaxCompute,实现从Hive秒速迁移到MaxCompu...

    文章 刘-建伟 2020-02-25 583浏览量

  • Hadoop Hive概念学习系列之hive里的索引(十三)

    Hive支持索引,但是Hive的索引与关系型数据库中的索引并不相同,比如,Hive不支持主键或者外键。 Hive索引可以建立在表中的某些列上,以提升一些操作的效率,例如减少MapReduce任务中需要读取的数据块的数量。 在可以预见到分区数据非常庞大的情况下,索引常常是优于分区的。   博主我推荐...

    文章 技术小哥哥 2017-11-21 1053浏览量

  • Hadoop Hive概念学习系列之hive里的索引(十三)

    Hive支持索引,但是Hive的索引与关系型数据库中的索引并不相同,比如,Hive不支持主键或者外键。 Hive索引可以建立在表中的某些列上,以提升一些操作的效率,例如减少MapReduce任务中需要读取的数据块的数量。 在可以预见到分区数据非常庞大的情况下,索引常常是优于分区的。   博主我推荐...

    文章 技术小哥哥 2017-11-20 900浏览量

  • Sqoop 数据导入导出实践

    Sqoop是一个用来将hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如:mysql,oracle,等)中的数据导入到hadoop的HDFS中,也可以将HDFS的数据导入到关系型数据库中。 1.简介 首先切换到到hadoop用户:su - hadoop 温馨提示...

    文章 season雅宁 2017-03-16 1458浏览量

  • 基于Hadoop数据仓库Hive1.2部署及使用

    接下来安装Hadoop数据仓库Hive,上节了解HBase简单使用,听起来HBase与Hive有些类似,概念也有点模糊,那我们先了解下他们之间有什么区别:   HBase是一种分布式、面向列的NoSQL数据库,基于HDFS存储,以表的形式存储数据,表由行和列组成,列划分到列族中。HBase不提供类...

    文章 李振良 2016-05-06 2157浏览量

  • HIVE优化浅谈

    作者:邓力,entobit技术总监,八年大数据从业经历,由一代HADOOP入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 随着商务/运营同学执行的HQL越来越多,整体HIVE执行效率变低,本文从HIVE切入,分析...

    文章 开源大数据EMR 2019-08-30 1513浏览量

  • HIVE优化浅谈

    HIVE优化浅谈 作者:邓力,entobit技术总监,八年大数据从业经历,由一代HADOOP入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 随着商务/运营同学执行的HQL越来越多,整体HIVE执行效率变低,本文从H...

    文章 学习让人充实 2019-08-28 731浏览量

1 2 3 4 ... 7 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT