Apache Gora介绍

简介:

介绍

        Gora是一个开源的ORM框架,主要为大数据提供内存数据模型与数据的持久化。目前Gora支持对于列数据、key-value数据,文档数据与RDBMS数据的存储,还支持使用Apache Hadoop来对对大数据进行分析

特点   

         虽然目前市面上有很多不错的关系数据库的ORM框架,但是基于数据模型的框架如JDO还是有一些不足,如对于列数据模型的存储与持久化。Gora正好弥补了这个问题,它能使用户很容易对大数据时行 内存建模与持久化,而且支持Hadoop来对大数据进行分析。

Gora就是一个大数据的表示与持久化框架,它有如下特点

  1.   数据持久化:它可以对列数据进行持久化,如HBase,Cassandra,Hypertable; key-value数据进行持久化,如Voldermort,Redis等,SQL数据库进行持久化,如MySQL,HSQLDB,也可以对文件进行HDFS存储 。

  2.   数据访问:可以使用Java API对数据进行轻松的访问

  3.   索引:可以持久化对象到Lucene或者Solr中去,可以使用Gora API来进行查询

  4.   分析:可以使用Apache Pig,Hive,cascading来对数据进行分析

  5.   MR的支持:原生支持Hadoop的MR框架,这个已经被用在Nutch 2.0上了

  6. 支持使用Pig,lucene,hive等针对数据进行持久化,索引和分析工作

更多信息请参考:http://gora.apache.org

缺点

        目前除Nutch2外,在其他开源产品中使用Gora的好像没有看到

        Nutch2系列通过gora对存储层进行了扩展,可以选择使用HBase、Accumulo、Cassandra 、MySQL 、DataFileAvroStore、AvroStore中任何一种来存储数据,但其中一些并不成熟。

         目前gora还亟待改进。对于追求性能极致的朋友来说,nutch2.x还不稳定,建议使用nutch1.x,利用HDFS和MapReduce的数据本地化及天然的并行性,可以优化到非常快的速度。

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
资源调度
一天掌握latex论文编辑,从标题作者,段落,数学公式,图片,图表,到参考文献全流程
一天掌握latex论文编辑,从标题作者,段落,数学公式,图片,图表,到参考文献全流程
2339 0
|
SQL Oracle 关系型数据库
|
数据安全/隐私保护 Python
|
弹性计算 运维 开发工具
运维人员的军刀——ROS
阿里云资源编排(Resource Orchestration)是一种简单易用的云计算资源管理和自动化运维服务。 本文以运维ECS为例,介绍如何使用资源编排服务,和现有的运维系统对接。本文使用ROS的Python SDK方式来调用资源编排服务,详细教程请参照阿里云资源编排服务Python SDK使用
10499 0
|
关系型数据库 PostgreSQL Python
PostgreSQL 获取拼音首字母的函数 (可以获取所有中文字符)经典原创分享
经典原创获取汉子拼音首字母的函数,原先用在ORACLE中,最近迁移到Postgresql中,分享出来。关键工作量是拼音首字母和汉子的对应码表整理获取比较耗费工作量。数据库默认是UTF-8库,函数内部转码成GBK进行使用。
7010 0
|
负载均衡 算法 Shell
|
缓存 Java 应用服务中间件