Tachyon更名为 Alluxio,并发布1.0版本

简介:

详细参考

    http://www.alluxio.org/releases/alluxio-1-0-0-release.html

    http://geek.csdn.net/news/detail/57243

    http://www.alluxio.org/

Alluxio介绍

Alluxio 1.0版本,作为世界上首款以内存为中心的虚拟分布式存储系统,它能够统一数据访问并成为连接计算框架和底层存储系统的桥梁,应用程序只需要连接Alluxio便能够访问底层任意存储系统中的数据,除此之外,Alluxio以内存为中心的架构使得数据访问比现有的解决方案能快若干个数量级。

现在,使用Alluxio的公司能够将应用运行于基于任意存储系统(如Alibaba OSS、Amazon S3、OpenStack Swift,、GlusterFS及 Ceph等)的任意计算框架(例如Apache Spark,、Apache MapReduce及Apache Flink等),同时又充分利用底层存储介质(如DRAM、SSD及HDD等)的性能。

图片描述

版本发布情况图片描述

目录
相关文章
|
5月前
|
存储 分布式计算 Hadoop
Hadoop 集群小文件归档 HAR、小文件优化 Uber 模式
该文介绍了Hadoop中两种小文件管理策略。首先,通过Hadoop Archive (HAR)将小文件归档成大文件以减少存储和管理开销。操作包括使用`hadoop archive`命令进行归档和解档。其次,文章讨论了小文件优化的Uber模式,这种模式在同一JVM中运行所有MapReduce任务以提高效率和局部性,但可能引发单点故障和资源限制问题。启用Uber模式需在`mapred-site.xml`配置文件中设置相关参数。文中还提供了使用WordCount例子验证Uber模式配置的步骤。
|
5月前
|
分布式计算 Hadoop 大数据
最新版本——Hadoop3.3.6单机版完全部署指南
最新版本——Hadoop3.3.6单机版完全部署指南
766 57
|
存储 分布式计算 资源调度
MacOs首次安装单机Hadoop
Apache Hadoop项目为可靠、可扩展的分布式计算开发开源软件。 Apache Hadoop 软件库是一个框架,它允许使用简单的编程模型跨计算机集群分布式处理大型数据集。它旨在从单个服务器扩展到数千台机器,每台机器都提供本地计算和存储。库本身不是依靠硬件来提供高可用性,而是设计用于检测和处理应用层的故障,因此在计算机集群之上提供高可用性服务,每台计算机都可能容易出现故障。(原文翻译) 访问:https://hadoop.apache.org/ 安装设备 个人macbookpro Mac-Os11+
396 1
MacOs首次安装单机Hadoop
|
分布式计算 Hadoop 网络安全
OushuDB 安装与升级之安装 HDFS
OushuDB 安装与升级之安装 HDFS
63 0
|
存储 缓存 资源调度
Hadoop3.3新版本发布【整合了腾讯云】
Hadoop3.3新版本发布【整合了腾讯云】
303 0
|
分布式计算 安全 Java
HDP2.6.5更换spark版本为2.4.5 与carbondata2.0.1集成
继承Thread类 实现Runnnable接口 实现Callable接口
240 0
|
SQL 存储 分布式计算
CarbonData集成 Presto(Trino)(1)- 介绍 & 环境篇
有幸在开源之夏选上课题基于CarbonData 之 Presto 优化课题,这个课题主要是针对Presto使用CarbonData查询上做更多的一些优化。这个课题对于我来说十分有挑战点,涉及大数据领域的组件十分多,首先CarbonData作为大数据的一种文件存储格式,在OLAP计算引擎上的查询加速实现有助于数据更快的查询和产出;其次大数据涉及的组件和版本比较广泛,在测试、兼容各种方面带来的挑战会很多,例如Hadoop、Spark、Presto(Trino)、Hive等多个开源大数据组件的协同运行和调试,给项目的协同运行带来十分多挑战,文章会详细介绍我此次搭建流程
1025 0
|
消息中间件 分布式计算 监控
最新消息!Cloudera 全球发行版正式集成 Apache Flink
近期 Cloudera Hadoop 大神 Arun 在 Twitter 上宣布 Cloudera Data Platform 正式集成了 Flink 作为其流计算产品,Apache Flink PMC Chair Stephan 也回应:“此举意义重大。”这意味着所有 CDH 发行版覆盖的全球企业用户都将能够使用 Flink 进行流数据处理。
最新消息!Cloudera 全球发行版正式集成 Apache Flink
|
存储 分布式计算 大数据
Alluxio简介
                 一、Alluxio是什么?         Alluxio是一个基于内存的分布式文件系统,它是架构在底层分布式文件系统和上层分布式计算框架之间的一个中间件,主要职责是以文件形式在内存或其它存储设施中提供数据的存取服务。
5191 0

相关实验场景

更多
下一篇
无影云桌面