【2018中国计算机大会】阿里云分布式存储架构师谈自研分布式文件系统服务-阿里云开发者社区

【2018中国计算机大会】阿里云分布式存储架构师谈自研分布式文件系统服务

2018-11-01 3859

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： 10月27日下午，2018中国计算机大会上举办了主题“存储软硬件之国产化挑战与机遇”的技术论坛，一起探讨存储软硬件栈上的关键系统与技术的国产化发展道路。论坛上，阿里云分布式存储团队架构师黄硕针对存储软硬件国产化进行了《云上自研分布式文件系统服务的设计与实践》的报告。

10月27日下午，2018中国计算机大会上举办了主题“存储软硬件之国产化挑战与机遇”的技术论坛，一起探讨存储软硬件栈上的关键系统与技术的国产化发展道路。论坛上，阿里云分布式存储团队架构师黄硕针对存储软硬件国产化进行了《云上自研分布式文件系统服务的设计与实践》的报告。

专家简介：
黄硕，阿里云分布式存储团队架构师，主要从事分布式文件系统上云、元数据管理、分布式一致性协议、高性能存储引擎与QoS等相关架构设计和研发工作。

黄硕从云上分布式文件系统（DFS，Distributed File System）的价值出发，详述了存储发展的关键推动力——大数据分析，包括大数据分析的数据量增长前景、存储方案发展历程与现状等，对比了DFS服务相对于开源HDFS在性能、成本、灵活性、规模及稳定性方面的优势，同时阿里云DFS服务全面对接开源大数据生态，兼容HDFS API，确保用户实现系统平滑迁移。

阿里云的云上分布式文件系统(DFS)服务是极具竞争力的大数据存储方案，具有云化服务、开源大数据生态兼容、阿里存储中台“盘古”十年积累带来的多重优势，其自研内核“盘古”的技术革新保证了阿里云DFS服务在规模、性能、可靠性、技术先进性等方面的极大优势。黄硕针对“盘古”的整体架构、应用接口、数据多副本复制协议、高性能线程模型、单机存储引擎、用户态文件系统、存储设备上数据布局及盘古近期的演化方向进行了详细的解析。