推荐一本由大学教授和博导编写的网络存储方面的书

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介:
  现向大家推荐一本由大学和博导编写的网络存储方面的书——《海量网络存储系统原理与设计》了一下目录,里面介绍的技术中有些非常前沿,是系统学习网络存储技术的很好选择
 
互动网预订地址: http://www.china-pub.com/196658
 
 
本书由
 
国家973重大基础研究项目(项目编号:2004CB318203)、国家自然科学基金重点项目(项目编号:60933002)、国家863计划重大项目(项目编号:2009AA01A402)的资助、国家自然科学基金(项目编号:6060307560603074)、武汉光电国家实验室创新基金资助出版。
 
前言
 
 
当前,人类社会活动越来越依赖于各种数字化信息。无论是个人的数据资料、企事业单位核心运营数据(学生提交的作业、科研工作者撰写的技术文档、多媒体娱乐文件等,以及工厂的资源管理系统和生产调度系统、企业交易系统等),还是保证国家和社会正常运转的文件(社会经济统计数据、个人和企业的档案税收记录等),都离不开各种海量信息数据的存储、处理和传输。一个观察到的现象是,社会中数据总量增长速度正比于当前社会信息化的程度,这说明数据总量是按指数形式增长,过去几十年的历史数据也证实了这一点,并在短时期内还没有发现什么因素能够延缓这种数据量的增长速度。因此,数据爆炸式增长,并且其重要性不断增加是客观的,这对于存放数据的存储系统提出了巨大的挑战。
虽然在过去几十年中,存储设备的性能和容量得到极大的提高,但在性能方面它还赶不上处理器和网络的性能增长速度;在容量和可用性方面单设备也依然难以满足应用的需求。因此,使用系统的方法提高存储系统的性能、容量和可用性成为必然趋势。与传统计算机系统结构相比,当前存储系统不再仅仅被看做主机的外围I/O设备,而是具有高性能处理、存储和网络传输部件的独立计算机系统,能够提供高质量的数据存储服务,这也导致最近10年以来,数据存储系统及其相关技术受到越来越多的研究者、市场和用户的关注。
海量网络存储系统由于能够在系统层面包含各种存储部件并融合多种存储技术,提供高性价比的存储服务成为当前研究和应用的焦点。一般而言,海量网络存储系统主要采用高速网络技术连接多个存储设备或者存储节点,使之能够存储海量的数字化信息,也就是说,高速网络互联是手段,高效组织是核心,海量数据存储是目的。本书从设计者的角度讨论高性能、高可用性和高安全性的海量网络存储系统及其部件的设计原则、评价方法、研究手段和实现方法,同时针对一些典型系统和技术给出相应的设计实例。
本书整体分为三个部分:首先,从存储系统整体上高度分析了存储系统的层次性物理与逻辑结构、各种标准存储接口、存取路径及其常用的设计评价原则和方法;其次,从设备、单节点系统和大规模存储系统三个层次分别讨论基本原理和概念、当前的国内外状况、设计和评价方法,然后给出详细的设计实例;最后,针对海量存储系统中的实际功能需求讨论了若干关键问题,包括海量存储系统可靠性和可用性,存取安全和连续数据保护等,在每个专题中给出一些具体的设计优化和实现方案的例子。
 
本书的作者从理论和实践两个方面,全面系统地对海量网络存储系统各个方面的问题进行深入分析和讨论,并结合自身的科研成果以实例的方式细致描述存储系统的研究手段、实现方式和整体思路。考虑到存储领域,特别是海量网络存储领域,国内外都缺乏能够理论结合实际的资料,相信本书能让广大读者加深理解网络存储系统的运行机制和特点,并能为存储系统研究、开发和产业发展提供一定帮助。
本书共分为9章,其中第125689章由曹强撰写,第47章由黄建忠撰写,第3章由万继光撰写,全书由谢长生统稿。博士生李红艳、刘洋和陈云亮对书中文字和内容进行录入、编排,吴晨涛、吴丹璐绘制了书中部分图表,在此一并表示感谢。在成书过程中得到了华中科技大学计算机学院和武汉光电国家实验室(筹)领导以及师生的热心支持,书中使用了大量的所在研究组的资料,在此谨以衷心的谢意。
由于作者水平有限,书中难免存在不足之处,敬请读者批评指正。
作者
20098月于武汉
 
  
目录
 
1章存储系统设计原理(1)
1.1应用需求(1)
1.1.1数据量增长(2)
1.1.2数据的价值(2)
1.2计算机存储系统(3)
1.2.1计算机存储系统概述(3)
1.2.2存储结构的发展(6)
1.3评价指标和功能需求(10)
1.3.1评价指标(10)
1.3.2功能需求(11)
1.3.3典型系统(12)
1.4存取路径和接口(14)
1.4.1存取接口(15)
1.4.2存取路径(20)
1.5存储空间组织和管理(24)
1.5.1存储空间的基本概念(24)
1.5.2存储空间和主机的关系(26)
1.5.3存储空间的合并(27)
1.5.4存储空间的可用性(29)
1.5.5存储系统的层次结构(29)
1.5.6存储虚拟化(30)
1.6设计方法(32)
1.6.1测试方法(32)
1.6.2系统仿真(34)
1.6.3优化方法(35)
1.7本章小结(37)
参考文献(39)
2章基本储设备(41)
2.1磁盘(4)
2.1.1发历史(41)
2.1.2理和结构(42)
2.1.3数据布局和接口(43)
2.1.4存取特性(45)
2.1.5磁盘调度(46)
2.2固态盘(48)
2.2.1原理和结构(49)
2.2.2存取特性(52)
2.2.3软件系统(53)
2.3磁带(55)
2.3.1原理和结构(55)
2.3.2存取特性(58)
2.3.3磁带库系统优化技术(58)
2.4光盘(59)
2.4.1原理和结构(60)
2.4.2存取特性(61)
2.5其他存储机制和设备(61)
2.5.1体全息光盘(61)
2.5.2相变存储器(63)
2.5.3MEMS设备(64)
2.6本章小结(66)
参考文献(67)
3章磁盘列(68)
3.1基本理(68)
3.1.1RAID级别(68)
3.1.2RAID实现方式(71)
3.1.3RAID快照技术(74)
3.2RAID系统设计(76)
3.2.1RAID控制器硬件设计(76)
3.2.2RAID核心控制软件(84)
3.3磁盘阵列系统性能评价(93)
3.3.1磁盘阵列硬件瓶颈分析(93)
3.3.2PCI传输瓶颈及优化(97)
3.3.3内存访问瓶颈及优化(99)
3.3.4CPU运算瓶颈及优化(100)
3.3.5硬件性能评估结论(103)
3.4磁盘阵列在线扩容技术(104)
3.4.1磁盘阵列扩容的一般实现过程(104)
3.4.2扩容过程中数据迁移的研究(108)
3.4.3基于控制理论的分组分区迁移策略(110)
3.5多协议磁盘阵列技术(114)
3.5.1外存储设备接口协议(114)
3.5.2存储整合(116)
3.5.3多协议磁盘阵列系统结构(116)
3.6磁盘阵列预警技术(122)
3.6.1当前应用需求现状(123)
3.6.2国内外相关技术研究现状(123)
3.6.3基于安全预警技术的RAID系统设计(126)
3.7当前阵列的研究热点(128)
3.7.1绿色存储简介(128)
3.7.2阵列级节能技术(129)
3.7本章小结(133)
参考文献(134)
4章对象存储系统研究(136)
4.1引言(136)
4.1.1对象存储技术产生的背景(136)
4.1.2常用网络存储系统(140)
4.1.3对象存储带来的变化(144)
4.1.4对象存储的研究内容(146)
4.2对象存储设备的指令集(151)
4.2.1SCSI命令集的扩展(152)
4.2.2OSDT10的属性页(154)
4.2.3属性列表(156)
4.2.4对象扩展属性页(157)
4.3对象存储文件系统(158)
4.3.1分布式文件系统(158
4.3.2对象文件系统的设思路(159)
4.3.3采用OSD的对象文件系统(160)
4.4存储服务质量(164)
4.4.1存储服务质量的研究意义(164)
4.4.2QoS系统结构(165)
4.4.3QoSS的实施要素(167)
4.4.4面向QoSS的属性管理模型AM?M(169)
4.4.5基于属性管理的流媒体QoS保证(171)
4.5一种基于属性控制的对象存储文件系统(174)
4.5.1对象热度扩展属性页(174)
4.5.2文件系统设计(175)
4.5.3基于属性管理的应用原型总体设计(176)
4.5.4应用原型客户端的设计(178)
4.5.5应用原型存储端的设计(179)
4.5.6性能评估与分析(181)
4.6本章小结(185)
参考文献(187)
 
5章大规模网络存储系统(191)
5.1概述(191)
5.1.1存储域(191)
5.1.2存储域的系统结构和功能需要(192)
5.1.3基于网络的文件系统(196)
5.2典型分布式文件系统(198)
5.2.1PVFS(198)
5.2.2Lustre文件系统(199)
5.2.3Panasas文件系统(202)
5.2.4GPFS(204)
5.2.5GoogleFS(205)
5.2.6Hadoop分布式文件系统(205)
5.2.7分布式文件系统评价(208)
5.3DNFS系统设计与实现(208)
5.3.1DNFS系统结构(209)
5.3.2DNFS实现方法(213)
5.3.3测试与分析(229)
5.4本章小结(237)
参考文献(238)
6章可靠性和可用性研究(239)
6.1可靠性概述(239)
6.1.1背景(240)
6.1.2可靠性和可用性(240)
6.2容错机制(244)
6.2.1容错机制的分类(244)
6.2.2容错机制的层次分析(245)
6.3可靠性研究(247)
6.3.1磁盘失效数据(247)
6.3.2磁盘阵列的可靠性结构和模型(249)
6.3.3集群存储系统的可靠性结构和模型(250)
6.3.4Monte Carlo法模拟系统运行(252)
6.4集群存储系统的容错机制(253)
6.4.1集群存储系统容错(253)
6.4.2纠删码的选择(254)
6.4.3LDPC编码(255)
6.4.4系统实现(256)
6.4.5性能评估(258)
6.5本章小结(261)
参考文献(262)
7章存储安全性研究(266)
7.1引言(266)
7.2存储安全研究现状(269)
7.2.1现有原型系统(269)
7.2.2现有研究的分析(272)
7.2.3存储安全研究范畴(273)
7.3存储安全的一般性原理(275)
7.3.1怎样研究网络存储安全(275)
7.3.2存储安全的三大特征(277)
7.3.3安全存储数据通道(279)
7.3.4服务独立的存储安全服务模型(280)
7.3.5安全访问协议(282)
7.4典型存储安全案例研究(283)
7.4.1存储设备的安全性(283)
7.4.2常用存储系统的安全性(287)
7.4.3对象存储安全性研究(290)
7.4.4大规模存储系统及其安全性(294)
7.5本章小结(296)
参考文献(297)
8章连续数据保护(300)
8.1连续数据保护技术(300)
8.1.1数据恢复的技术指标(300)
8.1.2数据恢复级别(301)
8.2ST?CDP机制(303)
8.2.1当前CDP机制存在的问题(303)
8.2.2数据记录(303)
8.2.3数据恢复(304)
8.3量化分析模型(304)
8.4机制实现(306)
8.4.1系统架构(306)
8.4.2机制实现的相关问题(307)
8.4.3工作流程(308)
8.4.4设计方法改进(311)
8.5实验分析(311)
8.5.1测试环境设置(311)
8.5.2测试结果与分析(312)
8.6本章小结(318)
参考文献(319)
9章网络存储备份系统(320)
9.1复制和镜像技术(320)
9.2备份系统概述(322)
9.3备份系统基本结构(324)
9.4典型网络备份系统的设计(326)
9.4.1网络备份系统的结构与业务逻辑(326)
9.4.2网络备份系统的软件设计(329)
9.4.3网络备份系统性能测试(336)
9.5本章小结(338)
参考文献(339)
附录存储安全的相关术语表(340)
本文转自王达博客51CTO博客,原文链接http://blog.51cto.com/winda/302373如需转载请自行联系原作者

茶乡浪子
 
相关实践学习
借助OSS搭建在线教育视频课程分享网站
本教程介绍如何基于云服务器ECS和对象存储OSS,搭建一个在线教育视频课程分享网站。
相关文章
|
6月前
|
存储 分布式计算 Hadoop
Hadoop【基础知识 01】【分布式文件系统HDFS设计原理+特点+存储原理】(部分图片来源于网络)
【4月更文挑战第3天】Hadoop【基础知识 01】【分布式文件系统HDFS设计原理+特点+存储原理】(部分图片来源于网络)
229 3
|
3月前
|
消息中间件 存储 Serverless
函数计算产品使用问题之怎么访问网络附加存储(NAS)存储模型文件
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
9天前
|
存储 网络协议 安全
软件管理,磁盘存储,文件系统以及网络协议
【11月更文挑战第9天】本文介绍了软件管理、磁盘存储和网络协议等内容。软件管理包括软件生命周期管理和软件包管理,涉及需求分析、设计、实现、测试、发布、维护等阶段,以及软件包的安装、升级和依赖关系处理。磁盘存储部分讲解了磁盘的物理结构、分区与格式化、存储管理技术(如 RAID 和存储虚拟化)。网络协议部分涵盖了分层模型、重要协议(如 HTTP、TCP、IP)及其应用与安全。
|
2月前
|
数据采集 存储 JavaScript
构建您的第一个Python网络爬虫:抓取、解析与存储数据
【9月更文挑战第24天】在数字时代,数据是新的金矿。本文将引导您使用Python编写一个简单的网络爬虫,从互联网上自动抓取信息。我们将介绍如何使用requests库获取网页内容,BeautifulSoup进行HTML解析,以及如何将数据存储到文件或数据库中。无论您是数据分析师、研究人员还是对编程感兴趣的新手,这篇文章都将为您提供一个实用的入门指南。拿起键盘,让我们开始挖掘互联网的宝藏吧!
|
1月前
|
存储 网络协议 数据挖掘
|
6月前
|
存储 分布式计算 监控
Hadoop【基础知识 01+02】【分布式文件系统HDFS设计原理+特点+存储原理】(部分图片来源于网络)【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】(图片来源于网络)
【4月更文挑战第3天】【分布式文件系统HDFS设计原理+特点+存储原理】(部分图片来源于网络)【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】(图片来源于网络)
308 2
|
3月前
|
存储 网络协议 搜索推荐
在Linux中,如何配置和管理虚拟机的网络和存储?
在Linux中,如何配置和管理虚拟机的网络和存储?
|
3月前
|
存储 机器学习/深度学习 分布式计算
HDFS与网络附加存储(NAS)的比较
【8月更文挑战第31天】
98 0
|
3月前
|
数据采集 存储 JavaScript
构建你的首个Python网络爬虫:抓取、解析与存储数据
【8月更文挑战第31天】在数字时代的浪潮中,数据成为了新的石油。了解如何从互联网的海洋中提取有价值的信息,是每个技术爱好者的必备技能。本文将引导你通过Python编程语言,利用其强大的库支持,一步步构建出你自己的网络爬虫。我们将探索网页请求、内容解析和数据存储等关键环节,并附上代码示例,让你轻松入门网络数据采集的世界。
|
3月前
|
安全 网络协议 网络安全
网安科班精选!爱荷华大学教授的网络安全零基础入门教程!
网络就像一把双刃剑,给我们的生活、交流、工作和发展带来了便利,但同时也给信息安全以及个人隐私带来了威胁。网络和信息安全问题不仅影响了网络的普及和应用,还关系到企国家、军队、企业的信息安全和社会的经济安全,让人又爱又恨。 今天给大家分享的这份手册,主要从网络漏洞、协议和安全解决方案等方面来探讨网络安全问题。我们把网络看成是不安全和安全的源头,通过分析网络漏洞、探测、攻击和减少攻击的方法,来研究不同的网络协议。

热门文章

最新文章