中国教育和科研计算机网
EDU首页 |  中国教育 |   高校科技 |   教育信息化 |   CERNET
教育信息化

资讯 | 专题 会议 观点 专栏 访谈 企业 产品 CIO 技术 校园信息化 下一代互联网 IPv6视频课堂

中国教育网 > 教育信息化
您现在的位置: EDU首页 > 教育信息化 > 存储备份 > 存储资讯 > 新闻动态
海量数据管理时代来临
http://www.edu.cn   2011-04-26 中国教育网络 作者:

字体选择:【大】 【中】 【小】

  维塔数码的存储性能管理

  维塔数码是新西兰著名的电影特效公司,由于3D 技术的引入,它必须面对管理数据的海量增长。维塔公司最主要的工作就是少数艺术工作人员制作模型,然后将模型的渲染任务发布到后端强大的并发系统上。

  维塔公司在文件系统上遇到了很多具体的问题。维塔公司并没有采用真正的并发文件系统,因为他们认为并发文件系统采用了过多的数据存储文件的元数据件系统的管理,同时并发文件系统需要将文件划分成若干块存储到不同的存储系统中,而维塔公司处理的数据包含大量的小文件和少量的大文件,把小文件再进行划分是一件没有效率的事情,因此维塔公司采用文件链接方式重新组织位于不同目录的文件,实现了一个伪并发文件系统LinkFarm。

  为了提高文件系统的性能,维塔还实现了一种硬盘空间的隐藏技术,因为当硬盘可用空间很少时,文件系统大部分的时间都用在搜索空闲块上,通过隐藏小的可用空间,可以通过一小部分硬盘空间的损失来换取文件系统性能的大提升。

  以太网统治存储大势已定

  尽管光纤存储系统比现有网络存储系统(iSCSI)更安全、更快,但基于以太网的存储最终将代替或占据存储系统的主流。iSCSI协议的方便、便宜和广泛支持将让其获得更大的发展,而10Gb以太网的发展将给iSCSI协议超越光纤存储系统的机遇。而各大主流存储厂商提出的光纤存储系统和以太网的融合技术尚不成熟。而最高层的网络文件系统(NFS,network File System)也在继续着自己的发展,NFS的第四版是相当成熟的文件系统,而并发NFS(pNFS)也是现在存储厂商主流支持的协议。尽管未来网络存储鹿死谁手依然难以预计,但以太网统治存储的大势已不会改变。

(文章来源:《中国教育网络》杂志2011年2-3月合刊)

页面功能 【打印】 【关闭】 【我有话说

MOOC风暴来袭

版权所有:中国教育和科研计算机网网络中心 CERNIC,CERNET,京ICP备15006448号-16,京网文[2017]10376-1180号

关于假冒中国教育网的声明 | 有任何问题与建议请联络:Webmaster@staff.cernet.com