中国IT动力,最新最全的IT技术教程
最新100篇 | 推荐100篇 | 专题100篇 | 排行榜 | 搜索 | 在线API文档 | 网通镜像
首 页 | 程序开发 | 操作系统 | 软件应用 | 图形图象 | 网络应用 | 精文荟萃 | 教育认证 | 硬件维护 | 未整理篇 | 站长教程
ASP JS PHP工程 ASP.NET 网站建设 UML J2EESUN .NET VC VB VFP 网络维护 数据库 DB2 SQL2000 Oracle Mysql
服务器 Win2000 Office C DreamWeaver FireWorks Flash PhotoShop 上网宝典 CorelDraw 协议大全 网络安全 微软认证
硬件维护  CPU  主板  硬盘  内存  显卡  显示器  键盘鼠标  声卡音箱  打印机  机箱电源  BIOS  网卡  C#  Java  Delphi  vs.net2005
  当前位置:> 未整理篇
Lustre系统的体系结构
作者:Fengrux 时间:2003-02-23 11:11 出处:互联网 责编:chinaitpower
              摘要:Lustre系统的体系结构

1. Lustre 的组件

Lustre的主要组件有三个:先进的集群文件系统,基于对象的存储设备和可堆叠的对象驱动模型。

1.1 先进的集群文件系统

   OBDFS是一个基于对象的文件系统,目前能很好的运行于单一的安装了对象存储设备的系统上。OBDFS能很好地扩展成集群文件系统,从而多个节点共享一个对象存储设备。传统的群集文件系统共享块存储设备。

   Lustre文件系统具有很好的特性。允许扩展到10000个客户端,并支持巨大的并行IO(1000's)的对象存储控制器。

1.2 基于对象的存储设备

  Lustre采用对象存储设备。具有很大的优越性。

 

l         对象存储系统简介:

   主要包含OSDMDSOSD是智能的对象存储设备,具有自身的CPU,内存和存储介质,提供以对象为单位的访问,不提供对块的访问;MDS管理整个文件系统的命名空间,包括文件系统的目录层次结构,和数据的分布。因为OSD是智能型的,所以MDS上的很多数据分布的工作交给OSD完成,从而降低了MDS的负载。Client端可以并发地从多个OSD上读写,达到线性叠加的高带宽。如ActiveScale对象存储文件系统的带宽可以达到10GB/s

 

l         Nutch分布式文件系统的对比:

Nutch的分布式文件系统,就没有去解决这个问题,它是提供对块的访问,NameNode负责管理全局的文件命名空间以及每以及个块在DataNode上的分布。因此NameNode容易成为瓶颈。

 

l         一般的分布式文件系统:

一般包括服务端和客户端,服务器又分为SCMService Control Machine)和

Non-SCMSCM负责与其它服务器的同步。当客户端和服务器端建立连接后,会在本地生成一个文件系统的映射,并和服务器端保持同步。客户端根据这个本地的映射的文件系统可以透明地访问在别的机器上共享的文件数据。

1.3 可堆叠的对象驱动模型

除了直接的控制存储的驱动之外,还可以在这一层上面实现不同的驱动,像逻辑的对象存储驱动和客户端的对象驱动等。

比如,可以很容易地实现逻辑的RAID磁盘阵列,只需要一个对象驱动能同时和多个直接的存储驱动交互即可。


关闭本页
 
首页 | 投资与合作 | 服务条款 | 隐私政策 | 收藏本站 | 设为首页 | 新用户注册 | 免责声明 | 使用帮助
Copyright ©2005-2008 chinaitpower.com All rights reserved. www.chinaitpower.com 版权所有