发新话题
打印

100个节点的集群存储方案

anifer兄这个环境用的什么文件系统?
系统是solaris 86的么?还是linux?
4个io管理节点,和io节点间没有以太网连接么?
http://space.doit.com.cn/35700
存储界的首本个性之作《大话存储-网络存储系统原理精解与最佳实践》,将于9月初由清华大学出版社隆重出版!敬请关注!

TOP

HPCC环境一般用的都是基于beau wolf的linux操作系统。如果对io有很高要求,用infini band
也是一种方案。
blog:
http://space.doit.com.cn/index.php?action/space/uid/45317
好友关于HPC(高性能群集)的网站,内容不错
www.linpack.org

TOP

打错了。是beowulf...myrient连接方案也是比较好,但比较贵。比较奇怪的是,一般这个HPCC的方案都是32/64/128/256这样的台数比较多。。
blog:
http://space.doit.com.cn/index.php?action/space/uid/45317
好友关于HPC(高性能群集)的网站,内容不错
www.linpack.org

TOP

好像都是这样的哦 最少八个 呵呵 上面跑得并行软件可能好分配任务吧 2*N

搜索了一下 也有其他数量node的集群 164 940nodes什么的 不过估计2^N看起来更神秘些 所以卖得多些

[ 本帖最后由 paulwang 于 2006-9-23 00:21 编辑 ]

TOP

引用:
原帖由 paulwang 于 2006-9-22 16:15 发表
好像都是这样的哦 最少八个 呵呵 上面跑得并行软件可能好分配任务吧 2*N

搜索了一下 也有其他数量node的集群 164 940nodes什么的 不过估计2^N看起来更神秘些 所以卖得多些
管理和分配任务的时候会有比较大帮助的。
blog:
http://space.doit.com.cn/index.php?action/space/uid/45317
好友关于HPC(高性能群集)的网站,内容不错
www.linpack.org

TOP

学习
丑,但是丑的特别,也就是特别的丑
操作系统 数据库 中间件 还有杂七杂八
msn  seugenexo@hotmail.com
13810796305

TOP

要看应用

HPC选择的存储还是要看用户的具体应用软件,即便是同类的行业应用,因为软件的不同,对于存储的要求也是不尽相同。
而不同类型存储的选择直接影响到HPC本身的性能发挥。

TOP

回复 #10 annifer 的帖子

这个是一个比较落后,而且成本高的光纤SAN系统。看起来似乎过多的考虑了冗余的问题,但是意义大吗?我看就是浪费,除非这个系统的停机成本超过用户承受能力。
是系统就不要怕出问题,停电也是可能,ups也上?双路供电系统也上?

TOP

引用:
原帖由 wwy0630 于 2006-9-25 16:50 发表
这个是一个比较落后,而且成本高的光纤SAN系统。看起来似乎过多的考虑了冗余的问题,但是意义大吗?我看就是浪费,除非这个系统的停机成本超过用户承受能力。
是系统就不要怕出问题,停电也是可能,ups也上?双路 ...
没有百份百不出问题的系统,硬件成本只是整个系统极少的一部分,软件才可怕。而且用到这个领域的系统一般来说停机成本比整体硬件成本还高,其实现在硬件出问题的机会已经很少,我最怕是中间件。

TOP

引用:
原帖由 annifer 于 2006-9-22 14:17 发表
一个石油行业的集群拓扑图,欢迎大家评判。
没猜错的话这个是这是CGG+DDAM的方案吧,这个方案的问题是需要大量的IO节点。我们这里用BWFS作物探等高性能计算时间比较长了,它属于集群文件系统,只需要元数据控制器,不需要IO节点,计算节点获取元数据后直接访问存储设备并且结合带宽聚合等方法获得很高的带宽。
另外,高性能计算里有一些是属于纯的计算型处理,对IO要求不高,但也有一些像物探地震资料处理中的叠前偏移,对IO要求是比较高的,集群文件系统是目前比较比较流行的方案,尤其是我们自己的东西,比国外的要便宜些,如果需要请和我联系:MSN:yinan_ku@hotmail.com
有信心做好民族自己的存储产品----中科储天
MSN:yinan_ku@hotmai.com

TOP

发新话题