38 1234
发新话题
打印

100个节点的集群存储方案

哈哈。天下大同。

TOP

本人愚见,仅供参考! 关键看你用它干什么?HPC不是代名词,100个什么样的节点,每个节点多少个处理器,多大内存,用什么软件、文件系统,单映像还是多映像,这些没搞清楚前,说什么都是没有的。关键要看是计算密集型的还是数据密集型的应用,数据计密集型的例如地震数据处理、地质构造分析,卫星遥感数据的等,元数据和过程数据加载量很大,一般几个GB/s的数据加载量,普通的存储系统是受不了的,尤其是元数据的小文件,或者是超大型文件,超过2GB的文件,需要县构建一个虚拟的数据池,加载数据,否则肯定要等数据了,如果是计算密集型的,元数据很小、过程数据不大,结果是很小的,这种只要内存购大就行了!!!

TOP

学习下,新手入门

TOP

这个方案中的文件系统完全可以由国人自己的文件系统来搞定,CeFS (www.ceresdata.com), 他是SAN Shared Fs, 不比StoreNex SNFS 差,而且强很多。

TOP

楼上仁兄给的连接打不开

TOP

回复 #35 horse 的帖子

你修改下地址不就可以了吗?笨

TOP

项目很大,要是有描述就好了

TOP

先从应用开始考虑,包括使用什么HPC模型,调度系统是什么样的,数据传输特性如何,等等。HPC不是单独考虑存储这么简单,包括网络等都需要综合考虑。不过总之,要看跑什么应用。

TOP

 38 1234
发新话题