|
|
本帖最后由 大风飞扬 于 2009-9-19 05:22 编辑
了解之前情况可以参看我前面的帖子。另外，我下周一还预约了测试更多的sas硬盘做成阵列，不过我几乎不抱希望了。
在之后又完成了如下测试一：服务器商那边测试
前日chinaunix pcinlife发完帖以后睡觉，睡到昨日下午。因为已经约好到一家专门做服务器的地方去看。这家服务器商既有品牌的味道，也有diy的味道。
见面寒暄过后，直接开测，平台为超微的5500平台，raid卡为rocketraid 3560，这个卡支持的硬盘比我的多，多达24个，但是我的性能比它的强，我的iop 是1.2g hz的。用了四个 st es.2 1TB企业级 sata硬盘。结果性能跟我之前的测试差不多，三台机器并发测试就是75MB/S差不多。
看来可以排除主板南桥的问题了。
二：回到家中换成freenas把系统换成freenas测试，居然并发性能比win2008的差，看来win2008的smb性能比win2003好不少，文件传输并发性能是不是比freebsd好呢？
有趣的是：我在三台客户端机器上同时从服务器上复制一个文件的时候，奇迹发生了，网卡居然可以跑到900Mb/s（我这时没有做交换机聚合，也没有做网卡聚合），也就是110MB/S，这个速度显然是非常令人惊讶的，千兆网卡的极限啊。
我当时就开心的几乎跳起来了，然而我马上冷下来了，如果是不同的文件呢，于是立即开始测试，当三台机器每个机器从服务器上复制不同的文件的时候，整个速度立即下降，估计总共就是45MB/S，这个速度还不如win2008下的呢。而且这个时候sata raid0阵列速度忽高忽低，一会儿是波峰500mb/s，一会波谷60mb/s，总体来说跳得非常厉害。
于是得出结论，硬盘的并发能力是真正的瓶颈。
另外，就是freebsd的网络性能的确很强悍，我还从来没有见到过千兆网卡居然可以持续跑到940mb/s的。还有就是ufs文件系统性能是不是比较弱呢？怎么比win2008的并发传输能力差啊。另外就是freebsd的网络负载平衡能力强啊，几个客户端的速度非常平均，但是在win2008下，高的45MB/S，低的10MB/S。
三：15k6 sas硬盘上场
突然记起我还有一个15k6 146g 15000转sas硬盘，这是个好东西，于是立即接上。环境还是freenas。三个客户端持续并发拷贝不同文件，速度总共是18MB/S左右，这个sas传输东西的时候速度波动很少，基本上在18MB/S左右波动。这个跟宣传的持续读能力110MB/S差得太远了。
但是一个客户端连接拷贝东西（其它客户端不动），速度可以很轻松跑到50MB/S。
到目前为止的结论是：
1 硬盘的并发性能是真正的瓶颈我这几天看了些文章，没有确证但是我非常相信，人家15个15k6 sas硬盘，持续大数据并发读写不过就是100M/S多一点。看来一并发，硬盘阵列性能就下滑的非常厉害。
2 网上的那些测试其实是针对单个客户端而言的说白了就是机器的阵列就是机器自己用，如果组成阵列速度的确会很快
3 并发环境下的持续读写速度要达到200MB/S以上，估计得等到SSD硬盘了靠目前的机械硬盘，即使是sas，如果不像大公司那样，估计根本超不过150MB/S了
4 我觉得现阶段要达到较高并发的办法（不一定对）就是在一台机器里多组几个阵列，放不同的内容，让客户根据内容分流了。例如 5个sas 15k6硬盘raid，并发持续读能力也就是120MB/S，但是我如果分成5个盘，最好的情况下，五个客户分别读五个盘，那样的并发总性能就超过250MB/S了。但是这样一个是无法像管理raid那样一个整盘管理，另外一个方面对客户的需求无法良好统计从而优化分配。
5 raid阵列卡的作用raid阵列卡我觉得本身没有什么大的加速作用（这个跟厂商吹嘘的是两码事情，从这点可以看出，厂商是多么一致的忽悠我们最终客户），就是一点cache，这个起不了什么大作用。但是我认为raid阵列卡在保证数据安全方面还是比较有用的。另外，raid阵列卡把多个硬盘的性能一定程度上串联起来了，这样针对应用而言，磁盘性能得到很大提高了。
请各位兄弟姐妹继续帮我:em03: |
|
IP卡
狗仔卡
发表于 2009-9-19 04:59
QQ好友和群
收藏
分享
好贴
烂贴
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
显身卡
）
这个方案是看了楼主的帖子 发觉楼主容量不是问题 钱不是问题