[mooseFS]
▇▇▇mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署,性能测试)不断更新

[复制链接]


1
1

shinelian

shinelian
当前离线
空间积分
0
信誉积分
100
UID
450801
阅读权限
20
积分
540
帖子
474
精华
0
可用积分
540
专家积分
0
在线时间
82 小时
注册时间
2005-04-12
最后登录
2011-05-31

丰衣足食

丰衣足食, 积分 540, 距离下一级还需 460 积分
帖子
474
主题
181
精华
0
可用积分
540
专家积分
0
在线时间
82 小时
注册时间
2005-04-12
最后登录
2011-05-31
  • 串门
  • 好友
  • 博客
  • 消息
论坛徽章:
0


1

[收藏(0)]

[报告]

发表于 2010-01-14 12:55:39
|只看该作者
|倒序浏览

#!/bin/tony

1. 我在性能测试中间遇到些问题,因为我时间有限,所以希望大家一起来测试解决,群策群力。有什么问题请大家及时指出来,因为我也处在一个不断摸索的阶段。

2. mfs不多做介绍,具体细节请参考本版mfs实践文章http://bbs.chinaunix.net/thread-1643863-1-1.html ,或者baidu,google 关键字田逸

3. 希望大家能提供更好的存储/文件系统的测试模型,来一起完善本文档。(热烈欢迎大家奉献测试脚本测试用例等)。

4. 希望大家提供生产环境的实际案例,配置环境,脚本,监控机制等等。

5. 希望熟悉代码的朋友去看看mfs内部实现的机制。

6. 特别感谢田逸的文档 http://sery.blog.51cto.com/10037/263515

7. 特别感谢qq群战友:tt,灵犀,流云风,hzqbbc在qq群内对广大爱好者分享宝贵经验。

8. 特别感谢存储专家-《大话存储》的作者:冬瓜头 ,在我进行性能测试的时候,对我进行的指导。

9. 特别感谢qq群战友:高性能架构,CU ID: leo_ss_pku制作更专业更精美的pdf版本:

MooseFS权威指南.pdf

(3.32 MB, 下载次数: 1956)

2010-02-26 15:53 上传

下载次数: 1956


, 大家也可以他的blog上浏览在线版本:http://www.himysql.com/doc/mfs.html

mfs优势:

-1. Free(GPL)

0. 通用文件系统,不需要修改上层应用就可以使用(那些需要专门api的dfs好麻烦哦!)。

1. 可以在线扩容,体系架构可伸缩性极强。(官方的case可以扩到70台了!)

2. 部署简单。(sa们特别高兴,领导们特别happy!)

3. 体系架构高可用,所有组件无单点故障。 (您还等什么?)

4. 文件对象高可用,可设置任意的文件冗余程度(提供比raid1+0更高的冗余级别),而绝对不会影响读或者写的性能,只会加速哦!)

5. 提供Windows回收站的功能.(不怕误操作了,提供类似oralce 的闪回等高级dbms的即时回滚特性,oralce这些特性可是收费的哦!)

6. 提供类似Java语言的 GC(垃圾回收).

7. 提供netapp,emc,ibm等商业存储的snapshot特性。

8. google filesystem的一个c实现。(google在前面开路哦!)

9. 提供web gui监控接口。

10. 提高随机读或写的效率(有待进一步证明)。

11. 提高海量小文件的读写效率(有待进一步证明)。

可能的瓶颈:

0. master本身的性能瓶颈。(不太恰当的比方:类似mysql 主从复制,从的可以扩展,主的不容易扩展)。 (qq群战友 : hzqbbc

短期对策:按业务切分

1. 体系架构存储文件总数的可遇见的上限。

(mfs把文件系统的结构缓存到master的内存中,个人认为文件越多,master的内存消耗越大,8g对应2500kw的文件数,2亿文件就得64GB内存 )。(qq群战友 : hzqbbc

短期对策:按业务切分

2. 单点故障解决方案的健壮性。(qq群战友 : tt, hzqbbc

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。