• ▇▇▇mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署,性能测试)不断更新 分布式文件系统(FastDFS) ChinaUnix.net


    ▇▇▇mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署,性能测试)不断更新 - 分布式文件系统(FastDFS) - ChinaUnix.net -

    [mooseFS]
    ▇▇▇mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署,性能测试)不断更新



    [复制链接]


    1
     1



    Rank: 1

    帖子
    474
    主题
    181
    精华
    0
    可用积分
    540
    专家积分
    0
    在线时间
    82 小时
    注册时间
    2005-04-12
    最后登录
    2011-05-31
    论坛徽章:
    0



    跳转到指定楼层


    1


    [收藏(0)]


    [报告]

     


    发表于 2010-01-14 12:55:39
    |只看该作者
    |倒序浏览

    #!/bin/tony



    1. 我在性能测试中间遇到些问题,因为我时间有限,所以希望大家一起来测试解决,群策群力。有什么问题请大家及时指出来,因为我也处在一个不断摸索的阶段。

    2. mfs不多做介绍,具体细节请参考本版mfs实践文章
    http://bbs.chinaunix.net/thread-1643863-1-1.html ,或者baidu,google 关键字  田逸

    3. 希望大家能提供更好的存储/文件系统的测试模型,来一起完善本文档。(热烈欢迎大家奉献测试脚本测试用例等)。

    4. 希望大家提供生产环境的实际案例,配置环境,脚本,监控机制等等。

    5. 希望熟悉代码的朋友去看看mfs内部实现的机制。

    6. 特别感谢田逸的文档
    http://sery.blog.51cto.com/10037/263515

    7. 特别感谢qq群战友:tt,灵犀,流云风,hzqbbc在qq群内对广大爱好者分享宝贵经验。


    8. 特别感谢存储专家-《大话存储》的作者:冬瓜头 ,在我进行性能测试的时候,对我进行的指导。

    9. 特别感谢qq群战友:高性能架构,CU ID: leo_ss_pku制作更专业更精美的pdf版本:


     



    MooseFS权威指南.pdf

    (3.32 MB, 下载次数: 1956)


    , 大家也可以他的blog上浏览在线版本:http://www.himysql.com/doc/mfs.html


         

     mfs优势:

    -1. Free(GPL)

    0. 通用文件系统,不需要修改上层应用就可以使用(那些需要专门api的dfs好麻烦哦!)。

    1. 可以在线扩容,体系架构可伸缩性极强。(官方的case可以扩到70台了!)

    2. 部署简单。(sa们特别高兴,领导们特别happy!)

    3. 体系架构高可用,所有组件无单点故障。 (您还等什么?)

    4. 文件对象高可用,可设置任意的文件冗余程度(提供比raid1+0更高的冗余级别),而绝对不会影响读或者写的性能,只会加速哦!)

    5. 提供Windows回收站的功能.(不怕误操作了,提供类似oralce 的闪回等高级dbms的即时回滚特性,oralce这些特性可是收费的哦!)

    6. 提供类似Java语言的 GC(垃圾回收).

    7. 提供netapp,emc,ibm等商业存储的snapshot特性。

    8. google filesystem的一个c实现。(google在前面开路哦!)

    9. 提供web gui监控接口。

    10. 提高随机读或写的效率(有待进一步证明)。

    11. 提高海量小文件的读写效率(有待进一步证明)。

    可能的瓶颈:

    0. master本身的性能瓶颈。(不太恰当的比方:类似mysql 主从复制,从的可以扩展,主的不容易扩展)。 (qq群战友 : hzqbbc

             短期对策:按业务切分

    1. 体系架构存储文件总数的可遇见的上限。

           (mfs把文件系统的结构缓存到master的内存中,个人认为文件越多,master的内存消耗越大,8g对应2500kw的文件数,2亿文件就得64GB内存 )。(qq群战友 : hzqbbc

             短期对策:按业务切分

    2. 单点故障解决方案的健壮性。(qq群战友 : tt  , hzqbbc

  • 相关阅读:
    HDU6030 Happy Necklace(推导+矩阵快速幂)
    威尔逊定理总结
    卢卡斯定理总结
    扩展欧几里得总结
    HDU2602 Bone Collector(01背包)
    离散数学--集合论
    Linux超全实用指令大全
    HDU6715 算术(莫比乌斯反演)
    莫比乌斯反演总结
    k8s-基于kubeasz项目二进制部署k8s集群
  • 原文地址:https://www.cnblogs.com/lexus/p/2667715.html
Copyright © 2020-2023  润新知