自建文件服务器,有什么推荐?主要用于 Tomcat 集群的文件管理问题。 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在回答技术问题时复制粘贴 AI 生成的内容
hzw94
V2EX    程序员

自建文件服务器,有什么推荐?主要用于 Tomcat 集群的文件管理问题。

  •  
  •   hzw94 2020 年 7 月 4 日 3707 次点击
    这是一个创建于 2016 天前的主题,其中的信息可能已经有所发展或是发生改变。

    以下这几个如何? HDFS(Google)、FastDFS 、MinIO (自建 oss )

    19 条回复    2020-07-05 21:29:48 +08:00
    daimaosix
        1
    daimaosix  
       2020 年 7 月 4 日
    MinIO,非常方便
    hzw94
        2
    hzw94  
    OP
       2020 年 7 月 4 日
    @daimaosix 大佬,听说自建 oss 运维复杂,你们是怎么处理的?
    daimaosix
        3
    daimaosix  
       2020 年 7 月 4 日
    @hzw94 MinIO 用 Go 写的,直接运行就行了,基本不用管。。。这个也基本不用运维的。
    daimaosix
        4
    daimaosix  
       2020 年 7 月 4 日
    @hzw94 而且高度兼容 S3 的接口,还有简单的控制台,做文件管理挺合适的,你前面说的那两个才麻烦的
    hzw94
        5
    hzw94  
    OP
       2020 年 7 月 4 日
    @daimaosix 学到了!!!感谢
    jwenjian
        6
    jwenjian  
       2020 年 7 月 4 日
    FastDFS 运维反正是不简单
    salmon5
        7
    salmon5  
       2020 年 7 月 4 日 via Android
    @daimaosix 你这就有点误导了,100TB 的运行下就行了吗?
    daimaosix
        8
    daimaosix  
       2020 年 7 月 4 日   2
    @salmon5 你说我误导了,那你说呗,你留一句这话想表达什么?只是说我误导了?然而你仍然没有给出 100TB 的解决办法不是,楼主也没说多大的量,你怪得着我吗?
    defunct9
        9
    defunct9  
       2020 年 7 月 4 日 via iPhone
    GFS2 副本 mirror 。服务器多的话就 ceph
    defunct9
        10
    defunct9  
       2020 年 7 月 4 日 via iPhone
    fastdfs 过时了,minio 非常小巧。不知道大数据量会不会崩
    hzw94
        11
    hzw94  
    OP
       2020 年 7 月 4 日
    @jwenjian 多谢
    @defunct9 GFS2 有点强,可以集群。我暂时用不到集群,主要还是简便易用的单机文件管理。
    @salmon5 @daimaosix 体量应该是不会到 100TB 那么高,小项目而已。
    XenoAmess
        12
    XenoAmess  
       2020 年 7 月 5 日
    你有多少台机子啊上 HDFS 。。。
    你那边真的有这么大的需求吗
    总觉得 不太至于吧。。。。
    xabc
        13
    xabc  
       2020 年 7 月 5 日 via iPhone
    filelist.cn git 搜吧
    hzw94
        14
    hzw94  
    OP
       2020 年 7 月 5 日
    @XenoAmess 小项目,最多 3 台 Tomcat 服务器。我也是在了解中。
    @xabc 感谢,我去看看
    dadaoqueyi
        15
    dadaoqueyi  
       2020 年 7 月 5 日
    我这边用的是 MongoDB,大文件用 Mongodb 的 gridfs,一般项目够用。
    XenoAmess
        16
    XenoAmess  
       2020 年 7 月 5 日
    @hzw94 3 台?那 不太建议上 hdfs
    fox0001
        17
    fox0001  
       2020 年 7 月 5 日 via Android
    sftp + rsync ?
    hzw94
        18
    hzw94  
    OP
       2020 年 7 月 5 日
    @dadaoqueyi 我当初也考虑过,但是一想到 mongodb 的内存占用问题,就先放下了
    hzw94
        19
    hzw94  
    OP
       2020 年 7 月 5 日
    @fox0001 这种不适合项目开放吧。
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2592 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 38ms UTC 02:38 PVG 10:38 LAX 18:38 JFK 21:38
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86