有没有大遇到过 NGINX 缓存下来的文件是残缺的问题 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
vloony
V2EX    NGINX

有没有大遇到过 NGINX 缓存下来的文件是残缺的问题

  •  
  •   vloony Aug 6, 2019 4373 views
    This topic created in 2459 days ago, the information mentioned may be changed or developed.
    RT 没有大遇到过 NGINX 缓存下来的文件是残缺的问题,几百 M 的文件有时候缓存下来的是一百多 M 或者几十 M,好像是随机找不到任何共同点 有没有大佬遇到过
    23 replies    2020-06-10 16:48:38 +08:00
    lihongjie0209
        1
    lihongjie0209  
       Aug 6, 2019   1
    第一感觉 timeout, 导致文件传输中断

    或者是 max_size 之类的配置项没配对吧
    guokeke
        2
    guokeke  
       Aug 6, 2019 via Android
    你大你先说。
    arrow8899
        3
    arrow8899  
       Aug 6, 2019   1
    应该是 buffer 问题
    vloony
        4
    vloony  
    OP
       Aug 6, 2019
    @lihongjie0209
    @arrow8899
    感谢两位大佬相关数值我都调高点试下。
    lowman
        5
    lowman  
       Aug 6, 2019
    我举报, 这里有人在炫耀大, 大的人, 发帖都不会有人禁, 管理员在哪里, 这里有个大鸟人
    vloony
        6
    vloony  
    OP
       Aug 6, 2019
    @lowman 哈哈哈 大佬别别别 真心求解问题 看有没有大佬了解的
    vloony
        7
    vloony  
    OP
       Aug 6, 2019
    @lihongjie0209 实测应该不是超时如果是超时 503 不应该缓存下来 max_size 也不可能有文件是正常的
    vloony
        8
    vloony  
    OP
       Aug 6, 2019
    @arrow8899
    proxy_buffer_size 128k;
    proxy_buffers 4 128k;
    proxy_busy_buffers_size 256k;
    依然出现问题
    aqqwiyth
        9
    aqqwiyth  
       Aug 6, 2019   1
    缓存文件拆分成多个 加速 IO 读取?
    ninjachen
        10
    ninjachen  
       Aug 7, 2019 via Android
    我遇到过缓存文件夹权限不够,不能读写。。。
    残缺的问题到没遇到过
    vloony
        11
    vloony  
    OP
       Aug 7, 2019
    @aqqwiyth 好像老哥这种方法比较稳 分片了后暂时没出现问题
    vloony
        12
    vloony  
    OP
       Aug 7, 2019
    @aqqwiyth 不对好像还是不稳 分片缓存下来的文件 大小也有问题真的尴尬。。。。
    vloony
        13
    vloony  
    OP
       Aug 7, 2019
    @aqqwiyth 抱歉好像我的问题 看出了 有问题的是没分片的节点。。。。
    vloony
        14
    vloony  
    OP
       Aug 8, 2019
    实测跑了一天分片还是没有用。。。。。。还是残缺
    vloony
        15
    vloony  
    OP
       Aug 9, 2019
    解决问题中 第三天 目前查看错误日志 更偏向 @arrow8899 大佬说的 错误日志大量提示 has too long header 看下要怎么解决
    vloony
        16
    vloony  
    OP
       Aug 9, 2019
    cache file has too long header
    vloony
        17
    vloony  
    OP
       Aug 9, 2019
    增加 proxy_buffer_size 到 4096k 这回应该能解决了吧 坐等明天
    vloony
        18
    vloony  
    OP
       Aug 10, 2019
    yanglihui
        19
    yanglihui  
       Jun 9, 2020
    @vloony
    我就是你要找的有缘人
    yanglihui
        20
    yanglihui  
       Jun 9, 2020
    @vloony
    所以,我是需要重新编译 nginx ?
    vloony
        21
    vloony  
    OP
       Jun 9, 2020
    @yanglihui 目前无解,我们的解决方案是小文件一套缓存系统 大文件一套缓存系统
    yanglihui
        22
    yanglihui  
       Jun 9, 2020
    @vloony 还没懂,求详细告知。我的都是小文件,几十 k ~ 几兆
    vloony
        23
    vloony  
    OP
       Jun 10, 2020
    @yanglihui 大文件缓存弃用 nginx
    About     Help     Advertise     Blog     API     FAQ     Solana     2813 Online   Highest 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 76ms UTC 10:54 PVG 18:54 LAX 03:54 JFK 06:54
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86