请教各位佬们一个奇怪的后端相关的技术问题 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
EndlessSummer
V2EX    Python

请教各位佬们一个奇怪的后端相关的技术问题

  •  1
     
  •   EndlessSummer 59 天前 2636 次点击
    这是一个创建于 59 天前的主题,其中的信息可能已经有所发展或是发生改变。

    最近开发一个新项目 技术栈是 python 服务打包 docker 镜像放到了云上部署 部署上之后没有问题 但是隔了一段时间就会有超时未响应的问题 只要重启容器就立马能正常访问了 这个服务本身也没有多大访问量 请问各位一下排查思路 以及大概哪里会有问题

    17 条回复    2025-10-24 15:45:05 +08:00
    YanSeven
        1
    YanSeven  
       59 天前
    你的程序本身是不是有问题,运行时间一长造成资源泄露,甚至日志一直打把卷的空间都堆到头了,自然就无法处理请求了。
    云环境本身的网络问题可能性不太大。
    EndlessSummer
        2
    EndlessSummer  
    OP
       59 天前
    @SGL 但是运行时间一般半天左右就会出现问题 而且也没有多大访问量 基本也就是各位数的点击
    jackOff
        3
    jackOff  
       59 天前
    python 服务没有设置网关吧?是 fast 这种异步后端还是啥同步后端?同步的可能会因为频繁请求丢失响应乃至彻底死掉,比如查询会触发 sqlite 查询,这玩意频繁触发有超时,超过头了就怎么查询都没有响应了,你可能需要设置一个 nginx 之类的网关
    Vegetable
        4
    Vegetable  
       59 天前
    很像 MySQL 2006 问题。
    默认 MySQL 的 wait_time=28800 ,就是 8 小时。如果没有处理好连接问题,会有服务静置 8 小时之后就出错的现象。你给的信息太少了,没什么好的建议,还是看看日志吧。
    ration
        5
    ration  
       59 天前
    没遇到这种问题,需要记录日志进行排查,容器是否挂了,访问 http 请求,数据库的处理有没有问题,提供一个简单的不涉及任何交互的接口访问看看
    fredcc
        6
    fredcc  
       58 天前 via Android
    思路:先看是 tcp 建连慢还是 rtt 慢还是传输慢,
    建连慢排查网络全链路,rtt 慢看应用内部处理或者前端 nginx 转发等,传输看带宽等。
    如果是应用层面问题,又是云平台,可以直接集成公有云 arms 探针,比自己打印日志一点点分析方便
    Ketteiron
        7
    Ketteiron  
       58 天前
    信息量太少了,技术栈 python 等于没说,起码也得说下框架和数据库,内存和 CPU 占用情况。
    我瞎猜个数据库/文件连接没关闭。
    btdwv
        8
    btdwv  
       58 天前
    可能是资源泄露、句柄没关闭之类的原因,建议在收到请求、发送回复的地方增加一些日志打印

    或者尝试一下
    如果增加访问量,从开始运行到无响应,时间间隔是否缩短
    如果完全没有访问量,一段时间后尝试访问,是否出现未响应的问题
    如果不用容器,直接运行,是否也会在一段时间后没响应
    btdwv
        9
    btdwv  
       58 天前
    未响应可能是没收到请求、收到请求后没处理、处理请求后没回复、发送回复失败,在各种关键点增加日志吧
    newtype0092
        10
    newtype0092  
       58 天前
    没多大访问量就把日志打开跑两天吧,好歹搞清楚是哪里慢才能分析,定位问题总不能黑盒盲猜吧。
    guiling
        11
    guiling  
       58 天前
    写个脚本 10s 一次轮询请求,刷一段时间看看能不能复现,如果不能复现可以往某些三方服务或者数据库链接实例超时销毁的方向排查,如果还是会无响应可能是代码本身问题
    bronyakaka
        12
    bronyakaka  
       57 天前
    试试 ENV PYTHOnUNBUFFERED=1
    EndlessSummer
        13
    EndlessSummer  
    OP
       52 天前
    wc 大佬你这个思路有点道理 我偶尔就会出现类似的日志报错问题 我去排查一下
    EndlessSummer
        14
    EndlessSummer  
    OP
       52 天前
    @Vegetable wc 大佬你这个思路有点道理 我偶尔就会出现类似的日志报错问题 我去排查一下
    EndlessSummer
        15
    EndlessSummer  
    OP
       52 天前
    @jackOff 确实没有设置网关 用的是 fastapi 但是频繁请求确实算不上 毕竟访问量不大 频繁出发 sqlite 查询这个这么能判断是不是这个问题
    jackOff
        16
    jackOff  
       52 天前
    @EndlessSummer 异步请求 sqlite 的话要设置 sqlite 异步查询,但是即使是开启异步查询,查询量太多 sqlite 最终还是会宕机,你可以整一个定时器任务用于定时器执行一个简单的数据库数据查询,看看响应,如果没有响应就是 sqlite 已经宕机了,只能重启了
    jackOff
        17
    jackOff  
       52 天前
    如果有频繁查询的数据,最好还是加一层缓存来分担数据库查询的压力,缓存查不到再去查数据库和更新缓存,简单暴力的方式就是整个 redis ,然后定时把 redis 数据写入 sqlite,sqlite 就基本完全隔离外部直接查询了
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     3208 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 22ms UTC 11:24 PVG 19:24 LAX 03:24 JFK 06:24
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86