Python 多进程:有什么主进程守护子进程的方法吗? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
Richard14
V2EX    Python

Python 多进程:有什么主进程守护子进程的方法吗?

  •  
  •   Richard14 2023-02-22 02:08:45 +08:00 2267 次点击
    这是一个创建于 1038 天前的主题,其中的信息可能已经有所发展或是发生改变。

    例如用 socket 在某端口绑定了一个监听服务,然后用 os.fork 分裂出多个节点。

    如果其中一个进程挂了,这种情况下主进程有什么办法可以监控和恢复吗?

    10 条回复    2023-02-23 09:37:37 +08:00
    ysc3839
        1
    ysc3839  
       2023-02-22 02:33:48 +08:00 via Android
    SIGCHLD
    mingl0280
        2
    mingl0280  
       2023-02-22 04:05:35 +08:00 via Android
    fork 完了有 pid 的,直接拉 pid 列表看看是不是死了呗
    ruanimal
        3
    ruanimal  
       2023-02-22 07:52:35 +08:00
    其实好奇,既然你想自己 fork 那么你就用 c 的写法啊,为啥有这个问题呢?

    或者用 ForkingTCPServer
    wheeler
        4
    wheeler  
       2023-02-22 08:12:55 +08:00 via iPhone
    不能直接 supervisord systemd 吗
    julyclyde
        5
    julyclyde  
       2023-02-22 08:37:23 +08:00
    你自己 fork 那就只能自己 SIGCHLD 了
    ForkingTCPServer 、ThreadPoolExecutor 之类的都是作一些简化,但是本质上还是一样的
    rationa1cuzz
        6
    rationa1cuzz  
       2023-02-22 09:12:37 +08:00
    我们以前是起个线程去看,挂了化去重新拉起来
    lolizeppelin
        7
    lolizeppelin  
       2023-02-22 10:14:53 +08:00   1
    对 linux 不够熟不要自己写一套

    最佳实践参考 openstack 服务库的 oslo_service
    里面有 linux 下多进程的标准管理方式以及可用代码
    Richard14
        8
    Richard14  
    OP
       2023-02-22 14:33:07 +08:00
    @ysc3839
    @mingl0280
    @ruanimal
    @julyclyde
    @rationa1cuzz
    @lolizeppelin 感谢回复,我目前其实没把进程玩挂过,前端加了限峰,只是考虑作为一个长期运行撒手不管的服务的话,我没法预期它会不会有什么期望外的行为,想做比较成熟的应用的话应该考虑挂了拉起的情况。但是听各位说的感觉似乎是主进程会接收子进程挂起信号,但是我不太了解比如 win 平台下进程挂了就是未响应,这种进程还会发信号吗?另外如果参考 linux 下其他代码的话,毕竟这是 python 程序。。叫我参考 C 的代码我不太懂两者怎么结合起来。


    @wheeler 直接用三方程序的话有一个问题就是三方程序只能监管一个进程的资源,比如我一个绑定 10086 端口的服务有 10 个 fork 进程,这些子进程应该是监控不到,只有主进程挂了三方监控才会重新拉起吧?如果直接开 10 个主进程的话,没办法绑定到同一监听端口啊
    ClericPy
        9
    ClericPy  
       2023-02-22 18:38:13 +08:00
    进程不是有 wait 么, 不能用 wait 吗... 我管理几十个 chrome 进程用的就是 wait, 看它的 return code 就知道是不是正常退出, 而且反应速度也挺不错的. 不放心再加个验活就好了, 验活可以用 poll 也可以用 os.kill 0 的方式
    julyclyde
        10
    julyclyde  
       2023-02-23 09:37:37 +08:00
    @Richard14 进程如果退出的话,其父进程是可以收到信号的。不是子进程发的,是操作系统发的
    如果是卡死啦那就没信号
    你可能需要一个 timeout 或者 watchdog 机制?
    /div>
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2615 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 35ms UTC 14:47 PVG 22:47 LAX 06:47 JFK 09:47
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86