推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
yakczh
V2EX  ›  Python

python web 脚本为什么不能热更新

  •  
  •   yakczh · May 13, 2015 · 11860 views
    This topic created in 4208 days ago, the information mentioned may be changed or developed.

    java应用服务器启动以后,要把web项目下用的所有类文件都要加载到内存,修改了源代码,只能重启服务器,但是python应该是动态脚本,为什么修改了脚本以后要用 tornado.autoreload.start() 这样重启服务器

    30 replies  •  2015-05-15 08:55:56 +08:00
    ksc010
    ksc010
    May 13, 2015
    1
    python启动后是常住内存的
    不跟php一样每次请求“都加载一次”
    yakczh
    yakczh
    OP
    May 13, 2015
    2
    那如果项目变大了,import的文件越多,占用的内存就越大, 跟java一样了
    binux
    binux
    May 13, 2015 via Android❤️1
    3
    从未听说过,一个项目被抱怨代码多了,占内存大的。
    clino
    clino
    May 13, 2015
    4
    理论上应该也能做到热更新吧,比如说不少uliweb的调试服务器之类为了调试方便就是改完马上应用的,但要是生产环境这么做,出问题的时候不知道是不是用了热更新导致的莫名其妙的问题,估计很少人在生产环境下会这么用
    kingname
    kingname
    May 13, 2015
    5
    其实是可以热更新的。如果你见过flask的debug模式,你就知道,你改了一个文件,它自动就加载了。
    yakczh
    yakczh
    OP
    May 13, 2015
    6
    @kingname flask 也是扫苗lib site-packages 下的所有文件, 有更新就重启服务器
    yakczh
    yakczh
    OP
    May 13, 2015
    7
    如果你安装的package比较多,还不如直接ctrl+c 来得快
    est
    est
    May 13, 2015
    8
    > 为什么修改了脚本以后要用 tornado.autoreload.start() 这样重启服务器

    因为显式重启比较好?

    框架也可以非显式重启,那么会影响性能的。
    awanabe
    awanabe
    May 13, 2015
    9
    python代码编译成pyc..你更新了py代码, 需要重启编辑一次...这个就是非编译语言的做法...
    yakczh
    yakczh
    OP
    May 13, 2015
    10
    @awanabe 那这样python是不是跟java一样了?
    laoyuan
    laoyuan
    May 13, 2015
    11
    所以说PHP是。。。我学Python 就是为了写爬虫!
    gamexg
    gamexg
    May 13, 2015
    12
    说实在的还是手动重启比较好。
    比如你这次更新需要修改了10个文件,你刚修改了1个文件,这时候有人访问,如果自动加载新代码的话访问的是更新了半截的网站,出现各种意外都不奇怪。
    mkeith
    mkeith
    May 13, 2015
    13
    怎么Python就和Java一样了啊
    hahastudio
    hahastudio
    May 13, 2015
    14
    理论上是可以的,有 imp module https://docs.python.org/3/library/imp.html
    2.7 也有 reload 函数 https://docs.python.org/2/library/functions.html#reload

    不过正如文档里提到的, The init function of extension modules is not called a second time.
    当然你可以手工做,但总会出现这样那样的问题。我看到更多的是玩具性质的 script
    实际生产环境的话,也许一个临时的 hotfix 用这个机制挺有效,但是真的更新的话,还是重启 server 比较好
    caoyue
    caoyue
    May 13, 2015
    15
    我觉得不是不能,是没必要=-=
    只有设计的时候就考虑了不能重启必须热更新的情况,比如 Erlang 之于电信服务,那支持热更新就是顺理成章的了
    weyou
    weyou
    May 13, 2015
    16
    实现一个动态加载的功能就可以了, 需要重新load模块,发个信号给主进程就行了。
    raptor
    raptor
    May 13, 2015
    17
    即时重启与否并不是最重要的,重要是能否优雅地重启——即在不中断当前连接的情况下对新连接使用新服务。
    bydmm
    bydmm
    May 13, 2015
    18
    应该可以热更新 问题是热更新带来的脏读脏写怎么办? 而且项目启动的时候,很多class是需要做缓存来优化性能的。

    我不太懂python,但是ruby的 ruby on rails框架就有支持热更新的开发模式和需要重启的生产模式。 我猜应该和楼主的问题有相同的原因
    bydmm
    bydmm
    May 13, 2015
    19
    @raptor 对服务器进行逐批重启就搞定了,这个java都ok
    yakczh
    yakczh
    OP
    May 13, 2015
    20
    @bydmm ruby怎么实现的? 是不是把app下要用到的rb脚本启动的时候一次性加载到内存里?
    kslr
    kslr
    May 13, 2015
    21
    自动加载有什么好的
    ibigbug
    ibigbug
    May 13, 2015
    22
    为什么要能?
    rcmerci
    rcmerci
    May 13, 2015
    23
    你代码里开个线程每隔5秒检查一下有没有文件改变。
    改变了然后就重启。
    这样就可以算热更新把
    feilaoda
    feilaoda
    May 13, 2015
    24
    还曾想写个好用的支持热部署的web服务器,有了docker之后,就感觉热部署不再那么需要了。
    loveyu
    loveyu
    May 13, 2015
    25
    最近一直在想JAVA热更新问题,虽然目前没这个必要,但感觉要不中断现有链接且保证链接不中断好难。有想过使用两台服务器做来切换不知道是否可行。
    caixiexin
    caixiexin
    May 13, 2015
    26
    刚学flask的时候我也发现了,也许惯性思维觉得解释型语言(php,js)都是要用再加载的?
    FrankFang128
    FrankFang128
    May 13, 2015
    27
    一般需要开启 debug 模式
    raptor
    raptor
    May 14, 2015
    28
    @bydmm 那么当前连接在被重启服务器上的用户就会被强制断开
    bydmm
    bydmm
    May 14, 2015
    29
    @raptor
    @loveyu
    阿里就是通过分批次重启解决的, 首先让某些服务器停止接受新请求,剩余的请求最多30秒就断开了(超过30秒就超时了)然后这台服务器重启, 第一批重启完之后是第二批,第三批。
    raptor
    raptor
    May 15, 2015
    30
    @bydmm 是啊,重点就在于让准备重启的服务器暂时停止接受新请求,并等待现有请求处理完成。
    这事跟有没有多服务器没有关系,单个服务器也需要考虑这个问题,比如apache的graceful,nginx的kill -HUP。python的web server也可以,比如gunicorn就可以
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   921 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 56ms · UTC 20:39 · PVG 04:39 · LAX 12:39 · JFK 15:39
    ♥ Do have faith in what you're doing.