V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
unfurl
V2EX  ›  Python

gunicorn+flask, 不同的 worker 之间怎么共享一个对象

  •  
  •   unfurl · Aug 18, 2016 · 10917 views
    This topic created in 3540 days ago, the information mentioned may be changed or developed.

    我用 flask 实现了两个接口,用于操作一个字典对象,伪代码如下:

    # -*- coding: utf-8 -*-
    
    from flask import Flask, request
    
    app = Flask(__name__)
    shared_dict = dict()
    
    
    @app.route("/set")
    def set():
        shared_dict[...] = request...
    
    
    @app.route("/get")
    def get():
        return shared_dict[...]
    

    直接用app.run()这个程序没有任何问题

    现在想要部署用gunicorn+flask的方式部署,启动参数gunicorn -w 4 main:app

    我发现不同的 worker 不是共用这个shared_dict对象,翻查了很多文档,没有找到解决办法

    10 replies    2018-01-29 14:07:26 +08:00
    binux
        1
    binux  
       Aug 18, 2016   ❤️ 2
    设计时你就应该想好这个问题。取决于需求和访问量

    1. 使用 thread worker 来跑
    2. 使用外部资源共享对象,例如数据库,文件等
    3. 只跑一个 worker
    unfurl
        2
    unfurl  
    OP
       Aug 18, 2016
    @binux 设计时访问量不大,直接跑就行了,现在想用 gunicorn 部署,才发现这个问题,尴尬了
    paulw54jrn
        3
    paulw54jrn  
       Aug 18, 2016
    这个涉及到操作系统进程的基本概念...
    felixzhu
        4
    felixzhu  
       Aug 18, 2016
    引入一个外部存储不就行了。开个 redis 啥的
    unfurl
        5
    unfurl  
    OP
       Aug 18, 2016
    @felixzhu 我想先从代码层次来解决,实在不行只能上 redis 了
    josephok
        6
    josephok  
       Aug 18, 2016 via Android
    需要进程间通信了。
    lvhuiyang
        7
    lvhuiyang  
       Aug 18, 2016
    redis 正解
    lovepython
        8
    lovepython  
       Aug 19, 2016
    基本进程间通信的可能性不大了,因为是 gun 控制的,
    一楼的回答已经是最好的答案了
    wuyu1998
        9
    wuyu1998  
       Aug 20, 2016
    用 NoSQL 存放 shared_dict 对象的序列化字符串。
    alsoran1
        10
    alsoran1  
       Jan 29, 2018
    请问楼主 这个问题当时怎么解决的?有用到共享内存吗?
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5254 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 83ms · UTC 01:14 · PVG 09:14 · LAX 18:14 · JFK 21:14
    ♥ Do have faith in what you're doing.