python多进程重复加载的解决方式
作者:ShellCollector 发布时间:2021-07-22 23:49:43
标签:python,多进程,重复加载
flask多进程会引起重复加载,
解决方法:把耗资源的加载挪到函数里面或者类里面,就不会重复加载资源了。
测试发现,不是flask引起的,是多进程会引起重复加载python文件。
把flask注释掉,也会重复加载。
# autotrade/__init__.py
# __init__.py 定义全局的app路由
# 然后将其他模块由app装饰后的函数导入,flask即可识别所有的请求入口
import time
from flask import Flask
from multiprocessing import Process
# 配置全局app
# 导入index中定义的所有函数
# from autotrade.server.index import *
print("import will repeat")
def run_index():
print("run_index once")
app = Flask(__name__)
# 启动web服务器,使用多线程方式,接收所有http请求
app.run(host='0.0.0.0', port=5000, threaded=True,debug=False)
def run_orders():
# 启动查询交易程序
while True:
print('执行相应的交易程序')
time.sleep(3)
def main():
# 主程序
# 创建子进程
jobs = []
jobs.append(Process(target=run_index))
# jobs.append(Process(target=run_orders))
# 启动子进程
for job in jobs:
job.start()
# 等待子进程结束返回
for job in jobs:
job.join()
if __name__ == '__main__':
# run_index()
main()
一般情况,把需要加载的封装到函数或者类中就可以了,
但是有一个例外:就是SQLAlchemy
必须在py文件中实例化,
from flask_login import LoginManager
from flask_mail import Mail
from flask_socketio import SocketIO
from flask_migrate import Migrate
from flask_rq2 import RQ
from flask_wtf.csrf import CSRFProtect
from monitor.common.storage import LocalStorage, QiniuStorage, ObjectStorage
import config.global_var as gl_var
# from monitor.common.es_search import ESearchEngine
QINIU_AVAILABLE = gl_var.get_value("qiniu_available")
OSS_AVAILABLE = gl_var.get_value("oss_available")
REDIS_URI = gl_var.get_value("redis_uri")
BASEDIR = gl_var.get_value("basedir")
sbdwl = gl_var.get_value("sbdwl")
class Redis(object):
def __init__(self):
self._db = None
def init_app(self, uri=REDIS_URI):
self._db = _redis.Redis.from_url(uri)
@property
def db(self):
return self._db
print("import foundation")
import threading
class Singleton(object):
_instance_lock=threading.Lock()
def __init__(self):
pass
# import time
# print("sleep")
# time.sleep(1)
def __new__(cls, *args, **kwargs):
if not hasattr(Singleton,"_instance"):
with Singleton._instance_lock:
if not hasattr(Singleton,"_instance"):
print("create _instance----------------------------")
Singleton._instance=object.__new__(cls,*args,**kwargs)
app = Flask(__name__)
Singleton._instance.db = SQLAlchemy(app)
Singleton._instance.login_manager = LoginManager()
解决方法:把启动换到一个新文件,然后在函数中调用这个文件,import也放在函数内部。
来源:https://blog.csdn.net/jacke121/article/details/88904837


猜你喜欢
- 从有道词典网页获取某单词的中文解释。import reimport urllibword=raw_input('input a wo
- Rosenbrock函数的定义如下:其函数图像如下:我分别使用梯度下降法和牛顿法做了寻找Rosenbrock函数的实验。梯度下降梯度下降的更
- pyfinance简介datasets.py :金融数据下载(基于request进行数据爬虫,有些数据由于外网受限已经无法下载);gener
- 一个例子让你彻底明白原型对象和原型链开篇之前对js中的原型链和原型对象有所了解,每当别人问我什么是原型链和原型对象时,我总是用很官方(其实自
- 最近脱离了googlecolab想使用本地的anaconda进行机器学习课题的演练,在安装tensorflow时报错 : Unsatisfi
- 笔者小白在收集印刷体汉字的深度学习训练集的时候,一开始就遇到的了一个十分棘手的问题,就是如何获取神经网络的训练集数据。通过上网搜素,笔者没有
- Django在做url设置时,如果有两个APP,那么再import时会出错解决的方法有两种:方法一:在每个APP里设置单独的url.py文件
- /* 全选择*/ function SB002SelectAll() { var table = document.getElementBy
- 简介除ide的执行方式外,命令行的方式执行Python脚本是参数化程序执行的一种常见且简单的方法,正确处理命令行参数,可以提供给包含某种参数
- 上下班打卡是程序员最讨厌的东西,更讨厌的是设置了连上指定wifi打卡。手机上有一些定时机器人之类的app,经过实际测试,全军覆没,没一个可以
- javascript曾一度被认为是玩具型的语言,因为它太容易上手,而且,javascript曾一度担任为web站点“打杂”的职责。直到Aja
- Cookie 对象是一种以文件(Cookie文件)的形式保存在客户端硬盘的Cookies文件夹中的数据信息(Cookie数据)。Cookie
- 本文实例讲述了CodeIgniter自定义控制器MY_Controller用法。分享给大家供大家参考,具体如下:Codeigniter所有的
- 【OpenCV】⚠️高手勿入! 半小时学会基本操作 ⚠️ 图像轮廓概述OpenCV 是一个跨平台的计算机视觉库, 支持多语言, 功能强大.
- 国旗是一个国家的象征,它可以反映一个国家的特色和传统,国旗起源于近代的欧洲,是一个国家主权意识不断增强后的必然产物,本文我们使用 Pytho
- 所以特意写了这个配置文档,相信按照以下步骤你一定会成功的.错误的地方也希望各位指正. 本例是在wiondws XP下 php5.2.1(zi
- 一、VScode下载官网Download Visual Studio Code - Mac, Linux, Windows点击64 bit会
- 差不多我用到的大部分代码都是从上面cv(Ctrl+c---->Ctrl+v)下来的1、首先解决The context is parti
- 如下所示:群里一朋友发了一个如上图的问题,解决方法如下data = {'a':[1,1,1,1,1,1,1,1,2,2,2,
- 首先来看一个例子,正常情况下我们定义并且实例一个类如下class Foo(object):def __init__(self):