python3.x 多路IO復用補充asyncio

来源:https://www.cnblogs.com/hello-init/archive/2018/08/29/9553485.html
-Advertisement-
Play Games

asyncio模塊是python之父寫的模塊,按說應該是靠譜的,python3.6版本定義為穩定版本。 說明書:https://docs.python.org/3/library/asyncio.html?highlight=asyncio#module-asyncio 大概定義:該模塊提供了使用協 ...


asyncio模塊是python之父寫的模塊,按說應該是靠譜的,python3.6版本定義為穩定版本。

說明書:https://docs.python.org/3/library/asyncio.html?highlight=asyncio#module-asyncio

大概定義:該模塊提供了使用協程編寫單線程併發代碼,通過套接字和其他資源復用I​​ / O訪問,運行網路客戶端和伺服器以及其他相關原語的基礎結構。

簡單應用(基於wsgi的報警器)

 1 #!/usr/bin/env python
 2 # -*- coding: utf-8 -*-
 3 # @Time    : 2018/8/21 10:40
 4 # @Author  : WangYue
 5 # @Site    : 
 6 # @File    : alertor_uwsgi.py
 7 # @Software: PyCharm
 8 
 9 #加入環境變數避免程式報錯
10 import sys,os
11 sys.path.append(os.path.dirname(os.path.dirname(__file__)))
12 
13 #引入wsgi模型,這裡主要是弄一個簡單的http模型來說明asyncio的簡單使用
14 from wsgiref.simple_server import make_server
15 
16 #引入asyncio
17 import asyncio
18 
19 #引入其他可能的依賴
20 from threading import Thread
21 import json
22 
23 #引入本程式其他的內容,與asyncio無關是程式業務的其他部分
24 from conf.alertor_conf import ALERTOR_CONFIG
25 from model.alert_method_class import SendMail
26 
27 #定義一個運行asyncio loop 的線程,去單獨運行它
28 def start_loop(loop):
29     asyncio.set_event_loop(loop)
30     loop.run_forever()
31 new_loop = asyncio.new_event_loop() #這個new_loop將會用於運行非同步程式
32 t = Thread(target=start_loop, args=(new_loop,))
33 t.start() #利用多線程,額外起一個線程運行asyncio loop然後它在自身使用協程之類處非同步處理業務
34 
35 
36 #這是wsgi主業務程式,application是wsgi的入口程式,wsgi就規定了這麼個函數名,這樣寫wsgi就認可它是入口了。傳參也是wsgi的規定,第一個是環境,第二個是響應
37 def application(env,start_res):
38     res_headers=[('Content-type', 'text/plain')]
39     if env["REQUEST_METHOD"]=='POST':
40         # the environment variable CONTENT_LENGTH may be empty or missing
41         try:
42             if env['PATH_INFO'] != "/send_alert":
43                 status = "404 func is not in use"
44                 start_res(status, res_headers)
45                 return [b"func is not in use"]
46 
47             request_body_size = int(env.get('CONTENT_LENGTH', 0))
48             status = "200 OK"
49             request_body = env['wsgi.input'].read(request_body_size)
50             print("post_info -->", request_body.decode())
51             r_body=json.loads(request_body.decode())
52             #就這裡一行代碼,new_loop.call_soon_threadsafe(),告訴asyncio去運行第一個參數的函數名,後邊的參數是被運行函數的傳參,有多少就傳參多少個,這是非同步的,非阻塞的。
53             new_loop.call_soon_threadsafe(SendMail.sendEmail,"Alertor Alarm level:"+r_body["level"]+"  server: "+r_body["server"],r_body)
54             start_res(status,res_headers)
55             return [b"ok send alert......."]
56         except (ValueError):
57             status = "404 json data not found key"
58             request_body_size = 0
59             start_res(status, res_headers)
60             return [b"get post info faild"]
61 
62     else:
63         status = "403 method error"
64         start_res(status,res_headers)
65         return [b'method error']
66 
67 # 1、只接受POST請求。數據為json格式,json中標記的,包括但不限於,包括的信息將會入庫,其他信息,在告警時會一併發出
68 # {
69 #     "level":"high", #告警級別,"high","medium","info",這個可以在配置文件中配置,配置信息是個列表,有序的從左至右為["high","medium","info"],對應後續告警邏輯及post中json的本欄位。
70 #     "@timestamp":"",#告警時間
71 #     "server":"",#告警源,可以是ip,主機名,服務名等可標識的
72 #     "message":""#具體的告警信息
73 # }
74 # 2、根據json中的level自動選擇告警途徑,選擇方式,在配置文件中的alert_method字典信息
75 # 3、將告警內容,存儲資料庫,便於日後查詢
76 # 4、後續提供查詢統計告警信息的方法
77 
78 
79 if __name__=="__main__":
80     wsgi_server=make_server(ALERTOR_CONFIG['bind_ip'],ALERTOR_CONFIG['port'],application)
81 
82     wsgi_server.serve_forever()

目前這裡先這麼用,這個模型的性能是基於uwsgi運行,2進程,每個進程內4個線程,基準性能是15000請求總量,5000客戶端

 ab -n 15000-c 5000 -p test_alert.txt -T application/x-www-form-urlencoded "http://test.alert.com.cn/test.html"

效果還湊合吧。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  •     在使用Linux系統中,有時候還需要做身份切換,這是為什麼? 使用普通賬號 :系統日常操作的好習慣   雖然使用root對系統進行各種操作不受許可權等方面的限制,但卻存在重大的安全隱患,假如有人不小心輸入的命令 rm rf / 。因此為了安全,一般都建議儘量以普通 ...
  • cp命令用來將一個或多個源文件或者目錄複製到指定的目的文件或目錄。它可以將單個源文件複製成一個指定文件名的具體的文件或一個已經存在的目錄下。cp命令還支持同時複製多個文件,當一次複製多個文件時,目標文件參數必須是一個已經存在的目錄,否則將出現錯誤。 語法 選項 參數 實例 如果把一個文件複製到一個目 ...
  • 2018-8-29 dynalist 配額 提示有一個G的配額 就是使用的流量用光了.僅有1個G ...
  • 雖然按照網上教程一步一步來,但還是遇到了幾個錯誤點,現整理出來,主要是自己做個筆記,同時也希望能幫助到其他像我一樣第一次在Xcode上搭建Python環境的人。首先感謝原作者:https://zhidao.baidu.com/question/2078353563211972948.html,我加上 ...
  • pwd命令以絕對路徑的方式顯示用戶當前工作目錄。 語法 選項 實例 ...
  • 一、啟動 cd usr/local/nginx/sbin ./nginx 二、重啟 更改配置重啟nginx 判斷配置文件是否正確 三、關閉 查詢nginx主進程號 ps -ef | grep nginx 從容停止 kill -QUIT 主進程號 快速停止 kill -TERM 主進程號 強制停止 k ...
  • [toc] 1. 安裝顯卡驅動 檢測顯卡驅動及型號 添加ELPepo源 安裝NVIDIA驅動檢測 2. 安裝CUDA\CUDNN 2.1 cuda 官網下載cuda,最好下載9.0版本: "https://developer.nvidia.com/cuda toolkit archive" 選擇符合 ...
  • 很多人都有使用綠色軟體的習慣,在這裡我簡單稱其為Portable App 將這些軟甲放到U盤中隨身攜帶,便於我們使用更加符合自身習慣的功能軟體。 相信習慣將軟體放到U盤啟動都會碰到一個問題,就是每次打開這些軟體就需要在目錄中尋找對應的啟動文件了。 多數人日常生活中都會通過使用快捷方式啟動軟體,那麼我 ...
一周排行
    -Advertisement-
    Play Games
  • 前言 本文介紹一款使用 C# 與 WPF 開發的音頻播放器,其界面簡潔大方,操作體驗流暢。該播放器支持多種音頻格式(如 MP4、WMA、OGG、FLAC 等),並具備標記、實時歌詞顯示等功能。 另外,還支持換膚及多語言(中英文)切換。核心音頻處理採用 FFmpeg 組件,獲得了廣泛認可,目前 Git ...
  • OAuth2.0授權驗證-gitee授權碼模式 本文主要介紹如何筆者自己是如何使用gitee提供的OAuth2.0協議完成授權驗證並登錄到自己的系統,完整模式如圖 1、創建應用 打開gitee個人中心->第三方應用->創建應用 創建應用後在我的應用界面,查看已創建應用的Client ID和Clien ...
  • 解決了這個問題:《winForm下,fastReport.net 從.net framework 升級到.net5遇到的錯誤“Operation is not supported on this platform.”》 本文內容轉載自:https://www.fcnsoft.com/Home/Sho ...
  • 國內文章 WPF 從裸 Win 32 的 WM_Pointer 消息獲取觸摸點繪製筆跡 https://www.cnblogs.com/lindexi/p/18390983 本文將告訴大家如何在 WPF 裡面,接收裸 Win 32 的 WM_Pointer 消息,從消息裡面獲取觸摸點信息,使用觸摸點 ...
  • 前言 給大家推薦一個專為新零售快消行業打造了一套高效的進銷存管理系統。 系統不僅具備強大的庫存管理功能,還集成了高性能的輕量級 POS 解決方案,確保頁面載入速度極快,提供良好的用戶體驗。 項目介紹 Dorisoy.POS 是一款基於 .NET 7 和 Angular 4 開發的新零售快消進銷存管理 ...
  • ABP CLI常用的代碼分享 一、確保環境配置正確 安裝.NET CLI: ABP CLI是基於.NET Core或.NET 5/6/7等更高版本構建的,因此首先需要在你的開發環境中安裝.NET CLI。這可以通過訪問Microsoft官網下載並安裝相應版本的.NET SDK來實現。 安裝ABP ...
  • 問題 問題是這樣的:第三方的webapi,需要先調用登陸介面獲取Cookie,訪問其它介面時攜帶Cookie信息。 但使用HttpClient類調用登陸介面,返回的Headers中沒有找到Cookie信息。 分析 首先,使用Postman測試該登陸介面,正常返回Cookie信息,說明是HttpCli ...
  • 國內文章 關於.NET在中國為什麼工資低的分析 https://www.cnblogs.com/thinkingmore/p/18406244 .NET在中國開發者的薪資偏低,主要因市場需求、技術棧選擇和企業文化等因素所致。歷史上,.NET曾因微軟的閉源策略發展受限,儘管後來推出了跨平臺的.NET ...
  • 在WPF開發應用中,動畫不僅可以引起用戶的註意與興趣,而且還使軟體更加便於使用。前面幾篇文章講解了畫筆(Brush),形狀(Shape),幾何圖形(Geometry),變換(Transform)等相關內容,今天繼續講解動畫相關內容和知識點,僅供學習分享使用,如有不足之處,還請指正。 ...
  • 什麼是委托? 委托可以說是把一個方法代入另一個方法執行,相當於指向函數的指針;事件就相當於保存委托的數組; 1.實例化委托的方式: 方式1:通過new創建實例: public delegate void ShowDelegate(); 或者 public delegate string ShowDe ...