python3.x 多路IO復用補充asyncio

来源:https://www.cnblogs.com/hello-init/archive/2018/08/29/9553485.html
-Advertisement-
Play Games

asyncio模塊是python之父寫的模塊,按說應該是靠譜的,python3.6版本定義為穩定版本。 說明書:https://docs.python.org/3/library/asyncio.html?highlight=asyncio#module-asyncio 大概定義:該模塊提供了使用協 ...


asyncio模塊是python之父寫的模塊,按說應該是靠譜的,python3.6版本定義為穩定版本。

說明書:https://docs.python.org/3/library/asyncio.html?highlight=asyncio#module-asyncio

大概定義:該模塊提供了使用協程編寫單線程併發代碼,通過套接字和其他資源復用I​​ / O訪問,運行網路客戶端和伺服器以及其他相關原語的基礎結構。

簡單應用(基於wsgi的報警器)

 1 #!/usr/bin/env python
 2 # -*- coding: utf-8 -*-
 3 # @Time    : 2018/8/21 10:40
 4 # @Author  : WangYue
 5 # @Site    : 
 6 # @File    : alertor_uwsgi.py
 7 # @Software: PyCharm
 8 
 9 #加入環境變數避免程式報錯
10 import sys,os
11 sys.path.append(os.path.dirname(os.path.dirname(__file__)))
12 
13 #引入wsgi模型,這裡主要是弄一個簡單的http模型來說明asyncio的簡單使用
14 from wsgiref.simple_server import make_server
15 
16 #引入asyncio
17 import asyncio
18 
19 #引入其他可能的依賴
20 from threading import Thread
21 import json
22 
23 #引入本程式其他的內容,與asyncio無關是程式業務的其他部分
24 from conf.alertor_conf import ALERTOR_CONFIG
25 from model.alert_method_class import SendMail
26 
27 #定義一個運行asyncio loop 的線程,去單獨運行它
28 def start_loop(loop):
29     asyncio.set_event_loop(loop)
30     loop.run_forever()
31 new_loop = asyncio.new_event_loop() #這個new_loop將會用於運行非同步程式
32 t = Thread(target=start_loop, args=(new_loop,))
33 t.start() #利用多線程,額外起一個線程運行asyncio loop然後它在自身使用協程之類處非同步處理業務
34 
35 
36 #這是wsgi主業務程式,application是wsgi的入口程式,wsgi就規定了這麼個函數名,這樣寫wsgi就認可它是入口了。傳參也是wsgi的規定,第一個是環境,第二個是響應
37 def application(env,start_res):
38     res_headers=[('Content-type', 'text/plain')]
39     if env["REQUEST_METHOD"]=='POST':
40         # the environment variable CONTENT_LENGTH may be empty or missing
41         try:
42             if env['PATH_INFO'] != "/send_alert":
43                 status = "404 func is not in use"
44                 start_res(status, res_headers)
45                 return [b"func is not in use"]
46 
47             request_body_size = int(env.get('CONTENT_LENGTH', 0))
48             status = "200 OK"
49             request_body = env['wsgi.input'].read(request_body_size)
50             print("post_info -->", request_body.decode())
51             r_body=json.loads(request_body.decode())
52             #就這裡一行代碼,new_loop.call_soon_threadsafe(),告訴asyncio去運行第一個參數的函數名,後邊的參數是被運行函數的傳參,有多少就傳參多少個,這是非同步的,非阻塞的。
53             new_loop.call_soon_threadsafe(SendMail.sendEmail,"Alertor Alarm level:"+r_body["level"]+"  server: "+r_body["server"],r_body)
54             start_res(status,res_headers)
55             return [b"ok send alert......."]
56         except (ValueError):
57             status = "404 json data not found key"
58             request_body_size = 0
59             start_res(status, res_headers)
60             return [b"get post info faild"]
61 
62     else:
63         status = "403 method error"
64         start_res(status,res_headers)
65         return [b'method error']
66 
67 # 1、只接受POST請求。數據為json格式,json中標記的,包括但不限於,包括的信息將會入庫,其他信息,在告警時會一併發出
68 # {
69 #     "level":"high", #告警級別,"high","medium","info",這個可以在配置文件中配置,配置信息是個列表,有序的從左至右為["high","medium","info"],對應後續告警邏輯及post中json的本欄位。
70 #     "@timestamp":"",#告警時間
71 #     "server":"",#告警源,可以是ip,主機名,服務名等可標識的
72 #     "message":""#具體的告警信息
73 # }
74 # 2、根據json中的level自動選擇告警途徑,選擇方式,在配置文件中的alert_method字典信息
75 # 3、將告警內容,存儲資料庫,便於日後查詢
76 # 4、後續提供查詢統計告警信息的方法
77 
78 
79 if __name__=="__main__":
80     wsgi_server=make_server(ALERTOR_CONFIG['bind_ip'],ALERTOR_CONFIG['port'],application)
81 
82     wsgi_server.serve_forever()

目前這裡先這麼用,這個模型的性能是基於uwsgi運行,2進程,每個進程內4個線程,基準性能是15000請求總量,5000客戶端

 ab -n 15000-c 5000 -p test_alert.txt -T application/x-www-form-urlencoded "http://test.alert.com.cn/test.html"

效果還湊合吧。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  •     在使用Linux系統中,有時候還需要做身份切換,這是為什麼? 使用普通賬號 :系統日常操作的好習慣   雖然使用root對系統進行各種操作不受許可權等方面的限制,但卻存在重大的安全隱患,假如有人不小心輸入的命令 rm rf / 。因此為了安全,一般都建議儘量以普通 ...
  • cp命令用來將一個或多個源文件或者目錄複製到指定的目的文件或目錄。它可以將單個源文件複製成一個指定文件名的具體的文件或一個已經存在的目錄下。cp命令還支持同時複製多個文件,當一次複製多個文件時,目標文件參數必須是一個已經存在的目錄,否則將出現錯誤。 語法 選項 參數 實例 如果把一個文件複製到一個目 ...
  • 2018-8-29 dynalist 配額 提示有一個G的配額 就是使用的流量用光了.僅有1個G ...
  • 雖然按照網上教程一步一步來,但還是遇到了幾個錯誤點,現整理出來,主要是自己做個筆記,同時也希望能幫助到其他像我一樣第一次在Xcode上搭建Python環境的人。首先感謝原作者:https://zhidao.baidu.com/question/2078353563211972948.html,我加上 ...
  • pwd命令以絕對路徑的方式顯示用戶當前工作目錄。 語法 選項 實例 ...
  • 一、啟動 cd usr/local/nginx/sbin ./nginx 二、重啟 更改配置重啟nginx 判斷配置文件是否正確 三、關閉 查詢nginx主進程號 ps -ef | grep nginx 從容停止 kill -QUIT 主進程號 快速停止 kill -TERM 主進程號 強制停止 k ...
  • [toc] 1. 安裝顯卡驅動 檢測顯卡驅動及型號 添加ELPepo源 安裝NVIDIA驅動檢測 2. 安裝CUDA\CUDNN 2.1 cuda 官網下載cuda,最好下載9.0版本: "https://developer.nvidia.com/cuda toolkit archive" 選擇符合 ...
  • 很多人都有使用綠色軟體的習慣,在這裡我簡單稱其為Portable App 將這些軟甲放到U盤中隨身攜帶,便於我們使用更加符合自身習慣的功能軟體。 相信習慣將軟體放到U盤啟動都會碰到一個問題,就是每次打開這些軟體就需要在目錄中尋找對應的啟動文件了。 多數人日常生活中都會通過使用快捷方式啟動軟體,那麼我 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...