Python潮流周刊#5:併發一百萬個任務要用多少記憶體?

来源:https://www.cnblogs.com/pythonista/archive/2023/06/03/17454309.html
-Advertisement-
Play Games

# 2022版本IDEA+Maven+Tomcat的第一個程式(傻瓜教學) ​ 作為學習Javaweb的一個重要環節,如何實現在IDEA中利用Maven工具創建一個Javaweb程式模版並連接Tomcat發佈是非常重要的。我比較愚鈍(小白),而且自身電腦先前運行過spring或maven的程式,系統 ...


你好,我是貓哥。這裡記錄每周值得分享的 Python 及通用技術內容,部分為英文,已在小標題註明。(標題取自其中一則分享,不代表全部內容都是該主題,特此聲明。)

博客原文:https://pythoncat.top/posts/2023-06-03-weekly5

文章&教程

1、併發一百萬個任務要用多少記憶體?(英文)

文中測試了主流的編程語言(Rust、Go、Java、C#、Python、Node.js 和 Elixir),依次運行 1 個、1 萬、10 萬和 100 萬個任務,統計了這些語言所消耗的記憶體。隨著任務量增加,它們的排名出現了較大變化,讓我感覺挺意外的。

100萬任務占用的記憶體

2、使用這些方法讓你的 Python 併發任務執行得更好 (英文)

使用 asyncio 有什麼最佳實踐呢?這篇文章介紹了 asyncio.gather、asyncio.as_completed 和 asyncio.wait API,還介紹了 Python 3.11 中引入的新 asyncio.TaskGroup 特性。(附一篇不完整的譯文

3、上岸第一劍,編程語法必修:Python 併發編程

一篇長文,以四個章節(網路編程、多線程、多進程、協程)全面介紹了 Python 併發編程的知識點。

4、Python 多線程編程的終極指南 (英文)

也是一篇長文,介紹了 Python 多線程編程的方方面面,真的是一份終極指南。

5、編程語言是如何實現併發的之併發模型篇

依然是長文,介紹了常見的併發模型及不同編程語言是如何實現的。它的姊妹篇是《編程語言是如何實現併發的之操作系統篇》,都是圖文並茂,資料翔實。

併發模型

6、鵝廠程式員的 9 個生存法則

作者分享了自己工作多年對代碼設計、架構設計和工作思維的經驗,比如 DRY 原則、SOLID 原則、高可用設計、如何想盡一切辦法“偷懶”,等等。(文中提到了面向對象編程的原則,這裡順便推薦另一位鵝廠程式員的《Python工匠》系列的第 12-14 章)

7、一覽 Python 3.12!PEP 701 —— f-string 語法規範化

f-string 是 Python 最好用的特性之一,但它也有諸多限制。即將發佈的 3.12 會對 f-string 作語法規範化,詳情可查看 PEP-701 。這裡分享的文章帶大家直觀地感受了這個改動在代碼的詞法解析(lexing)層面的不同。

8、PyCharm:新用戶界面的五大亮點 (英文)

大家都用上 PyCharm 新的 UI 了麽?這份官方教程介紹了新 UI 的使用方法及亮點。

9、PEP-594 已被實現:Python 3.13 將移除 20 個標準庫 (英文)

Python 3.12 正式版本還要幾個月才發佈,這邊 3.13 已經迫不及待地移除了 20 個標準庫。值得一提的是,2to3 項目及 lib2to3 模塊也將會被移除。

10、Grasshopper:一個用於負載測試的開源 Python 庫 (英文)

Locust 是 Python 最主流的分散式負載測試庫,而文章介紹的 Grasshopper 是新開源的基於 Locust 與 Pytest 的更全面的性能測試庫。

Grafana面板展示了Grasshopper和InfluxDB指標

11、Python 裝飾器:用包裝巫術增強你的代碼 (英文)

Python 裝飾器是增強代碼行為和靈活性的強大工具,文章內容從基礎到高階,是不錯的學習材料。

12、三個練手項目的實戰教程:

  • 用 Python 開發 Telegram 機器人 (英文):開發 tg 機器人,教程使用 Tornado 作後端,項目部署在 Render 平臺上
  • 花一周末用 Python 實現 DNS (英文):教程指導實現一個 DNS 解析器,總代碼僅約 200 行,但作者給出了很多學習材料和代碼講解,你能學到的絕對夠多。另外,教程最後還有 7 個練習題,可以進一步開發 DNS 解析器的功能。(Julia Evans 是一個寶藏作者,博客網站pandas-cookbook ,等等,強烈推薦!!!)
  • 用 Python 構建你自己的 Git (英文):這個項目我要給它滿分!教程網站設計得獨特而酷炫,從最小可行項目起步,逐漸添加代碼,手把手教你實現 Git 的各種功能。每章都使用 Git 的差異比對方式,明確告訴你增刪了哪些代碼,良心滿滿,全網估計找不著第二家!

構建自己的 Git

項目&資源

1、frogmouth:一個在終端中瀏覽 Markdown 的工具 (英文)

frogmouth 可以打開本地或 URL 中的 md 文件,具有類似瀏覽器的導航條、歷史記錄、書簽和目錄。

2、使用 Meta AI 的 SAM 進行圖像分割的 Python GUI (英文)

一個 Python 桌面程式,為 Meta 公司的 AI 模型 SAM 提供了圖形界面,可以提取照片裡面的物體。

3、GirlfriendGPT:你的人工智慧伴侶 (英文)

你有對象了麽?這個入門項目使用 ChatGPT 構建一個 AI 伴侶, 擁有個性化的人格、聲音以及自拍照!

4、Python 進化之路.pptx

一份技術分享的 PPT 材料,介紹了 Python 3.7-3.11 在性能、類型體驗及開發者體驗方面的優化。

Python解釋器優化

5、soundstorm-pytorch:在 Pytorch 中實現 SoundStorm (英文)

SoundStorm 是 Google Deepmind 新提出的一個高效的、非自回歸的音頻並行生成模型。soundstorm-pytorch 使用 Pytorch 實現了這個模型。

6、asynq:Python 的非同步編程庫 (英文)

asynq 是 Quora 開發的非同步編程庫,專註於對外部服務的批處理請求。對於 memcache、redis 等存儲服務,它發起一次請求批量獲取多個 key,比發出多次請求每次獲取一個 key 要快得多。

7、Propan:功能強大且易用的 Python 非同步 Web 框架 (英文)

一個基於 pydantic、fastapi 和 pytest 的非同步框架,簡化了 MQ 的代碼集成,並提供了一個有用的開發工具包。其特點是基於消息架構(Messaging Architecture)設計,所以它還是個聲明式的 MQ 框架。

8、talkGPT4All:基於 GPT4All 的一個語音聊天程式

它利用 OpenAI 的 Whisper 模型將用戶輸入的語音轉換為文本,再調用 GPT4All 的語言模型得到回答文本,最後利用文本轉語音(TTS)的程式將回答文本朗讀出來。

9、lightly:一個用於圖像自監督學習的 Python 庫 (英文)

這是一個用於自我監督學習的電腦視覺框架,以類似 PyTorch 的風格編寫,支持使用 PyTorch Lightning 進行分散式訓練。

相關概念的示意圖

播客&視頻

1、硬地駭客:獨立開發賺錢難?你需要正確的build策略

探討了在海外獨立開發者中最常用的 build in public 策略。我對這期節目很有共鳴,打算針對本周刊的一些數據、周刊的創作流程、個人知識輸入及創作體系等話題,不久會做一些分享。

2、代碼之外:離開微軟、人生在於體驗?閱讀的意義、主動和被動的人生

這是一檔新上線的程式員閑聊播客節目,主題很隨性,但常常有能打動人的片段。這裡分享的是第一期,它目前已更新到第三期,第三期請的嘉賓是 Vue 的作者尤雨溪!

3、Changelog #526:與你的朋友一起 Git (英文)

這期播客聊了一些 Git 工具,如 Git-Heat-Map、Git-Sim、git-bug、GitUI,等等。因為有兩個工具是用 Python 編寫的,因此也聊了一些 Python 安裝依賴包的話題。Brett Cannon 針對主播們的錯誤用法,寫了一篇回應博客 ,主要介紹了 pipx、.pyz 文件以及系統包管理器的正確使用。

4、#418:如何在 Python 程式中加密保存 (英文)

“Talk Python To Me”的這期播客探討如何處理程式要用到的敏感信息,同時也聊到了日常個人密碼的保存方案。我正巧本周還看到一篇《2023-21: 我的 1Password 密鑰管理實踐》,它系統介紹了密碼管理、SSH/Shell 集成和 CI/CD 應用等內容。

5、吳恩達三門新的生成式 AI 課程 (英文)

使用 OpenAI 的 ChatGPT API 構建系統、LangChain 用於開發 LLM 應用、Diffusion模型是如何工作的。

6、MIT 的三門 Python 相關課程 (英文)

麻省理工學院的免費課程:Python 電腦科學和編程簡介、經典機器學習、深度學習。

贊助&支持

內容創作不易,如果你覺得有幫助,請隨意贊賞買杯咖啡或在愛發電進行支持!如果你喜歡本周刊,請轉發分享給其他需要的同學~

另誠邀贊助者,歡迎通過私信聯繫。

關於周刊

Python 潮流周刊,精心篩選國內外的 200+ 信息源,為你挑選最值得分享的文章、教程、開源項目、軟體工具、播客和視頻、熱門話題等內容。願景:幫助所有讀者精進 Python 技術,並增長職業和副業的收入。

訂閱方式:Python貓 | RSS | 郵件 | Github | Telegram | Twitter


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • ![](https://img2023.cnblogs.com/blog/3076680/202306/3076680-20230602231102469-1389179464.png) # 1. 基礎思想 ## 1.1. 預寫日誌記錄 ## 1.2. 兩階段提交 ## 1.3. 關係資料庫 # 2 ...
  • 有很多朋友對中國文化歷史相關的數據感興趣,現有的中華上下五千年、世界五千年這類的數據記錄數還太少太少,於是今天就採集了一個中華歷史網站,共有效採集到近8萬條記錄。 分類彙總情況:野史秘聞(12273)、歷史人物(8840)、歷史雜談(7928)、文史百科(5635)、歷史趣聞(5282)、雜說歷史( ...
  • 原文地址: [Android Studio歷史版本下載地址彙總 - Stars-One的雜貨小窩](https://stars-one.site/2023/06/03/android-studio-version-list) > 由於新公司不給自帶電腦,然後給了台新的電腦,於是就是需要重新下載And ...
  • 這裡給大家分享我在網上總結出來的一些知識,希望對大家有所幫助 前言 所謂數據可視化,我們可以理解為從巨集觀角度來看一眼就能看出來整個數據的占比,走向。對於數據可視化,很多互聯網公司是很看重這一塊的,包括大廠;就比如阿裡的淘寶,雙十一的時候往往就需要將消費者的一些數據通過圖的形式展現出來。接下來我們就來 ...
  • ## 為什麼要引入 husky? 雖然我們項目中引入了`prettier`和`eslint`對代碼格式進行了校驗,但是多人開發的時候難免依然會有人提交不符合規範的代碼到倉庫中,如果我們拉取到這種代碼還得慢慢對其進行修改,這是一件很麻煩的事情,同時也為了避免團隊成員提交五花八門message,因此我們 ...
  • #TCP/IP協議原理 TCP/IP協議是Internet互聯網最基本的協議,TCP/IP協議的應用層的主要協議有HTTP、Telnet、FTP、SMTP等,是用來讀取來自傳輸層的數據或者將數據傳輸寫入傳輸層;傳輸層的主要協議有UDP、TCP,實現端對端的數據傳輸;網路層的主要協議有ICMP、IP、 ...
  • # 1.列表數據元素排序 在創建的列表中,數據元素的排列順序常常是無法預測的。這雖然在大多數情況下都是不可避免的,但經常需要以特定的順序呈現信息。有時候希望保留列表數據元素最初的排列順序,而有時候又需要調整排列順序。python提供了很多列表數據元素排序的方式,可根據情況選用。 ## 1.永久性排序 ...
  • 本篇專門扯一下有關 QCheckBox 組件的一個問題。老周不水字數,直接上程式,你看了就明白。 #include <QApplication> #include <QWidget> #include <QPushButton> #include <QCheckBox> #include <QVBo ...
一周排行
    -Advertisement-
    Play Games
  • 概述:在C#中,++i和i++都是自增運算符,其中++i先增加值再返回,而i++先返回值再增加。應用場景根據需求選擇,首碼適合先增後用,尾碼適合先用後增。詳細示例提供清晰的代碼演示這兩者的操作時機和實際應用。 在C#中,++i 和 i++ 都是自增運算符,但它們在操作上有細微的差異,主要體現在操作的 ...
  • 上次發佈了:Taurus.MVC 性能壓力測試(ap 壓測 和 linux 下wrk 壓測):.NET Core 版本,今天計劃準備壓測一下 .NET 版本,來測試並記錄一下 Taurus.MVC 框架在 .NET 版本的性能,以便後續持續優化改進。 為了方便對比,本文章的電腦環境和測試思路,儘量和... ...
  • .NET WebAPI作為一種構建RESTful服務的強大工具,為開發者提供了便捷的方式來定義、處理HTTP請求並返迴響應。在設計API介面時,正確地接收和解析客戶端發送的數據至關重要。.NET WebAPI提供了一系列特性,如[FromRoute]、[FromQuery]和[FromBody],用 ...
  • 原因:我之所以想做這個項目,是因為在之前查找關於C#/WPF相關資料時,我發現講解圖像濾鏡的資源非常稀缺。此外,我註意到許多現有的開源庫主要基於CPU進行圖像渲染。這種方式在處理大量圖像時,會導致CPU的渲染負擔過重。因此,我將在下文中介紹如何通過GPU渲染來有效實現圖像的各種濾鏡效果。 生成的效果 ...
  • 引言 上一章我們介紹了在xUnit單元測試中用xUnit.DependencyInject來使用依賴註入,上一章我們的Sample.Repository倉儲層有一個批量註入的介面沒有做單元測試,今天用這個示例來演示一下如何用Bogus創建模擬數據 ,和 EFCore 的種子數據生成 Bogus 的優 ...
  • 一、前言 在自己的項目中,涉及到實時心率曲線的繪製,項目上的曲線繪製,一般很難找到能直接用的第三方庫,而且有些還是定製化的功能,所以還是自己繪製比較方便。很多人一聽到自己畫就害怕,感覺很難,今天就分享一個完整的實時心率數據繪製心率曲線圖的例子;之前的博客也分享給DrawingVisual繪製曲線的方 ...
  • 如果你在自定義的 Main 方法中直接使用 App 類並啟動應用程式,但發現 App.xaml 中定義的資源沒有被正確載入,那麼問題可能在於如何正確配置 App.xaml 與你的 App 類的交互。 確保 App.xaml 文件中的 x:Class 屬性正確指向你的 App 類。這樣,當你創建 Ap ...
  • 一:背景 1. 講故事 上個月有個朋友在微信上找到我,說他們的軟體在客戶那邊隔幾天就要崩潰一次,一直都沒有找到原因,讓我幫忙看下怎麼回事,確實工控類的軟體環境複雜難搞,朋友手上有一個崩潰的dump,剛好丟給我來分析一下。 二:WinDbg分析 1. 程式為什麼會崩潰 windbg 有一個厲害之處在於 ...
  • 前言 .NET生態中有許多依賴註入容器。在大多數情況下,微軟提供的內置容器在易用性和性能方面都非常優秀。外加ASP.NET Core預設使用內置容器,使用很方便。 但是筆者在使用中一直有一個頭疼的問題:服務工廠無法提供請求的服務類型相關的信息。這在一般情況下並沒有影響,但是內置容器支持註冊開放泛型服 ...
  • 一、前言 在項目開發過程中,DataGrid是經常使用到的一個數據展示控制項,而通常表格的最後一列是作為操作列存在,比如會有編輯、刪除等功能按鈕。但WPF的原始DataGrid中,預設只支持固定左側列,這跟大家習慣性操作列放最後不符,今天就來介紹一種簡單的方式實現固定右側列。(這裡的實現方式參考的大佬 ...