用 C# 來守護 Python 進程

来源:https://www.cnblogs.com/hippieZhou/archive/2019/09/28/11504552.html
-Advertisement-
Play Games

背景 目前我主要負責的一個項目是一個 C/S 架構的客戶端開發,前端主要是通過 相關技術來實現,後端是通過 來實現,前後端的數據通信則是通過 的方式來進行處理。由於 進程是需要依賴客戶端進程來運行,為了保證後端業務進程的穩定性,就需要通過一個 來守護 Python 進程,防止其由於未知原因而出現進程 ...


背景

目前我主要負責的一個項目是一個 C/S 架構的客戶端開發,前端主要是通過 WPF 相關技術來實現,後端是通過 Python 來實現,前後端的數據通信則是通過 MQ 的方式來進行處理。由於 Python 進程是需要依賴客戶端進程來運行,為了保證後端業務進程的穩定性,就需要通過一個 守護進程 來守護 Python 進程,防止其由於未知原因而出現進程退出的情況。這裡簡單記錄一下我的一種實現方式。

實現

對於我們的系統而言,我們的 Python 進程只允許存在一個,因此,對應的服務類型要採用單例模式,這一部分代碼相對簡單,就直接貼出來了,示例代碼如下所示:

public partial class PythonService
{
    private static readonly object _locker = new object();

    private static PythonService _instance;
    public static PythonService Current
    {
        get
        {
            if (_instance == null)
            {
                lock (_locker)
                {
                    if (_instance == null)
                    {
                        _instance = new PythonService();
                    }
                }
            }
            return _instance;
        }
    }

    private PythonService()
    {

    }
}

創建獨立進程

由於後端的 Python 代碼運行需要安裝一些第三方的擴展庫,所以為了方便,我們採用的方式是總結將 python 安裝文件及擴展包和他們的代碼一併打包到我們的項目目錄中,然後創建一個 Python 進程,在該進程中通過設置環境變數的方式來為 Python 進程進行一些環境配置。示例代碼如下所示:

public partial class PythonService
{
    private string _workPath => Path.Combine(AppDomain.CurrentDomain.BaseDirectory, "scripts");
    private string _pythonPath => Path.Combine(_workPath, "python27");

    private bool isRunning = false;
    private int taskPID = -1;

    public void Start()
    {
        taskPID = CreateProcess();
        isRunning = taskPID != -1;

        var msg = isRunning ? "服務啟動成功..." : "服務啟動失敗...";
        Trace.WriteLine(msg);
    }

    public void Stop()
    {
        KillProcessAndChildren(taskPID);

        isRunning = false;
        taskPID = -1;
    }

    private int CreateProcess()
    {
        KillProcessAndChildren(taskPID);

        int pid = -1;
        var psi = new ProcessStartInfo(Path.Combine(_pythonPath, "python.exe"))
        {
            UseShellExecute = false,
            WorkingDirectory = _workPath,
            ErrorDialog = false
        };

        psi.CreateNoWindow = true;

        var path = psi.EnvironmentVariables["PATH"];
        if (path != null)
        {
            var array = path.Split(new[] { ';' }).Where(p => !p.ToLower().Contains("python")).ToList();
            array.AddRange(new[] { _pythonPath, Path.Combine(_pythonPath, "Scripts"), _workPath });
            psi.EnvironmentVariables["PATH"] = string.Join(";", array);
        }
        var ps = new Process { StartInfo = psi };
        if (ps.Start())
        {
            pid = ps.Id;
        }
        return pid;
    }

    private static void KillProcessAndChildren(int pid)
    {
        // Cannot close 'system idle process'.
        if (pid <= 0)
        {
            return;
        }

        ManagementObjectSearcher searcher = new ManagementObjectSearcher("Select * From Win32_Process Where ParentProcessID=" + pid);
        ManagementObjectCollection moc = searcher.Get();
        foreach (ManagementObject mo in moc)
        {
            KillProcessAndChildren(Convert.ToInt32(mo["ProcessID"]));
        }
        try
        {
            Process proc = Process.GetProcessById(pid);
            proc.Kill();
        }
        catch (ArgumentException)
        {
            // Process already exited.
        }
        catch (Win32Exception)
        {
            // Access denied
        }
    }
}

這裡有一點需要註意一下,建議使用 PID 來標識我們的 Python 進程,因為如果你使用進程實例或其它方式來對當前運行的進程設置一個引用,當該進程出現一些未知退出,這個時候你通過哪個引用來進行相關操作是會出問題的。

創建守護進程

上面我們的通過記錄當前正在運行的進程的 PID 來標識我們的進程,那對應守護進程,我們就可以通過進程列表查詢的方式來進行創建,在輪詢的過程中,如果未找到對應 PID 的進程則表明該進程已經退出,需要重新創建該進程,否則就不執行任何操作,示例代碼如下所示:

public partial class PythonService
{
    private CancellationTokenSource cts;

    private void StartWatch(CancellationToken token)
    {
        Task.Factory.StartNew(() =>
        {
            while (!token.IsCancellationRequested)
            {
                var has = Process.GetProcesses().Any(p => p.Id == taskPID);
                Trace.WriteLine($"MQ狀態:{DateTime.Now}-{has}");
                if (!has)
                {
                    taskPID = CreateProcess(_reqhost, _subhost, _debug);
                    isRunning = taskPID > 0;

                    var msg = isRunning ? "MQ重啟成功" : "MQ重啟失敗,等待下次重啟";
                    Trace.WriteLine($"MQ狀態:{DateTime.Now}-{msg}");
                }

                Thread.Sleep(2000);
            }
        }, token);
    }
}

這裡我使用的是 Thread.Sleep(2000) 方式來繼續線程等待,你也可以使用 await Task.Delay(2000,token),但是使用這種方式在發送取消請求時會產生一個 TaskCanceledException 的異常。所以為了不產生不必要的異常信息,我採用第一種解決方案。

接著,完善我們的 StartStop 方法,示例代碼如下所示:

public void Start()
{
    taskPID = CreateProcess();
    isRunning = taskPID != -1;

    if (isRunning)
    {
        cts = new CancellationTokenSource();
        StartWatch(cts.Token);
    }

    var msg = isRunning ? "服務啟動成功..." : "服務啟動失敗...";
    Trace.WriteLine(msg);
}

public void Stop()
{
    cts?.Cancel(false);
    cts?.Dispose();

    KillProcessAndChildren(taskPID);
    taskPID = -1;

    isRunning = false;
}

最後,上層調用就相對簡單一下,直接調用 Start 方法和 Stop 方法即可。

總結

在我們的實際項目代碼中,PythonService 的代碼要比上面的代碼稍微複雜一些,我們內部還添加了一個 MQ 的 消息隊列。所以為了演示方便,我這裡只列出了和本文相關的核心代碼,在具體的使用過程中,可以依據本文提供的一種實現方法來進行加工處理。

相關參考


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 基本數據類型 java 是強類型語言,在 java 中存儲的數據都是有類型的,而且必須在編譯時就確定其類型。 基本數據類型變數存儲的是數據本身,而引用類型變數存的是數據的空間地址。 基本類型轉換 自動類型轉換 把一個表數範圍小的數值或變數直接賦給另一個表數範圍大的變數時,系統將會進行自動類型轉換,否 ...
  • 一,不使用藍圖,自己分文件 目錄結構 app.py init.py user.py order.py 註意點:只有是包的時候才能from.然後import 相對路徑進行導入 缺點 容易發生迴圈導入問題 二.使用藍圖之中小型系統 "詳見代碼點擊可以下載" 目錄結構: __init_.py manage ...
  • 知識點 1. 初始化 :每一個flask程式都必須創建一個程式實例,遵循WSGI(Web Server Gateway interface)協議,把請求 flask Obj; 創建實例: Flask 類的構造函數只有一個必須指定的參數,即程式主模塊或包的名字。在大多數程式中,Python 的 __n ...
  • Flask框架整個流程源碼解讀 一.總的流程 運行Flask其本質是運行Flask對象中的\_\_call\_\_,而 本質調用wsgi_app的方法 二.具體流程 1.ctx = self.request_context(environ) environ 請求相關的,ctx現在是包含request ...
  • 最近在開發一個輕量級ASP.NET MVC開發框架,需要加入日誌記錄,郵件發送,簡訊發送等功能,為了保持模塊的獨立性,所以需要通過消息通信的方式進行處理,為了保持框架在部署,使用,二次開發過程中的簡易便捷性,所以沒有選擇傳統的MQ,而是基於Redis的訂閱發佈實現一個系統內部消息組件,話不多說,上碼 ...
  • 前提 入行已經7,8年了,一直想做一套漂亮點的自定義控制項,於是就有了本系列文章。 GitHub:https://github.com/kwwwvagaa/NetWinformControl 碼雲:https://gitee.com/kwwwvagaa/net_winform_custom_contr ...
  • 前提 入行已經7,8年了,一直想做一套漂亮點的自定義控制項,於是就有了本系列文章。 GitHub:https://github.com/kwwwvagaa/NetWinformControl 碼雲:https://gitee.com/kwwwvagaa/net_winform_custom_contr ...
  • 參考地址,官網:https://docs.microsoft.com/zh-cn/aspnet/core/tutorials/getting-started-with-swashbuckle?view=aspnetcore-2.2&tabs=visual-studio 與https://www.ji ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...