做AI運動小程式有哪些解決方案,如何進行選型?

来源:https://www.cnblogs.com/alphaair/p/17186761.html
-Advertisement-
Play Games

引言:隨著深度學習技術的發展進步,已經不再依賴強大的GPU算力,便可實現AI推理了,讓AI技術滲透到了電腦、手機、智能設備等各類設備。體育、健身行業也不例外,阿裡體育等IT大廠,推出的樂動力、天天跳繩、百分運動等AI運動APP,讓雲上運動會、線上運動會、健身打卡、AI體育指導、AI體測等概念空前火熱 ...


引言:隨著深度學習技術的發展進步,已經不再依賴強大的GPU算力,便可實現AI推理了,讓AI技術滲透到了電腦、手機、智能設備等各類設備。體育、健身行業也不例外,阿裡體育等IT大廠,推出的樂動力、天天跳繩、百分運動等AI運動APP,讓雲上運動會、線上運動會、健身打卡、AI體育指導、AI體測等概念空前火熱。
那麼AI運動這個應用場景,除了在原生APP上實現,能否搬上微信小程式呢,今天就帶您探索幾種可能的解決方案,併進行一些橫向對比。

一、AI運動識別技術要點

要實現AI運動計時、計數,要解決主要技術問題有:視頻抽幀、視頻人體檢測、姿態識別、計時計數演算法,其中最主要的也是技術前提的便是人體識別檢測,實現上面的技術,便是一個完整的AI運動解決方案了。
image

二、離線方案

所謂離線方案,即把整套的視頻抽幀、視頻人體檢測、計時計數等環節放在後臺服務端執行,由於在後臺端執行,所以無法做到在小程式端根據視頻或攝像頭採集進度實時展示識別結果及進行互動,故叫離線方案。

1.1、全離線方案

全離線方案主要的技術方案在後端實現,運行在後臺伺服器,小程式端只負責上傳運動視頻或圖片,等待服端返回識別結果即可。 後端實現的相關技術棧相對比較成熟,如視頻抽幀可以選擇採用ffmpeg、opencv等成熟開源組件實現;人體檢測識別可以採用百度、阿裡、騰訊等成熟的第三方服務或私有化部署相關模型。

1.2、半離線方案

所謂半離線方案,與全離線方案的區別在於,將視頻抽幀放在小程式端執行,即可利用小程式的camera組件實時採集運動畫面,調用相應的API進行實時抽幀向後臺回傳,後臺反饋識別結果。

二、原生方案

所謂原生方案,也可叫本地原生方案,所有技術環節使用javascript在小程式端本地實現及運行,由於所有的計算在小程式端同步進行,所以實時體驗會更好,後端壓力也較輕,離線方案的後端壓力會隨著用戶量增長上升。

1.1、自研AI引擎方案

微信小程式端本身提供了Camera組件及攝像頭畫面抽幀API,使用現成的即可,重點在於人體關鍵點識別檢測的深度學習推理引擎的集成,這需要根據小程式的運行時,選擇好相應的識別引擎及檢測模型,進行適配集成。再編寫人體姿態識別演算法及運動分析器邏輯。

1.2、成熟的插件方案

相較於自研方案,也可以選擇成熟的小程式插件解決方案,比如我們推出的【AI運動識別】微信小程式插件,可以為您的小程式提供人體檢測、運動識別的AI能力,插件目前支持跳繩、開合跳、俯卧撐、仰卧起坐、捲腹、深蹲(深蹲起)、平板支撐、馬步蹲等運動的識別檢測計時、計數分析,更多的運動類型正在豐富中;插件運動識別引擎提供了基於規則配置的運動識別能力,您可以通過配置一些簡單的規則,增加一項新的運動(動作)識別能力,若是複雜的運動種類,也可以通過代碼擴展的方式進行。
image

三、方案對比

方案 難度 成本 體驗 優缺點
全離線方案 實現簡單,後臺伺服器、三方API調用成本高
半離線方案 實現簡單,後臺伺服器、帶寬要求高、三方API調用等成本高
自研原生方案 實現難度比較高,上線穩定周期較長
AI運動識別插件原生方案 實現簡單,成本低,且成熟穩定、開箱即用

根據上面的綜合對比得知,離線方案投入的成本和體驗不成正比,所以在新開發應用中不應將離線方案納入考慮範圍;無特殊的需求團隊建議直接使用AI運動識別插件方案,投入成本小且能避免很多實現陷井。

提供信息系統、公眾號、小程式、APP訂製開發服務

www.yztob.com

QQ:316455841

歡迎通過各種渠道咨詢瞭解,免費提供信息系統建設咨詢服務。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Android Compose 入門,深入底層源碼分析 我是跟著AS官網學習的,但是官方的教程寫的不是很詳細.官網鏈接 首先創建一個Compose項目,目錄結構是這樣: ui -> theme -> -> Color.kt -> -> Theme.kt -> -> Type.kt MainActiv ...
  • 一、Popup Popup組件通常用於在屏幕上彈出一個對話框或者浮動視窗。這個組件通常和其他組件一起用於用戶界面的交互和反饋。 Popup組件可以包含任何類型的組件或內容,比如文本、按鈕、輸入框、圖片等等。在打開和關閉Popup時,可以在代碼中設置不同的動畫效果來增強用戶體驗。 Popup組件的 ...
  • 一、Video 視頻組件是用於應用程式中嵌入視頻的一種方法。它可以讓用戶在網站上觀看視頻並與其進行交互。通常,視頻組件將一個視頻文件嵌入應用程式中,並提供一組控制項,這些控制項允許用戶播放、暫停、跳過、音量調整和全屏等。通過使用視頻組件,開發者可以更容易地將視頻嵌入應用程式,使其更易於管理和控制。 ...
  • 在我之前的文章中講了vue文件是如何編譯成js文件,今天這篇文章接著來講講vue3中是如何將template模塊編譯為render函數的。 ...
  • 本文分享自華為雲社區《3月閱讀周·你不知道的JavaScript | ES6生成器,看似同步的非同步流程式控制製表達風格》,作者: 葉一一。 生成器 打破完整運行 JavaScript開發者在代碼中幾乎普遍依賴的一個假定:一個函數一旦開始執行,就會運行到結束,期間不會有其他代碼能夠打斷它並插入其間。 ES ...
  • XSL(eXtensible Stylesheet Language)是一種用於 XML 的樣式語言。 XSL(T) 語言 XSLT 是一種用於轉換 XML 文檔的語言。 XPath 是一種用於在 XML 文檔中導航的語言。 XQuery 是一種用於查詢 XML 文檔的語言。 它始於 XSL XSL ...
  • 一、前言 演算法(Algorithm)是指用來操作數據、解決程式問題的一組方法。對於同一個問題,使用不同的演算法,也許最終得到的結果是一樣的,但在過程中消耗的資源和時間卻會有很大的區別 衡量不同演算法之間的優劣主要是通過時間和空間兩個維度去考量: 時間維度:是指執行當前演算法所消耗的時間,我們通常用「時間復 ...
  • vue3 快速入門系列 - vue3 路由 在vue3 基礎上加入路由。 vue3 需要使用 vue-router V4,相對於 v3,大部分的 Vue Router API 都沒有變化。 Tip:不瞭解路由的同學可以看一下筆者之前的文章:vue2 路由 參考:vue2 路由官網、vue3 路由官網 ...
一周排行
    -Advertisement-
    Play Games
  • 前言 插件化的需求主要源於對軟體架構靈活性的追求,特別是在開發大型、複雜或需要不斷更新的軟體系統時,插件化可以提高軟體系統的可擴展性、可定製性、隔離性、安全性、可維護性、模塊化、易於升級和更新以及支持第三方開發等方面的能力,從而滿足不斷變化的業務需求和技術挑戰。 一、插件化探索 在WPF中我們想要開 ...
  • 歡迎ReaLTaiizor是一個用戶友好的、以設計為中心的.NET WinForms項目控制項庫,包含廣泛的組件。您可以使用不同的主題選項對項目進行個性化設置,並自定義用戶控制項,以使您的應用程式更加專業。 項目地址:https://github.com/Taiizor/ReaLTaiizor 步驟1: ...
  • EDP是一套集組織架構,許可權框架【功能許可權,操作許可權,數據訪問許可權,WebApi許可權】,自動化日誌,動態Interface,WebApi管理等基礎功能於一體的,基於.net的企業應用開發框架。通過友好的編碼方式實現數據行、列許可權的管控。 ...
  • Channel 是乾什麼的 The System.Threading.Channels namespace provides a set of synchronization data structures for passing data between producers and consume ...
  • efcore如何優雅的實現按年分庫按月分表 介紹 本文ShardinfCore版本 本期主角: ShardingCore 一款ef-core下高性能、輕量級針對分表分庫讀寫分離的解決方案,具有零依賴、零學習成本、零業務代碼入侵適配 距離上次發文.net相關的已經有很久了,期間一直在從事java相關的 ...
  • 前言 Spacesniffer 是一個免費的文件掃描工具,通過使用樹狀圖可視化佈局,可以立即瞭解大文件夾的位置,幫助用戶處理找到這些文件夾 當前系統C盤空間 清理後系統C盤空間 下載 Spacesniffer 下載地址:https://spacesniffer.en.softonic.com/dow ...
  • EDP是一套集組織架構,許可權框架【功能許可權,操作許可權,數據訪問許可權,WebApi許可權】,自動化日誌,動態Interface,WebApi管理等基礎功能於一體的,基於.net的企業應用開發框架。通過友好的編碼方式實現數據行、列許可權的管控。 ...
  • 一、ReZero簡介 ReZero是一款.NET中間件 : 全網唯一開源界面操作就能生成API , 可以集成到任何.NET6+ API項目,無破壞性,也可讓非.NET用戶使用exe文件 免費開源:MIT最寬鬆協議 , 一直從事開源事業十年,一直堅持開源 1.1 純ReZero開發 適合.Net Co ...
  • 一:背景 1. 講故事 停了一個月沒有更新文章了,主要是忙於寫 C#內功修煉系列的PPT,現在基本上接近尾聲,可以回頭繼續更新這段時間分析dump的一些事故報告,有朋友微信上找到我,說他們的系統出現了大量的http超時,程式不響應處理了,讓我幫忙看下怎麼回事,dump也抓到了。 二:WinDbg分析 ...
  • 開始做項目管理了(本人3年java,來到這邊之後真沒想到...),天天開會溝通整理需求,他們講話的時候忙裡偷閑整理一下常用的方法,其實語言還是有共通性的,基本上看到方法名就大概能猜出來用法。出去打水的時候看到外面太陽好好,真想在外面坐著曬太陽,回來的時候好兄弟三年前送給我的鍵盤D鍵不靈了,在打"等待 ...