痞子衡嵌入式:Ethos-U55,ARM首款面向Cortex-M的microNPU

来源:https://www.cnblogs.com/henjay724/archive/2020/02/15/12312210.html
-Advertisement-
Play Games

ARM 前幾天剛發佈了 Cortex-M 家族最新一款內核 - Cortex-M55 以及首款面向 Cortex-M 系列的 microNPU - Ethos-U55。Cortex-M55 是第一款面向 AI/ML 的 Cortex-M 內核,痞子衡也專門為此寫過一篇小文 《為AI/ML而生(Cor... ...



  大家好,我是痞子衡,是正經搞技術的痞子。今天痞子衡給大家介紹的是ARM Ethos-U55

  ARM 前幾天剛發佈了 Cortex-M 家族最新一款內核 - Cortex-M55 以及首款面向 Cortex-M 系列的 microNPU - Ethos-U55。Cortex-M55 是第一款面向 AI/ML 的 Cortex-M 內核,痞子衡也專門為此寫過一篇小文 《為AI/ML而生(Cortex-M55)》,在那篇小文里痞子衡只是一筆帶過 Ethos-U55,未作深入探討,今天痞子衡就跟大家好好聊聊 Ethos-U55。

  在正式介紹 Ethos-U55 之前,有必要提及一下 ARM 公司的 Project Trillium 項目,這是 ARM 公司於2018年2月推出的一套包括新的高度可擴展處理器的 Arm IP 組合以及相關配套軟體的機器學習平臺。這個平臺里有你肯定不陌生的 Mali 系列 GPU 和 Arm NN 庫,以及2019年10月發佈的 Ethos-N 系列 NPU,如今 Ethos-U55 也正式加入了 Project Trillium 大軍。

ethos-u55_new

  那麼 Ethos-U55 到底是什麼?其實它是一種小型的專用的 microNPU 推理加速器,強大的運算能力是其最核心的特點,其性能可達 64 - 512 GOP/s(Giga Operations Per Second,每秒十億次的運算),這個運算能力秒殺 Cortex-M CPU。不過對比用在 Cortex-A 系列上的大型 NPU - Ethos-N 的 1 - 4 TOP/s 性能 (Trillion Operations Per Second,每秒萬億次的運算)還是要弱一些,因此它只能算 microNPU,適合與 Cortex-M 搭配工作。

  在神經網路框架上 Ethos-U55 當前僅支持 TensorFlow Lite Micro,這點跟 Ethos-N 能支持的框架全家桶(TensorFlow, TensorFlow Lite, Caffe2, PyTorch, MXNet, ONNX)相比也單調一些,但畢竟是單片機 AI 嘛,第一步是先能玩起來,TensorFlow Lite 夠用了。

ethos-u55_fea

  雖然 Ethos-U55 是同 Cortex-M55 一起發佈的,但它並不僅僅只能用在 Cortex-M55 上,其還可以搭配 Cortex-M4/M7/M33 一起工作,只不過 Ethos-U55 與 Cortex-M55 搭配起來效果最佳,其組合性能相比 Cortex-M7 單系統要提高 50 倍,而 ML 性能更是提升了令人瞠目結舌的 480 倍。

ethos-u55_workload

  前面介紹了那麼多 Ethos-U55 性能,我們再來看看它是如何與 Cortex-M 一起協同工作的,且以它的最佳搭檔 Cortex-M55 為例。Ethos-U55 上設計了兩個 AXI master 介面(64bit),其中 AXI-1 是可讀可寫的,用於訪問共用 SRAM;另外 AXI-2 是只讀的,專門用於從 NVM(flash) 里獲取指令執行。此外 Ethos-U55 上還設計了一個 APB slave 介面,用以提供控制及配置寄存器的訪問。

  所以 Ethos-U55 在系統里的工作流程是,Cortex-M55 通過 APB 介面向 Ethos-U55 發出啟動神經網路處理命令,Ethos-U55 收到命令後通過 AXI-2 從 NVM 獲取具體命令序列指令,處理完成後 Ethos-U55 通過專門 IRQ 信號線向 Cortex-M55 發出中斷事件。

ethos-u55_sys

  讓我們以一個典型的智能語音應用再來分析 Ethos-U55 與 Cortex-M55 協同工作機制,預設情況下 Ethos-U55 保持低功耗模式,由 Cortex-M55 來完成語音檢測以及喚醒詞識別(KWS),一旦檢測到有效喚醒詞,這時候便可激活 Ethos-U55 完成後續語音識別(ASR)任務,以及進一步神經網路處理去識別語義。

ethos-u55_app

  至此 Ethos-U55 痞子衡便介紹完了,不知道哪個 MCU 廠商會率先推出含這款 microNPU 的 MCU,不知道這款 microNPU 會和哪款 Cortex-M 內核初次搭檔,留言說出你的答案。

歡迎訂閱

文章會同時發佈到我的 博客園主頁CSDN主頁微信公眾號 平臺上。

微信搜索"痞子衡嵌入式"或者掃描下麵二維碼,就可以在手機上第一時間看了哦。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 實例1:處理NewWorkbook和WorkSheet事件的控制台程式 書本第70頁 程式清單 4.1 處理NewWorkbook和WorkSheet事件的控制台程式 Imports Excel = Microsoft.Office.Interop.Excel Imports System.Wind ...
  • 最近被websocket的一個問題困擾了很久,有一個需求是在web網站中搭建websocket服務。客戶端通過網頁與伺服器建立連接,然後伺服器根據ip給客戶端網頁發送信息。 其實,這個需求並不難,只是剛開始對websocket的內容不太瞭解。上網搜索了一下,有通過asp.net core 實現的,有 ...
  • 昨天看新聞,說人教社開放了人教版中小學教材電子版的春季教材(下載地址:http://bp.pep.com.cn/jc/ ),就想著給兒子全下載下來以備後用。不過人工下載真是麻煩枯燥,為了省事,就寫個爬蟲。原本打算用python,回頭想了下,好久沒用C#了,就用C#寫吧。 具體思路和實現步驟如下 1. ...
  • 檢查一臺ORACLE資料庫伺服器的crontab作業(用戶為oracle,實際環境中可能為oracle、也有可能是其它用戶)時,發現出現下麵提示信息: $ crontab -l You (oracle) are not allowed to use this program (crontab) Se... ...
  • linux下tar命令解壓到指定的目錄 : #tar zxvf xx.tar.gz -C /xx//把根目錄下的xx.tar.gz解壓到/xx/下,前提要保證存在/xx這個目錄 這個和cp命令有點不同,cp命令如果不存在這個目錄就會自動創建這個目錄! ...
  • xPath:一種HTML和XML的查詢語言,他能在XML和HTML的樹狀結構中尋找節點 安裝xPath: pip方法: pip install lxml win+R:cmd 打開命令控制台: 此時可以看到xml已經安裝完成 HTML: 一種網頁的標準、規範。編寫網頁文檔的主要語言。超文本鏈接【可以跳 ...
  • 問題: 由於長時間沒有操作過自己安裝的虛擬機,導致連root用戶的密碼都忘了,也真是沒誰了。 我使用的是centos6.5,今天就記錄一下,如何重置root用戶的密碼。 操作步驟: 步驟一: 當開機啟動出現啟動的圖標的時候,這時快速按下Esc或者E,一定要快點,不然總是來不及,也可以啟動後就一直點。 ...
  • API:application program interface ABI:application binary interface linux系統的ABI文件是ELF格式的 windows系統的ABI文件是exe,msi格式的 系統級開發語言:c/c++ ​ 作品:httpd,vsftpd,ngi ...
一周排行
    -Advertisement-
    Play Games
  • Timer是什麼 Timer 是一種用於創建定期粒度行為的機制。 與標準的 .NET System.Threading.Timer 類相似,Orleans 的 Timer 允許在一段時間後執行特定的操作,或者在特定的時間間隔內重覆執行操作。 它在分散式系統中具有重要作用,特別是在處理需要周期性執行的 ...
  • 前言 相信很多做WPF開發的小伙伴都遇到過表格類的需求,雖然現有的Grid控制項也能實現,但是使用起來的體驗感並不好,比如要實現一個Excel中的表格效果,估計你能想到的第一個方法就是套Border控制項,用這種方法你需要控制每個Border的邊框,並且在一堆Bordr中找到Grid.Row,Grid. ...
  • .NET C#程式啟動閃退,目錄導致的問題 這是第2次踩這個坑了,很小的編程細節,容易忽略,所以寫個博客,分享給大家。 1.第一次坑:是windows 系統把程式運行成服務,找不到配置文件,原因是以服務運行它的工作目錄是在C:\Windows\System32 2.本次坑:WPF桌面程式通過註冊表設 ...
  • 在分散式系統中,數據的持久化是至關重要的一環。 Orleans 7 引入了強大的持久化功能,使得在分散式環境下管理數據變得更加輕鬆和可靠。 本文將介紹什麼是 Orleans 7 的持久化,如何設置它以及相應的代碼示例。 什麼是 Orleans 7 的持久化? Orleans 7 的持久化是指將 Or ...
  • 前言 .NET Feature Management 是一個用於管理應用程式功能的庫,它可以幫助開發人員在應用程式中輕鬆地添加、移除和管理功能。使用 Feature Management,開發人員可以根據不同用戶、環境或其他條件來動態地控制應用程式中的功能。這使得開發人員可以更靈活地管理應用程式的功 ...
  • 在 WPF 應用程式中,拖放操作是實現用戶交互的重要組成部分。通過拖放操作,用戶可以輕鬆地將數據從一個位置移動到另一個位置,或者將控制項從一個容器移動到另一個容器。然而,WPF 中預設的拖放操作可能並不是那麼好用。為瞭解決這個問題,我們可以自定義一個 Panel 來實現更簡單的拖拽操作。 自定義 Pa ...
  • 在實際使用中,由於涉及到不同編程語言之間互相調用,導致C++ 中的OpenCV與C#中的OpenCvSharp 圖像數據在不同編程語言之間難以有效傳遞。在本文中我們將結合OpenCvSharp源碼實現原理,探究兩種數據之間的通信方式。 ...
  • 一、前言 這是一篇搭建許可權管理系統的系列文章。 隨著網路的發展,信息安全對應任何企業來說都越發的重要,而本系列文章將和大家一起一步一步搭建一個全新的許可權管理系統。 說明:由於搭建一個全新的項目過於繁瑣,所有作者將挑選核心代碼和核心思路進行分享。 二、技術選擇 三、開始設計 1、自主搭建vue前端和. ...
  • Csharper中的表達式樹 這節課來瞭解一下表示式樹是什麼? 在C#中,表達式樹是一種數據結構,它可以表示一些代碼塊,如Lambda表達式或查詢表達式。表達式樹使你能夠查看和操作數據,就像你可以查看和操作代碼一樣。它們通常用於創建動態查詢和解析表達式。 一、認識表達式樹 為什麼要這樣說?它和委托有 ...
  • 在使用Django等框架來操作MySQL時,實際上底層還是通過Python來操作的,首先需要安裝一個驅動程式,在Python3中,驅動程式有多種選擇,比如有pymysql以及mysqlclient等。使用pip命令安裝mysqlclient失敗應如何解決? 安裝的python版本說明 機器同時安裝了 ...