SLAM+語音機器人DIY系列:(三)感知與大腦——6.做一個能走路和對話的機器人

来源:https://www.cnblogs.com/hiram-zhang/archive/2019/02/19/10402315.html
-Advertisement-
Play Games

摘要 在我的想象中機器人首先應該能自由的走來走去,然後應該能流利的與主人對話。朝著這個理想,我準備設計一個能自由行走,並且可以與人語音對話的機器人。實現的關鍵是讓機器人能通過感測器感知周圍環境,並通過機器人大腦處理並輸出反饋和執行動作。本章節涉及到的感測器有激光雷達、IMU、輪式里程計、麥克風、音響 ...


摘要                                              

在我的想象中機器人首先應該能自由的走來走去,然後應該能流利的與主人對話。朝著這個理想,我準備設計一個能自由行走,並且可以與人語音對話的機器人。實現的關鍵是讓機器人能通過感測器感知周圍環境,並通過機器人大腦處理並輸出反饋和執行動作。本章節涉及到的感測器有激光雷達、IMU、輪式里程計、麥克風、音響、攝像頭,和用於處理信息的嵌入式主板。關於感測器的ROS驅動程式開發和在機器人上的使用在後面的章節會展開,本章節重點對機器人感測器和嵌入式主板進行講解,主要內容:

1.ydlidar-x4激光雷達

2.帶自校準九軸數據融合IMU慣性感測器

3.輪式里程計與運動控制

4.音響麥克風與攝像頭

5.機器人大腦嵌入式主板性能對比

6.做一個能走路和對話的機器人



6.做一個能走路和對話的機器人  

在我的想象中機器人首先應該能自由的走來走去,然後應該能流利的與主人對話。朝著這個理想,我準備設計一個能自由行走,並且可以與人語音對話的機器人。為了更形象的表達我的想法,我的小學五年級的繪畫水平也是豁出去了,如果有大神路過,懇請多多包涵,畫好後的樣子大概就是這樣啦,如圖46

(圖46)想象中的機器人

有了想法,接下來就要開始親自動手DIY了。體驗動手樂趣的同時,以玩耍的形式融入當下前沿的SLAM、自動導航、圖像識別、語音識別、自然語言處理等技術,提高自己的同時找到屬於兒時的那一份快了。

說乾就乾,首先需要準備好激光雷達、IMU、底盤、音響、麥克風、攝像頭這些感測器,然後還要準備一塊樹莓派3開發板作為機器人的大腦。其實這些知識已經通過前面的文章打好了基礎,所以就好辦多了,準備好這些東西就好了,如圖47

(圖47DIY部件準備

準備好感測器和樹莓派3後,就可以進行組裝了。經過緊張有趣的組裝後,一臺有趣的機器人就被DIY出來了,這時候終於可以看到傳說中的機器人的真容了,如圖48,雖然機器人的真實樣子沒有想象中的那麼有藝術感,但科技感十足有木有@^@

(圖48DIY出來的機器人真容

麻雀雖小五臟俱全,現在就來對這個會說話會走路的機器人做一做剖析吧。機器人的骨架是由亞克力板和銅柱組合而成;兩個帶編碼器的減速電機和一個萬向輪作為運動執行機構;可充電鋰電池給整個機器人供電;stm32電機控制板用於控制電機運動並提供里程數據,是底盤的核心部件;激光雷達提供環境障礙信息,用於SLAM建圖和避障導航;IMU用於在里程計數據融合、SLAM建圖、導航中提供慣導數據;免驅USB音效卡、音響、四麥陣列指向性麥克風作為語音交互過程中的輸入輸出部件;攝像頭用於物體識別、物體跟蹤、環境監控、視覺輔助定位;樹莓派3是整個機器人的中央處理單元,各個感測器的ROS驅動、SLAM演算法、導航演算法、語音交互、自然語言處理演算法、圖像處理演算法都將運行在上面。為了更好的理解機器人的工作原理,這裡給出機器人的硬體框架,如圖49

(圖49)機器人硬體框架

機器人的硬體搭建完畢後,就要賦予機器人靈魂了。這裡說的靈魂就是我們的軟體及演算法,包括各個感測器的ROS驅動、輪式里程計與IMU融合、激光SLAM建圖、自主導航避障、語音識別、語音合成、自然語言處理、物體識別、物體跟蹤、遠程視頻監控、視覺輔助定位、機器人與工作PCAndroid手機之間的通信等。為了更好的理解機器人的工作原理,這裡給出機器人的軟體框架,如圖50

(圖50)機器人軟體框架

做瞭如此長的鋪墊,大家肯定已經等不及要親自動手去開發機器人上的軟體代碼了。別急,接下來的章節將跟你娓娓道來,讓你體驗動手寫程式真正的快樂$^$

後記                                              

如果大家對博文的相關類容感興趣,或有什麼技術疑問,歡迎加入下麵的《SLAM+語音機器人DIY》QQ技術交流群,一起討論學習^_^


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 前幾個章節我們講到Windows Server 2016-圖形化新建域用戶(一),本章節我們簡單講解下如何通過命令批量創建域用戶,以便高效完成日常工作中實際批量創建用戶需求,內容涉及dsadd user、net user、new-aduser,具體信息如下:dsadd user創建用戶:將單個用戶添... ...
  • 摘要 運動底盤是移動機器人的重要組成部分,不像激光雷達、IMU、麥克風、音響、攝像頭這些通用部件可以直接買到,很難買到通用的底盤。一方面是因為底盤的尺寸結構和參數是要與具體機器人匹配的;另一方面是因為底盤包含軟硬體整套解決方案,是很多機器人公司的核心技術,一般不會隨便公開。出於強烈的求知欲與學習熱情 ...
  • 功能變數名稱系統(DNS)是包含TCP / IP的行業標準協議套件之一,DNS客戶端和DNS伺服器一起為電腦和用戶提供電腦名稱到IP地址映射名稱解析服務。在Windows Server 2016中,DNS是可以使用伺服器管理器或Windows PowerShell命令安裝的伺服器角色。 如果要安裝新的A... ...
  • 摘要 運動底盤是移動機器人的重要組成部分,不像激光雷達、IMU、麥克風、音響、攝像頭這些通用部件可以直接買到,很難買到通用的底盤。一方面是因為底盤的尺寸結構和參數是要與具體機器人匹配的;另一方面是因為底盤包含軟硬體整套解決方案,是很多機器人公司的核心技術,一般不會隨便公開。出於強烈的求知欲與學習熱情 ...
  • 本章節補充介紹在 Windows Server 2016 中功能變數名稱系統 (DNS) 伺服器新增或已更改的功能相關信息,具體內容如下: 功能 DNS策略 您可以將DNS策略用於基於地理位置的流量管理,基於一天中的時間的智能DNS響應,管理為裂腦配置配置的單個DNS伺服器,應用DNS查詢的過濾器等。 以下 ...
  • 問題表現如下: 1、有Hyper-V功能未關閉的可能, 隨便貼一個鏈接,網上一樣的方法很多: https://jingyan.baidu.com/article/9f63fb916b50e1c8400f0ebf.html 測試後發現我並沒有開啟這個功能。。。頭疼 接著找方法: 2、有win10安全中 ...
  • 簡介 grep命令,用於在一個文本文件中或者從STDIN中,根據用戶給出的模式(pattern)過濾出所需要的信息。 grep以及三劍客中的另外兩個工具sed和awk都是基於行處理的,它們會一行行讀入數據,處理完一行之後再處理下一行。 簡要語法格式如下。 預設情況下,grep讀取的行數據,如果整行內 ...
  • 步驟1. 啟用附加RPM倉庫 步驟2. 安裝RPM包 步驟3. 打開Fedora左上角開始菜單已安裝的應用程式 寫入配置文件。 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...