【課程簡報】20211124_宜蘭大學資工_邊緣智慧裝置發展趨勢與開發應用

很高興今天受宜蘭大學資訊工程系黃朝曦、邱鈺鈞老師的邀請，和大家分享「邊緣智慧裝置發展趨勢與開發應用」 這個主題，讓學生們更了解除了一般大型AI應用外，在新興的邊緣智慧裝置又有什麼新的發展及如何開發這類的專題，主要包括AIoT, tinyML, OpenVINO等。此次分享大綱如下所示，更完整內容請參考下列投影片。

• 邊緣智慧技術簡介
• 雲端與邊緣智慧
• 邊緣智慧發展趨勢
• 智慧物聯網AIoT
• 元宇宙人機互動

• tinyML(MCU AI)技術簡介
• 何謂tinyML
• 單晶片(MCU)技術演進
• 小型AI專案開發流程差異
• tinyML開發工具及平台

• 邊緣智慧裝置常見應用
• 語音喚醒詞（語音命令）
• 手勢動作辨識
• 異常偵測（感測器等級）
• 影像分類/物件偵測

• 快速邊緣智慧原型開發
• 創意專題製作
• 開放資料集及模型
• Intel OpenVINO簡介
• Intel DevCloud簡介
• 線上學習資源

 （點擊圖片放大顯示）

 影片來源：巴哈姆特，影像版權屬原公司所有，這裡僅供技術說明使用，請勿移作它用。

 

開發板安裝方式

OK手勢（前後）

NG手勢（左右）

Pass手勢（順時旋轉）

 

 

閒置手勢（不動）

3D Human Pose Estimation

Action Recognition

Crossroad Camera

Face Detection MTCNN

 

Formula Recognition

 

Gaze Estimation

Gesture Recognition

 

Human Pose Estimation

Image Debluring

Smart Classroom

Image Segmentation

Instance Segmentation

Interactive Face Detection

Object Detection

Pedestrian Tracker

Single Human Pose Estimation

Image Retrieval

Whiteboard Inpainting

線上學習資源

• tinyML Foundation (Youtube) https://www.youtube.com/c/tinyML/videos
• Edge Impulse Document https://docs.edgeimpulse.com/docs/getting-started
• Intel OpenVINO Document https://docs.openvino.ai/latest/index.html
• Intel OpenVINO Toolkit Tutorial (Youtube) https://www.youtube.com/watch?v=kY9nZbX1DWM&list=PLg-UKERBljNxdIQir1wrirZJ50yTp4eHv

參考文獻

• 許哲豪，NTUST Edge AI 人工智慧與邊緣運算實務 https://omnixri.blogspot.com/p/ntust-edge-ai.html
• 許哲豪，iThome 2021 (13屆) 鐵人賽【arm platforms組】完賽記錄 ─ 爭什麼，把AI和MCU摻在一起做tinyML就對了！ https://omnixri.blogspot.com/2021/10/ithome-2021-13-arm-platforms-aimcutinyml.html
• 歐尼克斯實境互動工作室系列發文─OpenVINO系列 https://omnixri.blogspot.com/p/blog-page_19.html#OpenVINO