教材模組

教學目標

此應用模組課程的開發目標, 在於介紹與推廣能於人群圍繞環境下，自由穿梭的自走載具所需的智慧感測融合與辨識技術、AI 邊緣計算處理器系統晶片設計技術、與智慧雲端行控導航技術。 可以使學生掌握智慧型自走載具系統設計技術，並培養人才進入相關智慧自走載具產業，並且可以加強學校與產業合作。對於學生，得以將學校所學應用到先進自走載具技術。其應用範圍為智慧型運輸系統與智慧型服務機器人系統等。

教材模組時數

  12  小時

教材模組

課程大綱

1. 智慧型載具的感測功能系統整合設計技術(6小時)

單元1:基於深度學習 YOLO 行人偵測前處理設計(與使用TensorRT加速) (參考範例教材: https://drive.google.com/file/d/1b6nkZsBwDlRK6NiwIR881eiaYFT18xOW/view?usp=sharing )

單元2:輕量化深度學習人臉方向偵測後處理設計

(參考範例教材: https://drive.google.com/file/d/1-N4_cmoioW8xykDcXNm-TAcqhxQk3UXt/view?usp=sharing )

單元3:使用深度學習模型來辨識人群中的大人與小孩

2. 智慧型載具晶片系統與AI加速器設計技術(6小時)

單元4:輕量化深度學習人臉方向分類器的硬體計算核心設計

(參考範例教材: https://drive.google.com/file/d/1w-Wh_y2L2uyanSR1N9OyWmumca8C1MHm/view?usp=sharing)

單元5:使用Xilinx Vitis-AI DPU 實作輕量化深度學習人臉方向分類器

可分享教材模組內容說明

授課教材投影片、實驗用教材投影片，內含參考設計原始碼 (Python codes, Verilog model)與訓練/測試用影像資料集，可參閱範例教材

所需實作平臺配備與經費需求預估(以模組教學實作所需基本軟、硬體平臺估算)

1. 智慧型載具的感測功能系統整合設計技術-實作平臺配備：

每份供1組同學使用(1組約1~3人)，1套設備約需5,000元

*平臺：Nvidia Nano GPU平臺 / *電子零件週邊：USB 介面Webcam 模組/ *軟體工具：Keras & TensorFlow，Python，訓練/測試用影像資料集(dataset)。

2. 智慧型載具晶片系統與AI加速器設計技術-實作平臺配備：

每份供1組同學使用(1組約3~5人)，1套設備約需25,000元

*平臺：FPGA系統晶片平台 (Xilinx Zedboard 或PYNQ-ZU) / *系統用計算平臺: 可使用個人電腦或筆電/ *軟體工具: Xilinx Vivado Design Suite/Xilinx Vitis-AI，包含在SoC架構中加入AXI DMA來實現AI 計算模組。

聯盟/示範教學實驗室可提供之訓練與技術支援

(含實驗示範影片)

1. 可提供嵌入式平臺安裝/使用說明與技術支援。
2. 可提供實驗示範教學影片 (範例: https://reurl.cc/X404QD )。
3. 教師助教工作坊：30 人/場，共1場，包含實際操作實驗的內容。

聯絡窗口

負責教師：國立中興大學電機工程系 范志鵬教授

聯絡電話：04-22851549 ext. 710

聯絡信箱 : cpfan@nchu.edu.tw