計畫團隊成員

 
 
圖片1-2

總計畫暨子計畫三
Main Project & Subproject 3

黃元豪  教授

國立清華大學通訊所

圖片2-2

子計畫一
Subproject 1

林凡異  教授

國立清華大學光電所

圖片3-2

子計畫二
Subproject 2

謝秉璇  副教授

國立清華大學電機系

 
 
 
圖片4-2

總計畫共同主持人
Main Project CO-PI

吳孟奇  教授

國立清華大學電子所

圖片5-2

子計畫四
Subproject 4

邱瀞德  教授

國立清華大學資工系

圖片6-2

子計畫五
Subproject 5

黃朝宗  助理教授

國立清華大學電機系

 
 

技術亮點 Technical Highlights


本計畫開發具人眼保護與抗干擾之光達系統,包含陣列APD感測器、高精準度深度感測與深度影像智慧處理晶片,以及人工智慧邊緣運算晶片。人工智慧晶片可融合光達深度圖與影像進行邊緣人工智慧運算加速,本系統將大幅提升人工智慧影像辨識精準度與邊緣智慧運算速率。亮點包括:
✦ 人眼安全APD陣列感測器晶片
✦ 高精度抗干擾之混沌光達系統
✦ 高精準度TOF偵測陣列晶片
✦ 智慧深度感測訊號處理晶片
✦ 融合光達深度與影像之智慧影像辨識系統
✦ 高效能卷積式人工智慧處理晶片

This project develops an eye-safe and interference-resistant Lidar system consisting of APD array chip, high-accuracy TOF chip, 3D-point cloud image processing chip, AI edge processor chip. The AI processor chip can accelerate the image classification applications using the fused lidar depth map and RGB image. The proposed system will increase the image classification accuracy and AI processing throughput on the edge. The highlights of this project include:
✦ Eye-safe 1550m APD array sensor
✦ High-accuracy interference-resistant chaotic Lidar system
✦ Chaotic Lidar TOF estimation circuit
✦ Chaotic Lidar depth image processor
✦ Fused Lidar depth and RGB image recognition/classification algorithm
✦ Embedded CNN processor for AI image processing

 

應用情境 Applications


本晶片系統可使用在具智慧終端影像處理功能之AR/VR場景製作之高精準度之三維影像錄製系統,未來5G高速傳輸應用中,本計畫所開發之系統可以用於AR/VR節目即時錄製轉播、AR/VR遠端會議系統等。此外本系統也可以用在更多其他應用上,包含
✦ 光達系統
抗干擾(車用)光達系統
人眼保護光達系統
✦ VR/AR 三維場景錄製
深度融合多媒體影像處理辨識
人工智慧影像系統
運動科學分析
生醫訊號處理與診斷分析
✦ 數位雙胞胎Digital Twin
智慧網實系統Cyber-Physical System

The proposed system can be used in the AR/VR 3D video recording applications with artificial intelligent edge processing, which supports the AR/VR program real-time recording and AR/VR remote conference and more other applications:
✦ Autonomous Car
Interference-resistant Lidar
Eye-safe Lidar
✦ VR/AR 3D video recording
Fused depth and image computer vision
Sports science and technology
Biomedical signal processing, analysis and diagnosis
✦ Digital Twin
Cyber-Physical System
 

示意圖 Schematic Diagram