"在未來的人機協作環境中，必須以簡便自然的方式操控機械手臂，並克服訓練樣本數過少的問題。本技術開發以自然語言來引導機器手臂抓取任意物件。我們展現三項關鍵技術包括(1)快速準確的3D點雲夾取偵測網路GDN，(2)3D物件指引技術以及全新3D指引資料集，(3)跨領域少量樣本學習。在相關領域呈現極大的進展。全新3D點雲夾取偵測網路，快速偵測高品質夾取位置，提昇目前學界最好方法約30倍速度，具最佳的夾取成功率，善用3D點雲計算，更能抵抗視覺擷取雜訊。以自然語言引道人機協作，設計全新文字與3D影像共同物件指引深度學習網路，貢獻全新3D物件指引資料集。兼含少量樣本學習技術，並在多個國際競賽中呈現極佳表現。開發的技術可以讓機器手臂在生產線快速部署，降低訓練時間資料成本。人機共同協作，協助工業4.0落地。語音引導物件指引更可以應用於老人看護、身障人仕服務機器人。其中開發的3D點雲電腦視覺技術更可以使用在自駕車、人臉辨識、機器人感知等前瞻應用。

目前部份技術與國內領先資通訊企業持續進行產學合作計畫中。"