請用此 Handle URI 來引用此文件:
http://tdr.lib.ntu.edu.tw/jspui/handle/123456789/8554
標題: | 增強式自動編碼網路應用於隨機堆疊物件之分類夾取 Robotic Random Bin Picking and Classification System Using Augmented Autoencoder |
作者: | Jian-Lun Chen 陳健倫 |
指導教授: | 李志中(Jyh-Jone Lee) |
關鍵字: | 堆疊夾取,實例切割,姿態估測,自動編碼網路,領域隨機化, Clutter Grasping,Instance Segmentation,Pose Estimation,Autoencoder,Domain Randomization, |
出版年 : | 2021 |
學位: | 碩士 |
摘要: | 本文提出一套改善的隨機堆疊物件分類之夾取流程,藉由物件切割、姿態估測以及夾取點判定,完成在隨機堆疊場景當中夾取與擺放物件的任務。整個流程首先使用深度感知相機獲得隨機堆疊場景,接著將平面影像搭配物件切割系統把場景中的目標物件逐一取出,將物件從堆疊場景取出後便放入姿態估測模型做姿態的預測,同時找尋該姿態對應的夾取資訊,最後搭配深度影像經過夾取點的判定完成本文的夾取流程。 本文提出並改善的地方分別為針對目標物件以虛擬相機自動獲得物件各個視角的照片成為姿態資料集,節省對現實資料處理的時間成本;以領域隨機化(Domain Randomization)的方式訓練自動編碼網路(Autoencoder)成為增強式自動編碼網路(Augmented Autoencoder),避免虛擬與現實環境產生的領域差異(Domain Gap)並作為姿態估測系統;將對應的姿態經過修正的夾取經驗轉移預測夾取資訊,再經過干涉篩選與穩定度的排序,獲得最終的夾取點預測。 為了驗證本夾取流程的效果,本文架設實驗環境與機械手臂系統實際運行夾取流程,統計不同流程的夾取成功率與速度並探討本流程的特色與優點。最終本文的夾取流程針對兩樣金屬物件在隨機堆疊場景當中的夾取成功率為89.285%,整體運算的時間為1.128秒。 A process is proposed to improve the robotic grasping and classification system in this thesis, in which the system first uses instance segmentation technique to segment the image of the object in clutter, then proceeded by pose estimation and finally applies collision detection process to output the optimal grasping position for the robot. This thesis focuses on the establishment of the pose estimation process by using the augmented autoencoder which uses a virtual camera to automatically crop the poses of the target object for dataset and contains domain randomization to avoid domain gap between real and synthetic data. In order to verify the effectiveness of the process, a robotic system is set up to perform the random bin picking. It is shown that the success rate of grasping two metal objects in clutter can be up to 89.285% and the computation time is 1.128 seconds. |
URI: | http://tdr.lib.ntu.edu.tw/jspui/handle/123456789/8554 |
DOI: | 10.6342/NTU202100129 |
全文授權: | 同意授權(全球公開) |
電子全文公開日期: | 2025-02-01 |
顯示於系所單位: | 機械工程學系 |
文件中的檔案:
檔案 | 大小 | 格式 | |
---|---|---|---|
U0001-2201202120220500.pdf 此日期後於網路公開 2025-02-01 | 8.21 MB | Adobe PDF |
系統中的文件,除了特別指名其著作權條款之外,均受到著作權保護,並且保留所有的權利。