RGB-D 환경인식 시각 지능, 목표 사물 경로 탐색 및 심층 강화학습에 기반한 사람형 로봇손의 목표 사물 파지
Grasping a Target Object in Clutter with an Anthropomorphic Robot Hand via RGB-D Vision Intelligence, Target Path Planning and Deep Reinforcement Learning
2
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
다중 사물 환경에서 목표 사물만의 정밀한 파지를 위해서는 장애물과의 충돌 회피 지능과 정교한 파지 지능이 필요하다. 이 작업을 위해선 다중사물 환경 인지, 목표 사물 인식, 경로 설정, 로봇손의 사물 파지 지능이 필요하다. 본 연구에서는 RGB-D 영상 센서를 이용하여 다중 사물 환경과사물을 인지하고 3D 공간을 매핑한 후, 충돌 회피 경로 탐색 알고리즘을 활용하여 목표 사물까지의 경로를 탐색 및 설정하고, 강화학습을 통해학습된 사람형 로봇손의 목표 사물 파지 지능을 활용해 최종적으로 시뮬레이션 및 하드웨어 사물 파지 시스템을 구현하고 검증하였다. 사람형 로봇손을구현한 시뮬레이션 환경에서 5개의 사물 중 목표 사물을 지정하고 파지한 결과 경로 탐색 없는 파지 시스템이 평균 78.8%의 성공률과 34%의 충돌률을보일 때, 경로 탐색 지능과 결합된 시스템은 평균 94%의 성공률과 평균 20%의 충돌률을 보였다. UR3와 QB-Soft Hand를 사용한 하드웨어 환경에서는3개의 사물 중 목표 사물을 지정하고 파지한 결과 경로 탐색 없는 파지 시스템이 평균 30%의 성공률과 97%의 충돌률을 보일 때, 경로 탐색 지능과결합된 시스템은 평균 90%의 성공률과 평균 23%의 충돌률을 보였다. 본 연구에서는 RGB-D 시각 지능, 충돌 회피 경로 탐색, 사물 파지 심층 강화학습지능의 결합을 통하여, 사람형 로봇손의 목표 사물 파지가 가능함을 제시하였다
Abstract
Grasping a target object among clutter objects without collision requires machine intelligence. Machine intelligence includes environmentrecognition, target & obstacle recognition, collision-free path planning, and object grasping intelligence of robot hands. In this work,we implement such system in simulation and hardware to grasp a target object without collision. We use a RGB-D image sensor to recognizethe environment and objects. Various path-finding algorithms been implemented and tested to find collision-free paths. Finally for ananthropomorphic robot hand, object grasping intelligence is learned through deep reinforcement learning. In our simulation environment,grasping a target out of five clutter objects, showed an average success rate of 78.8%and a collision rate of 34% without path planning. Whereas our system combined with path planning showed an average success rate of 94% and an average collision rate of 20%. In ourhardware environment grasping a target out of three clutter objects showed an average success rate of 30% and a collision rate of 97%without path planning whereas our system combined with path planning showed an average success rate of 90% and an average collisionrate of 23%. Our results show that grasping a target object in clutter is feasible with vision intelligence, path planning, and deep RL.
참고문헌 (26)
- D. Katz, "Clearing a pile of unknown objects using interactive perception", 2013IEEE International Conference on Robotics and Automation, pp.154~161 (2013)
- S. Q. Ji, "Robot intelligent grasp of unknown objects based on multi-sensor information", Sensors, 19(7), pp.1595~ (2019)
- J. Redmon, "You only look once : Unified, real-time object detection", Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition, pp.779~788 (2016)
- S. Ren, "Faster r-cnn : Towards real-time object detection with region proposal networks", Advances in Neural Information Processing Systems, 28, pp.91~99 (2015)
- K. He, "Mask r-cnn", Proceedings of the IEEE International Conference on Computer Vision, pp.2961~2969 (2017)
- W. Agnew, "Amodal 3d reconstruction for robotic manipulation via stability and connectivity", Conference on Robot Learning, PMLR, pp.1498~1508 (2021)
- G. Sánchez, "On delaying collision checking in PRM planning : Application to multi-robot coordination", The International Journal of Robotics Research, 21(1), pp.5~26 (2002)
- B. Fu, "An improved A* algorithm for the industrial robot path planning with high success rate and short length", Robotics and Autonomous Systems, 106, pp.26~37 (2018)
- 박나현, "휴먼형 로봇 손의 사물 조작 수행을 이용한 사람데모 결합 강화학습 정책 성능 평가", 정보처리학회 논문지, 10(5), pp.179~186 (2021), 한국정보처리학회
- E. V. Añazco, "Natural object manipulation using anthropomorphic robotic hand through deep reinforcement learning and deep grasping probability network", Applied Intelligence, 51(2), pp.1041~1055 (2021)
- E. V. Añazco, "Human-like object grasping and relocation for an anthropomorphic robotic hand with natural hand pose priors in deep reinforcement learning", Proceedings of the 2019 2nd International Conference on Robot Systems and Applications, pp.46~50 (2019)
- A. Saxena, "A vision-based system for grasping novel objects in cluttered environments", Robotics Research, pp.337~348 (2010)
- Y. R. Liu, "Automated grasp planning and path planning for a robot hand-arm system", 2019 IEEE, 2019, 92~97
- M. Breyer, "Volumetric grasping network : Real-time 6 dof grasp detection in clutter", arXiv preprint arXiv : 2101. 01132, ~ (2021)
- E. Todorov, "Mujoco: A physics engine for model-based control", 2012 IEEE, 2012, 5026~5033
- V. Kumar, "Fast, strong and compliant pneumatic actuation for dexterous tendon-driven hands", 2013 IEEE International Conference on Robotics and Automation, pp.1512~1519 (2013)
- L. Yang, "Survey of robot 3D path planning algorithms", Journal of Control Science and Engineering (2016)
- P. E. Hart, "A formal basis for the heuristic determination of minimum cost paths", IEEE transactions on Systems Science and Cybernetics, 4(2), pp.100~107 (1968)
- Dennis de Champeaux, "Bidirectional Heuristic Search Again", Journal of the ACM, 30(1), pp.22~32 (1983), Association for Computing Machinery (ACM)[DOI]
- Rapidly-exploring random trees: A new tool for path planning, "S. M. LaValle", 98~11 (1998)
- J. Bruce, "Real-time randomized path planning for robot navigation", Robot Soccer World Cup, pp.288~295 (2002)
- J. J. Kuffner, "RRT-connect : An efficient approach to single-query path planning", Proceedings 2000ICRA. Millennium Conference. IEEE International Conference on Robotics and Automation. Symposia Proceedings, 2, pp.995~1001 (2000)
- S. M. Kakade, "A natural policy gradient", Advances in Neural Information Processing Systems, 14, pp.1531~1538 (2001)
- "UR3e Collaborate Robot Arm that Automates Almost Anything"[URL]
- "qb SoftHand Research - Anthropomorphic Robot Hand-Qbrobotics"[URL]
- "GitHub Ropository" (2021)[URL]