‹ 연구 목록

Multimodal Interface for Human-Robot Collaboration in Construction

Multimodal Interface for Human-Robot Collaboration in Construction

연구 기간
2023.11 – 2024.12
발주 기관
서울대학교
연구 개요 Overview
본 연구는 건설 작업자가 로봇공학에 대한 별도의 교육 없이도 공간적 목표를 전달할 수 있도록, 건설 로봇을 효과적이고 직관적으로 조작할 수 있는 새로운 인터페이스를 제안한다. 현재의 건설 로봇은 현장에서 공간적 지시와 목표를 이해하는 능력이 제한적이다. 또한 휴대용 컨트롤러와 같은 사용자 인터페이스는 많은 교육과 조작 시간이 필요하여, 대체로 로봇 전문가가 아닌 건설 작업자에게는 비현실적일 수 있다.
We propose a new interface which can provide an effective and intuitive means of operating construction robots, enabling construction workers to communicate spatial goals without the need for extensive training in robotics. Current construction robots are limited in their ability to understand spatial instructions and goals on the worksite. Moreover, user interfaces, such as handheld controllers, require extensive training and operation time for users, which can be impractical for construction workers who are typically not experts in robotics.
연구 내용 Research Content
1. 우리는 건설 로봇을 운영하기 위한 효과적이고 직관적인 수단을 제공하는 새로운 인터페이스를 제안한다. 이를 통해 건설 근로자들은 로봇공학에 대한 광범위한 훈련 없이도 공간적 목표를 전달할 수 있다. 현재 건설 로봇은 작업 현장에서 공간적 지시와 목표를 이해하는 데 한계가 있다. 또한, 손으로 들고 사용하는 컨트롤러와 같은 사용자 인터페이스는 사용자에게 많은 훈련과 운영 시간을 요구한다. 이는 일반적으로 로봇공학 전문가가 아닌 건설 근로자들에게 비현실적일 수 있다.
2. 본 연구는 레이저 궤적을 추정하여 사람이 가리키는 먼 공간 목표를 정확하게 추론하는 방법을 제안한다. 지시적 제스처의 장점에도 불구하고, 현재의 제스처 인터페이스는 높은 수준의 정밀도를 요구하는 건축 작업에 적합하지 않을 수 있다. 대규모 환경에서 이러한 인터페이스는 작업 공간 전체의 제한된 근접 영역만을 다루며, 먼 목표의 공간 위치를 추정하는 데 있어 정확도가 제한된다. 다른 도메인의 인터페이스는 대부분 근접 거리의 테이블탑에서 테스트되는 반면, 이 연구는 더 먼 목표를 가진 시나리오에 초점을 맞춘다. 이는 건축 로봇이 넓은 3D 작업 공간 내에서 운영되는 실제 상황에서 제안된 방법의 관련성과 적용 가능성을 강조한다.
1. We propose a new interface which can provide an effective and intuitive means of operating construction robots, enabling construction workers to communicate spatial goals without the need for extensive training in robotics. Current construction robots are limited in their ability to understand spatial instructions and goals on the worksite. Moreover, user interfaces, such as handheld controllers, require extensive training and operation time for users, which can be impractical for construction workers who are typically not experts in robotics.
2. We propose a method to accurately infer the distant, human-indicated spatial goals by estimating the laser trajectories. Despite the advantages of deictic gestures, current gesture interfaces may not be suitable for construction tasks that require a high level of precision. Within large-scale environments, these interfaces cover only a restricted proximity of the entire workspace and have limited accuracy in estimating the spatial locations of distant targets. Interfaces from other domains are mostly tested on close-proximity tabletops, whereas this study focuses on scenarios with more distant targets. This underscores the relevance and applicability of the proposed method in real-world scenarios where construction robots operate within expansive 3D workspaces.