- RelicTouch 시스템 개요: 이미지 유래 특징을 실시간 움직임 종속형 진동(Vibrotactile)으로 변환하는 손가락 착용형 시스템입니다.
- 데이터 처리 및 분석: 휘도 및 엣지 변화를 시그널로 매핑하여 터치스크린 탐색 시 시각-촉각 일치도를 검증합니다.
- 시스템 구조적 시사점: 단일 손가락 및 다중 손가락 탐색에 따른 분산 데이터 스트리밍 및 처리 확장성을 제공합니다.
RelicTouch 시스템과 데이터·시스템 구조의 개요
현대의 무인이동체 GCS(지상통제시스템) 및 피지컬 AI 환경에서는 시각 데이터뿐만 아니라 다양한 감각 채널을 통한 정보 전달이 요구됩니다. RelicTouch는 단순한 재질 시뮬레이션을 넘어, 터치스크린 상의 이미지 해석을 돕기 위해 개발된 손가락 착용형 진동 촉각 피드백 시스템입니다.
이 시스템은 입력된 이미지의 특징(휘도, 엣지 등)을 실시간으로 추출하여 사용자 손가락의 움직임과 동기화된 진동 신호로 변환합니다. 이는 대규모 센서 시계열 데이터를 실시간 스트리밍으로 처리하고 액츄에이터로 피드백하는 백엔드 파이프라인 구조와 밀접한 연관이 있습니다.
이미지 특징 추출 및 실시간 스트리밍 데이터 파이프라인
RelicTouch의 백엔드는 이미지 데이터를 실시간으로 가공하여 촉각 신호로 전환하는 고속 파이프라인을 요구합니다. 시스템은 진동 강도, 스트라이프 간격, 그리고 손가락 구성(Finger configuration) 등의 파라미터를 실시간으로 연산합니다.
사용자의 탐색 속도와 접촉 위치에 따라 데이터 스트림의 동적 변화가 발생하며, 이는 지연 시간(Latency) 없는 실시간 처리 시스템의 핵심 지표인 시그널 가독성(Cue legibility)에 직접적인 영향을 미칩니다.
단일 손가락 vs 다중 손가락 탐색 구조 비교
실험 결과에 따르면, 단일 손가락 탐색은 더 높은 주관적 명확성(Subjective clarity)을 제공하는 반면, 다중 손가락 피드백은 분리된 특징 간의 거친 비교(Coarse comparison)에 유용한 데이터 구조적 가능성을 보여주었습니다.
| 비교 항목 | 단일 손가락 탐색 (Single-finger) | 다중 손가락 탐색 (Multi-finger) |
|---|---|---|
| 주관적 명확성 | 높음 (High subjective rating) | 중간 (제한적 분해능) |
| 데이터 처리 부하 | 낮음 (단일 스트림 연산) | 높음 (다중 채널 동기화 필요) |
| 응용 분야 | 정밀 이미지 특징 분석 | 광역 센서 데이터 및 지형 비교 |
피지컬 AI 및 GCS 시스템 적용 방안
이러한 진동 촉각 피드백 연구는 로봇 제어 및 드론 GCS 환경에서 운영자가 시각 화면을 지속적으로 주시하기 어려운 상황에서 유용합니다. 이미지 내 엣지나 휘도 변화를 촉각 신호로 전환하는 구조는 피지컬 AI 장비의 원격 제어 인터페이스 설계를 위한 중요한 설계 지침(Design implications)을 제공합니다.
대규모 센서 시계열 데이터를 지연 없이 백엔드에서 처리하고, 이를 사용자 체감형 촉각 인터페이스로 확장하는 아키텍처는 향후 자율주행 및 무인이동체 데이터 파이프라인 설계에 직접 응용될 수 있습니다.
출처 및 원문 링크: UAL Research Online – RelicTouch