인피니언 HV GaN
반도체 AI 인더스트리 4.0 SDV 스마트 IoT 컴퓨터 통신 특수 가스 소재 및 장비 e4ds plus

UNIST, 피아노 손동작 읽는 AI 음악학습 기술로 세계 무대 주목

기사입력2026.03.18 14:57



실시간 손 추적·맞춤형 피드백 기술 적용
 
UNIST 디자인학과 엄홍열 교수 연구팀이 피아노 연주자의 손동작을 실시간으로 읽고 연주 데이터를 바탕으로 즉시 피드백을 제공하는 AI 기반 음악 학습 기술로 글로벌 뮤직테크 시장에서 성과를 냈다. 연구팀이 영국 뮤직테크 기업 ROLI와 협업해 디자인 개발을 주도한 ‘ROLI Piano’와 ‘ROLI Airwave’는 국제 디자인·기술 무대에서 잇따라 수상하며 상용화 가능성을 보여줬다.

UNIST는 18일 이 기술이 적용된 두 제품이 2026 CES 혁신상과 iF 디자인상을 받았고, 미국 시사주간지 타임이 선정한 ‘더 베스트 인벤션스’에도 포함됐다고 밝혔다. 대학 연구실의 디자인 연구가 글로벌 기업과의 협업을 거쳐 실제 시장 제품으로 이어졌다는 점에서 주목된다.

핵심은 ‘ROLI Airwave’에 적용된 손 추적 기술이다. 이 장치는 연주자의 손 움직임을 실시간으로 포착해 건반 위 손의 위치와 움직임을 분석하고, 손가락 위치와 제스처를 바탕으로 시각적 안내와 피드백을 제공한다. 기존 악기 교육에서 익히기 쉽지 않았던 손의 위치, 타이밍, 표현 방식까지 직관적으로 이해할 수 있도록 설계된 것이 특징이다.

이 기술은 ROLI의 디지털 악기 시스템과 결합해 연주와 학습, 창작을 함께 지원하는 인터랙티브 플랫폼으로 확장된다. 특히 ‘AI 뮤직 코치’와 연동해 연주자의 움직임과 연주 데이터를 분석하고, 그 결과를 실시간으로 돌려주는 구조를 갖췄다. 사용자는 혼자 연습하는 과정에서도 자신의 연주를 점검하고 부족한 부분을 바로 보완할 수 있다.

적용 범위는 음악 교육과 창작 분야 전반으로 이어질 수 있다. 개인 맞춤형 피드백을 바탕으로 학습 과정의 시행착오를 줄이고, 연주자의 표현 방식까지 분석할 수 있어 기존의 일방향 레슨 방식과는 다른 데이터 기반 상호작용형 교육 환경을 제시한다. 초보 학습자부터 창작자까지 폭넓게 활용될 수 있는 구조다.

이번 성과는 AI와 디자인, 음악 교육이 결합한 연구가 산업 현장에서 실제 제품으로 구현될 수 있음을 보여준 사례로 평가된다. 동시에 음악 교육이 경험과 감각 중심의 훈련에서 나아가 데이터 분석과 실시간 피드백을 결합한 맞춤형 학습 방식으로 확장될 가능성도 보여줬다.