인사를 건네면서 손을 흔드는 동작까지. 마비가 있는 사람의 신호를 가상 아바타의 말과 몸짓으로 연결한 연구가 나왔다.
본문
‘안녕하세요’라고 말하면서 손을 흔든다. 설명하다가 손으로 방향을 가리키고, 잘됐다는 말과 함께 엄지를 들어 보인다. 대화에는 소리로 들리는 문장 말고도 몸으로 전하는 부분이 많다.
말과 팔다리를 움직이기 어려운 사람에게 의사소통 장치를 만든다면, 문장을 출력하는 일만으로 충분할까. UCSF 에드워드 창 연구팀의 뇌 인터페이스 연구는 말과 몸짓을 동시에 전하는 쪽으로 그 범위를 넓혔다.
## 문장 옆에 손짓을 놓다
NIH가 10월 7일 소개한 연구는 뇌 활동을 가상 아바타의 명령으로 바꾸는 장치를 다룬다. UCSF의 에드워드 창 연구팀은 말과 움직임에 관여하는 운동피질의 신호를 기록하고, 이를 말과 상체의 동작으로 연결했다. 논문은 9월 14일 『Nature Neuroscience』에 발표됐다.
연구에는 말하기에 심한 마비가 있는 세 사람이 참여했다. 두 사람은 팔다리에도 심한 마비가 있었고 다른 한 사람은 중간 정도의 마비가 있었다. 손을 흔들거나 엄지를 드는 동작처럼 대화에 쓰는 몸짓을 시도하고, 아바타가 이를 표현하도록 했다.
## 따로 배운 동작을 함께 하는 어려움
말만 하려는 순간과 손짓만 하려는 순간을 학습한다고 해서 둘을 동시에 시도할 때도 똑같이 잘 해석되는 것은 아니다. 연구팀은 각각의 시도와 말·몸짓을 함께 시도한 데이터를 비교했다. 함께 시도한 데이터를 학습에 포함했을 때, 동시 동작을 해석하는 성능이 좋아졌다.
시험에서는 정해진 동작을 따라 하는 과제와 대화 문답을 구분했다. 따라서 한 숫자로 모든 대화가 자연스럽게 복원됐다고 말할 수는 없다. 참여 인원이 적은 개념 입증 단계의 연구이며, 이번 장치는 유선 시스템이다. 연구팀은 앞으로 완전히 삽입되는 무선 방식으로 발전시키려 한다.
이 장치는 사람의 생각 전체를 읽는 기계가 아니다. 특정한 말과 움직임을 시도할 때의 신호를 학습해 표현으로 연결한다. 인사 한마디와 함께 손을 흔드는, 평소에는 따로 생각하지 않았던 동작이 이번 연구에서는 함께 복원하고 싶은 대화의 일부가 됐다.
https://creativecommons.org/licenses/by/4.0/
이미지 안내: 대표 이미지는 연구의 Supplementary Video 3에서 발췌한 실제 화면입니다. Brosler, Liu, Silva 외 / Nature Neuroscience · CC BY 4.0. 영상의 한 프레임으로 발췌했습니다. https://www.nature.com/articles/s41593-026-02446-2 https://creativecommons.org/licenses/by/4.0/
확인 자료
NIH · 연구 소개
https://www.nih.gov/news-events/nih-research-matters/device-helps-people-paralysis-communicate
Nature Neuroscience · 연구 논문
https://www.nature.com/articles/s41593-026-02446-2
CC BY 4.0 이용 조건
https://creativecommons.org/licenses/by/4.0/
편집: 사실은 위 자료를 대조해 확인했으며, 해석은 MUADAILY의 편집 관점입니다. 이미지: Brosler, Liu, Silva 외 / UCSF · Nature Neuroscience · CC BY 4.0 · Supplementary Video 3 화면.
말과 팔다리를 움직이기 어려운 사람에게 의사소통 장치를 만든다면, 문장을 출력하는 일만으로 충분할까. UCSF 에드워드 창 연구팀의 뇌 인터페이스 연구는 말과 몸짓을 동시에 전하는 쪽으로 그 범위를 넓혔다.
## 문장 옆에 손짓을 놓다
NIH가 10월 7일 소개한 연구는 뇌 활동을 가상 아바타의 명령으로 바꾸는 장치를 다룬다. UCSF의 에드워드 창 연구팀은 말과 움직임에 관여하는 운동피질의 신호를 기록하고, 이를 말과 상체의 동작으로 연결했다. 논문은 9월 14일 『Nature Neuroscience』에 발표됐다.
연구에는 말하기에 심한 마비가 있는 세 사람이 참여했다. 두 사람은 팔다리에도 심한 마비가 있었고 다른 한 사람은 중간 정도의 마비가 있었다. 손을 흔들거나 엄지를 드는 동작처럼 대화에 쓰는 몸짓을 시도하고, 아바타가 이를 표현하도록 했다.
## 따로 배운 동작을 함께 하는 어려움
말만 하려는 순간과 손짓만 하려는 순간을 학습한다고 해서 둘을 동시에 시도할 때도 똑같이 잘 해석되는 것은 아니다. 연구팀은 각각의 시도와 말·몸짓을 함께 시도한 데이터를 비교했다. 함께 시도한 데이터를 학습에 포함했을 때, 동시 동작을 해석하는 성능이 좋아졌다.
시험에서는 정해진 동작을 따라 하는 과제와 대화 문답을 구분했다. 따라서 한 숫자로 모든 대화가 자연스럽게 복원됐다고 말할 수는 없다. 참여 인원이 적은 개념 입증 단계의 연구이며, 이번 장치는 유선 시스템이다. 연구팀은 앞으로 완전히 삽입되는 무선 방식으로 발전시키려 한다.
이 장치는 사람의 생각 전체를 읽는 기계가 아니다. 특정한 말과 움직임을 시도할 때의 신호를 학습해 표현으로 연결한다. 인사 한마디와 함께 손을 흔드는, 평소에는 따로 생각하지 않았던 동작이 이번 연구에서는 함께 복원하고 싶은 대화의 일부가 됐다.
https://creativecommons.org/licenses/by/4.0/
이미지 안내: 대표 이미지는 연구의 Supplementary Video 3에서 발췌한 실제 화면입니다. Brosler, Liu, Silva 외 / Nature Neuroscience · CC BY 4.0. 영상의 한 프레임으로 발췌했습니다. https://www.nature.com/articles/s41593-026-02446-2 https://creativecommons.org/licenses/by/4.0/
확인 자료
NIH · 연구 소개
https://www.nih.gov/news-events/nih-research-matters/device-helps-people-paralysis-communicate
Nature Neuroscience · 연구 논문
https://www.nature.com/articles/s41593-026-02446-2
CC BY 4.0 이용 조건
https://creativecommons.org/licenses/by/4.0/
편집: 사실은 위 자료를 대조해 확인했으며, 해석은 MUADAILY의 편집 관점입니다. 이미지: Brosler, Liu, Silva 외 / UCSF · Nature Neuroscience · CC BY 4.0 · Supplementary Video 3 화면.
편집 안내
본문의 출처 링크는 새 창으로 열립니다.
