프로젝트 개요
프로젝트 요약:
COM-US는 수어 변환과 대화형 소통 지원을 통해 농인 부모와 청인 자녀(CODA) 간의 소통 격차를 해소하는 AI 기반 소통 플랫폼입니다. 한국에서는 농인 성인의 90% 이상이 청인 자녀를 두고 있습니다. 하지만 많은 CODA 가족들이 공통 언어의 한계로 인해 정서적 유대감 형성과 일상 대화에 어려움을 겪고 있습니다.
이를 해결하기 위해 COM-US는 농인 부모가 자녀에게 질문을 보내면, 자녀가 음성이나 텍스트로 답변하는 방식을 지원합니다. 이러한 답변은 수어 구조에 최적화된 맥락 인식 언어 처리 시스템을 통해 자동으로 한국수어(KSL) 문법으로 변환됩니다. 주요 수어 단어들은 공식 KSL 사전 영상과 매칭되어, 부모가 자녀의 생각과 감정을 직관적으로 이해할 수 있도록 돕습니다.
번역 기능을 넘어서, COM-US는 CODA 자녀들이 영상을 따라하며 반복 연습을 통해 자연스럽게 수어를 습득할 수 있도록 지원합니다. 모든 대화는 "대화 블록"을 통해 시각화되어 지속적인 가족 간 상호작용과 감정 공유를 장려합니다.
접근 가능한 기술과 문화적 민감성을 결합함으로써, COM-US는 단순한 소통을 넘어 CODA 가족 내에서 학습, 공감, 그리고 더 깊은 연결을 위한 공유 공간을 구축합니다.
문제 인식
사회적 문제:
CODA(농인 부모의 자녀)들은 이중 언어 및 문화 환경에서 성장합니다—집에서는 수어를, 사회에서는 구어를 사용합니다. 어린 나이부터 많은 CODA들이 "어린 돌봄자" 역할을 하며, 농인 부모를 위해 통역, 서류 처리, 기관과의 소통을 담당합니다. 하지만 한국은 이러한 책임에 대한 제도적 인식이나 지원이 부족합니다. 그 결과 CODA들은 종종 정서적 부담을 느끼고 자신의 감정을 표현하는 데 어려움을 겪습니다. 가장 중요한 것은 부모와의 언어적 격차가 열린 소통을 막아 가족 유대를 약화시키고 정체성 발달에 영향을 미친다는 점입니다.
기존의 수어 도구들은 단어 수준의 번역에 한정되어 있으며 감정적이고 문장 기반의 대화를 지원하지 않습니다. COM-US는 이러한 격차를 해소하기 위해 만들어졌습니다—음성이나 문자 입력을 한국수어(KSL) 문법으로 변환하고 단어를 공식 수어 영상과 연결합니다. 이를 통해 농인 부모와 자녀에게 감정과 생각을 공유할 수 있는 안전하고 체계적인 공간을 제공하여, 더 깊은 정서적 연결과 더 포용적인 가족 소통을 촉진합니다.
혁신과 독창성
우리 프로젝트의 차별점:
COM-US는 CODA 가족을 위해 특별히 설계된 최초의 감정 소통 플랫폼입니다. 일방향적이고 단어 기반의 번역을 제공하는 기존 수어 도구들과 달리, COM-US는 문자 텍스트를 문장 수준의 한국수어(KSL) 문법으로 변환하여 양방향 실시간 대화를 가능하게 합니다.
시스템은 정확하고 맥락을 인식하는 번역을 제공하며, 이는 공식 KSL 사전의 수어 영상과 연결됩니다. 이를 통해 언어적 정확성과 직관적인 소통을 모두 보장합니다. 독특한 "수어 연습" 기능은 자녀들이 수어 영상을 따라할 수 있게 하여 수어 학습을 매력적이고 자연스럽게 만듭니다. 플랫폼은 또한 "대화 블록" 인터페이스를 통해 가족 대화를 시각화하여 지속적인 감정적 공유를 장려합니다.
COM-US를 차별화하는 것은 감정 중심의 설계입니다: 단순한 번역 도구가 아니라 CODA 가족 내에서 공감, 이해, 정체성 발달을 촉진하는 다리—일상 대화를 지속적인 감정적 연결로 변화시키는 것입니다.
통찰과 개발
학습 과정:
우리는 처음에 수어 교육 도구 구축에 초점을 맞췄지만, 개발이 진행되면서 단순한 교육만으로는 CODA 가족이 직면한 더 깊은 소통 문제를 해결할 수 없다는 것을 깨달았습니다. 이러한 과제를 더 잘 이해하기 위해 우리 팀은 한국수어(KSL) 구문을 연구했고, 일부 구성원은 3개월 교육 프로그램을 이수했습니다. 또한 CODA들의 감정적 경험을 더 잘 파악하기 위해 주간 통찰을 공유했습니다.
인터뷰를 통해 많은 CODA들이 정서적 거리감, 감정 표현의 어려움, 중재자 역할로 인한 심리적 부담을 겪고 있다는 것을 알게 되었습니다. 이러한 통찰로 인해 우리는 프로젝트를 단순한 교육이 아닌 감정적 교류로 전환하게 되었습니다. 이 여정을 통해 사용자가 진정으로 필요로 하는 것이 무엇인지 묻는 법을 배웠습니다. 문제의 근본을 이해하는 것이 모든 결정의 기초가 되었으며, 의미 있는 기술은 공감과 깊은 사용자 이해에서 시작해야 한다는 것을 깨달았습니다.
개발 과정:
COM-US는 Android, Spring Boot, Flask를 기반으로 구축된 AI 소통 플랫폼입니다. 사용자 입력을 한국수어(KSL) 문법으로 변환하고 적절한 수어 영상과 연결하는 맞춤형 AI 파이프라인을 개발했습니다. 가장 큰 과제는 자연스러운 KSL 문장을 생성하는 것이었습니다. 이를 해결하기 위해 우리 팀은 한국수어 구문을 연구하고 어순 재배열, 부정 처리, 문장 분할과 같은 문법 규칙을 적용하는 GPT 프롬프트를 설계했습니다. 또한 공식 KSL 사전의 제한된 어휘 문제를 해결하기 위해 동의어 확장 시스템을 구축했습니다. 이를 통해 사전에 없는 단어들을 의미적으로 유사한 단어와 매칭하고 해당하는 수어 영상을 보여줄 수 있게 되었습니다. 반복적인 테스트와 실제 사용자 피드백을 통해 효과적이고 감정적으로 표현력 있는 소통을 지원하는 문법 인식, 의미 중심의 수어 파이프라인으로 시스템을 개선했습니다.