Signs: AI 기술로 구동되는 미국 수화를 학습하고 기여할 수 있는 대화형 플랫폼

11.8K 00

일반 소개

Signs는 AI 기술을 통해 사용자가 미국 수어(ASL)를 배우고 청각 장애인 커뮤니티에 기여할 수 있도록 설계된 혁신적인 온라인 플랫폼입니다. NVIDIA, 미국 청각장애 아동 협회(ASDC), 크리에이티브 에이전시인 Hello Monday/DEPT®와 협력하여 개발된 이 사이트는 AI 기반 실시간 피드백과 커뮤니티 협업의 개념을 결합합니다. 초보자든 숙련된 수화 사용자든 이 플랫폼을 통해 대화형으로 수화를 배우거나 수화 동영상을 업로드하여 오픈 소스 데이터 세트를 풍부하게 만들 수 있습니다. 학습 도구를 제공할 뿐만 아니라 고품질 수어 동영상 리소스 라이브러리를 구축하여 보다 접근하기 쉬운 기술 개발을 지원하고 청각장애인과 청각장애인 간의 소통의 다리를 연결하기 위해 최선을 다하고 있습니다. 이 플랫폼은 현재 손 모션 캡처에 중점을 두고 있으며, 향후에는 얼굴 표정 등 비손 신호 인식 기능도 추가할 계획입니다.

기능 목록

ASL 학습 모듈기본 수화 어휘를 교육하고 3D 아바타를 통해 시연을 볼 수 있습니다.
실시간 피드백 시스템카메라 및 AI를 사용하여 사용자 제스처를 분석하고 즉각적인 수정 제안을 제공합니다.
동영상 기여 기능사용자가 수어 동영상을 업로드할 수 있도록 허용하여 플랫폼의 수어 데이터 세트 확장에 도움을 줍니다.
오픈 데이터 세트 지원개발자에게 AI 애플리케이션 개발을 위한 검증된 ASL 동영상 리소스를 제공합니다.
커뮤니티 상호 작용학습자와 청각 장애인 커뮤니티를 연결하여 지식 공유와 문화 교류를 촉진합니다.

도움말 사용

Signs는 별도의 설치 없이 브라우저를 통해 https://signs-ai.com/即可开始体验 을 방문하기만 하면 사용할 수 있는 온라인 플랫폼입니다. 다음은 빠르게 시작하고 기능을 최대한 활용하는 데 도움이 되는 자세한 사용자 가이드입니다.

시작하는 방법

웹사이트에 액세스
브라우저를 열고 URL https://signs-ai.com/ 을 입력하여 홈 페이지로 이동합니다. 학습과 참여라는 두 가지 주요 옵션이 표시됩니다. 일부 콘텐츠는 등록하지 않고도 볼 수 있지만 전체 기능을 사용하려면 계정을 만드는 것이 좋습니다.
계정 만들기
오른쪽 상단의 '가입하기' 버튼을 클릭하고 이메일 주소와 비밀번호를 입력하면 등록이 완료됩니다. 등록이 완료되면 로그인하여 진행 상황을 저장하고 동영상을 업로드할 수 있습니다.
장비 요구 사항
디바이스에 카메라(실시간 피드백을 위해)가 장착되어 있고 인터넷 연결이 안정적인지 확인하세요. 최상의 환경을 위해 데스크톱 또는 노트북을 사용하는 것이 좋으며, 휴대폰도 사용할 수 있지만 화면이 작으면 작동에 영향을 줄 수 있습니다.

주요 기능

1. 미국 수화 배우기(학습 모듈)

학습 페이지로 이동
홈페이지에서 '배우기'를 클릭하여 수어 학습 인터페이스로 들어갑니다. '안녕하세요', '가족'과 같은 일반적인 수어 단어가 여기에 표시됩니다.
3D 헤드샷 데모 보기
어휘 단어를 선택하면 시스템이 해당 수화에 대한 제스처 동작을 보여주는 3D 아바타를 표시합니다. 다양한 각도에서 보면서 각 손동작의 세부 사항을 이해할 수 있습니다.
연습하고 피드백 받기
카메라를 켜고 손을 가리키며 3D 아바타의 제스처를 따라 하면 AI가 실시간으로 사용자의 움직임을 분석하여 화면에 피드백을 표시합니다. 예를 들어 손가락 위치가 올바르지 않으면 "새끼손가락을 들어주세요" 또는 "손바닥이 왼쪽을 향해야 합니다"라는 메시지가 표시됩니다. 인식 정확도를 높이려면 조용하고 조명이 밝은 환경에서 연습하는 것이 좋습니다.
고급 학습
이 플랫폼은 초급 어휘부터 복잡한 문장까지 난이도가 점진적으로 높아지는 등급별 학습 모델을 제공합니다. 각 단계를 완료한 후에는 장기 학습자를 위해 더 많은 콘텐츠를 잠금 해제할 수 있습니다.

2. 수화로 동영상 참여하기(참여하기 모듈)

기여 페이지로 이동
홈페이지에서 '참여하기'를 클릭하여 동영상 업로드 화면으로 들어갑니다. 여기에서 '사랑' 또는 '학교'와 같이 현재 플랫폼에서 요구하는 단어 목록을 찾을 수 있습니다.
비디오 녹화
대상 어휘 옆에 있는 '녹화' 버튼을 클릭하면 시스템이 카메라를 활성화합니다. 지시에 따라 해당 수화 동작을 하고 3~5초 분량의 동영상을 녹화합니다. 녹화 후에는 동영상을 미리 보고 동작이 선명하게 보이는지 확인할 수 있습니다.
제출 및 유효성 검사
'제출'을 클릭하여 동영상을 업로드합니다. 제출된 모든 동영상은 청각장애인 및 공인 통역사가 정확성을 검토합니다. 검토가 완료되면 동영상이 데이터 세트에 추가되고 감사 메모를 받게 됩니다.
주의
녹화할 때는 배경을 단순하게 유지하고, 손이 가려지지 않도록 하며, 동작이 ASL을 준수하는지 확인하세요. 참고할 수 있도록 플랫폼에서 데모 동영상을 제공합니다.

3. 실시간 피드백 시스템의 심층적인 활용

카메라 각도 조정하기
학습하거나 녹화할 때는 양손이 프레임 중앙에 있는지 확인하세요. AI 인식에 실패하면 카메라 높이 또는 거리를 조정하세요. 일반적으로 50~80cm를 유지하는 것이 적절합니다.
피드백 제안 이해하기
피드백은 텍스트에만 국한되지 않고 녹색(정답) 또는 빨간색(오답) 시각적 표시가 표시되는 경우도 있습니다. 제스처가 완전히 정확했음을 나타내는 녹색 표시등이 켜질 때까지 연습을 반복합니다.
경험 최적화
피드백이 지연되면 네트워크 속도를 확인하거나 화면 해상도를 낮추세요. 이 플랫폼은 다양한 디바이스 성능에 맞게 선명도를 수동으로 전환할 수 있도록 지원합니다.

주요 기능 작동 세부 정보

3D 아바타 인터랙티브
아바타를 클릭하면 제스처의 세부 사항을 자세히 보려면 일시정지, 회전 또는 확대할 수 있습니다. 초보자는 슬로우 플레이 기능으로 서서히 따라 할 수 있습니다.
데이터 집합 기여의 중요성
각 동영상 업로드는 플랫폼이 데이터를 축적하는 데 도움이 되어 40만 개의 동영상 클립이 포함된 목표 데이터베이스에 도달하는 데 정점을 찍었습니다. 이는 개인 학습을 지원할 뿐만 아니라 화상 회의 수화 인식과 같은 청각 장애 분야의 AI 기술 활용을 발전시키는 데도 도움이 됩니다.
커뮤니티 참여
이 사이트는 정기적으로 기여도 순위를 업데이트하여 활동적인 사용자를 소개합니다. 포럼 영역에서 다른 사용자와 학습 경험을 교환하거나 제안을 할 수도 있습니다.

사용 팁

초보자를 위한 조언
기본 어휘부터 시작하여 하루에 10분씩 연습하면서 점차 제스처의 패턴에 익숙해지도록 하세요.
동영상 업로더 제안
녹화하기 전에 데모 동영상을 확인하여 동작이 표준화되어 있고 반복적인 수정을 피할 수 있는지 확인하세요.
기술 지원
궁금한 점이 있으면 웹사이트 하단의 '문의하기'로 이메일을 보내면 48시간 이내에 팀에서 답변해 드립니다.

위의 단계를 통해 Signs-ai의 핵심 기능을 쉽게 익혀 수어 실력을 향상하는 동시에 커뮤니티에 기여할 수 있습니다. 이 웹사이트는 간단하고 직관적이며 모든 연령대의 사용자, 특히 청각 장애가 있는 자녀를 둔 가족이나 수어 애호가에게 적합하며 학습과 공유에 없어서는 안 될 플랫폼입니다.