Signs: eine interaktive Plattform zum Erlernen und Mitwirken an der Amerikanischen Gebärdensprache mit Hilfe von KI-Technologie

Allgemeine Einführung

Signs ist eine innovative Online-Plattform, die Nutzern helfen soll, die Amerikanische Gebärdensprache (ASL) zu erlernen und mithilfe von KI-Technologie einen Beitrag zur Gehörlosengemeinschaft zu leisten. Die Seite wurde in Zusammenarbeit mit NVIDIA, der American Society for Deaf Children (ASDC) und der Kreativagentur Hello Monday/DEPT® entwickelt und kombiniert die Konzepte von KI-gesteuertem Echtzeit-Feedback und Community-Zusammenarbeit. Egal, ob Sie Anfänger oder erfahrener Gebärdensprachbenutzer sind, Sie können ASL interaktiv über die Plattform lernen oder Gebärdensprachvideos hochladen, um den Open-Source-Datensatz zu erweitern. Die Plattform bietet nicht nur ein Lernwerkzeug, sondern setzt sich auch für den Aufbau einer hochwertigen ASL-Videoressourcenbibliothek ein, um die Entwicklung barrierefreier Technologien zu unterstützen und die Kommunikationsbrücke zwischen gehörlosen und hörenden Menschen zu schlagen. Die Plattform konzentriert sich derzeit auf die Erfassung von Handbewegungen, plant aber in Zukunft auch die Erkennung von anderen Signalen als Handbewegungen, z. B. von Gesichtsausdrücken.

Funktionsliste

• ASL-LernmodulGrundlegendes Vokabular der Gebärdensprache wird vermittelt, und die Benutzer können sich Demonstrationen durch 3D-Avatare ansehen.
• Feedback-System in EchtzeitMit Hilfe von Kameras und künstlicher Intelligenz werden die Gesten der Benutzer analysiert und sofortige Korrekturvorschläge unterbreitet.
• Video-BeitragsfunktionErlauben Sie Nutzern, Videos in Gebärdensprache hochzuladen, um den ASL-Datenbestand der Plattform zu erweitern.
• Unterstützung offener DatensätzeBereitstellung von validierten ASL-Videoressourcen für die Entwicklung von KI-Anwendungen für Entwickler.
• Interaktion mit der GemeinschaftVerbindung zwischen Lernenden und der Gehörlosengemeinschaft, um das Teilen von Wissen und den kulturellen Austausch zu erleichtern.

Hilfe verwenden

Signs ist eine Online-Plattform, für deren Nutzung keine Installation erforderlich ist. Besuchen Sie einfach https://signs-ai.com/即可开始体验 über Ihren Browser. Im Folgenden finden Sie eine ausführliche Bedienungsanleitung, die Ihnen hilft, schnell loszulegen und die Funktionen optimal zu nutzen.

Wie man anfängt

1. Zugang zur Website
   Öffnen Sie Ihren Browser und geben Sie die URL https://signs-ai.com/ ein, um die Startseite aufzurufen. Sie werden zwei Hauptoptionen sehen: Lernen und Beitragen. Sie können einen Teil der Inhalte auch ohne Registrierung ansehen, aber es wird empfohlen, ein Konto zu erstellen, um die volle Funktionalität freizuschalten.
2. Ein Konto erstellen
   Klicken Sie auf die Schaltfläche "Anmelden" in der oberen rechten Ecke und geben Sie Ihre E-Mail-Adresse und Ihr Passwort ein, um Ihre Registrierung abzuschließen. Nach der Registrierung können Sie sich anmelden, um Ihren Fortschritt zu speichern und Videos hochzuladen.
3. Anforderungen an die Ausrüstung
   Stellen Sie sicher, dass Ihr Gerät mit einer Kamera (für Echtzeit-Feedback) und einer stabilen Internetverbindung ausgestattet ist. Für ein optimales Erlebnis wird ein Desktop oder Laptop empfohlen. Mobiltelefone können ebenfalls verwendet werden, aber der kleinere Bildschirm kann die Bedienung beeinträchtigen.

Hauptfunktionen

1. amerikanische Gebärdensprache lernen (Lernmodul)

• Gehen Sie zur Lernseite
  Klicken Sie auf der Startseite auf "Lernen", um die Gebärdensprachlernoberfläche aufzurufen. Gängige ASL-Wörter wie "Hallo" und "Familie" werden hier gezeigt.
• 3D-Kopfschuss-Demonstration ansehen
  Wählen Sie eine Vokabel aus, und das System zeigt einen 3D-Avatar an, der die Gebärdenbewegungen für diese Gebärdensprache demonstriert. Sie können aus verschiedenen Blickwinkeln zusehen, um sicherzustellen, dass Sie die Details jeder Handhaltung verstehen.
• Üben und Feedback einholen
  Schalten Sie die Kamera ein, richten Sie sie auf Ihre Hände und ahmen Sie die Gesten des 3D-Avatars nach. Die KI analysiert Ihre Bewegungen in Echtzeit und gibt Ihnen ein Feedback auf dem Bildschirm. Wenn Sie z. B. Ihre Finger falsch positionieren, erscheint eine Aufforderung: "Bitte heben Sie den kleinen Finger" oder "Ihre Handfläche sollte nach links zeigen". Wir empfehlen, in einer ruhigen, gut beleuchteten Umgebung zu üben, um die Erkennungsgenauigkeit zu verbessern.
• erweiterte Studie
  Die Plattform bietet ein abgestuftes Lernmodell, dessen Schwierigkeitsgrad von Anfängervokabeln bis hin zu komplexen Sätzen progressiv ansteigt. Nach Abschluss jeder Stufe können weitere Inhalte für Langzeitlerner freigeschaltet werden.

2) Videos in Gebärdensprache beisteuern (Modul Contribute)

• Zur Contribute-Seite gehen
  Klicken Sie auf der Startseite auf "Beitragen", um den Bildschirm zum Hochladen von Videos aufzurufen. Hier finden Sie eine Liste von Wörtern, die derzeit von der Plattform verlangt werden, z. B. "Liebe" oder "Schule".
• Videoaufzeichnung
  Klicken Sie auf die Schaltfläche "Aufnehmen" neben dem Zielvokabular und das System aktiviert die Kamera. Folgen Sie den Anweisungen, um die entsprechende Gebärdenbewegung auszuführen und ein 3-5 Sekunden langes Video aufzunehmen. Nach der Aufnahme können Sie das Video in der Vorschau ansehen, um sicherzustellen, dass die Aktion deutlich sichtbar ist.
• Einreichung und Validierung
  Klicken Sie auf "Senden", um Ihr Video hochzuladen. Alle Einsendungen werden von gehörlosen und zertifizierten Dolmetschern auf ihre Richtigkeit überprüft. Nach der Überprüfung wird Ihr Video dem Datensatz hinzugefügt und Sie erhalten eine Dankesnachricht.
• caveat
  Achten Sie bei der Aufnahme auf einen einfachen Hintergrund, vermeiden Sie eine Verdeckung der Hände und stellen Sie sicher, dass die Bewegungen ASL-konform sind. Die Plattform stellt ein Demonstrationsvideo als Referenz zur Verfügung.

3. vertiefte Nutzung des Echtzeit-Feedback-Systems

• Einstellen des Kamerawinkels
  Achten Sie darauf, dass sich beide Hände in der Mitte des Bildes befinden, wenn Sie lernen oder aufnehmen. Wenn die KI-Erkennung fehlschlägt, passen Sie die Höhe oder den Abstand der Kamera an, in der Regel ist ein Abstand von 50-80 cm angemessen.
• Verständnis für Feedback-Vorschläge
  Das Feedback beschränkt sich nicht auf Text, sondern manchmal wird auch eine grüne (richtig) oder rote (falsch) visuelle Markierung angezeigt. Wiederholen Sie die Übung, bis das grüne Licht aufleuchtet und anzeigt, dass die Geste vollständig korrekt ist.
• Optimierung der Erfahrung
  Wenn die Rückmeldung verzögert ist, überprüfen Sie die Netzwerkgeschwindigkeit oder reduzieren Sie die Bildschirmauflösung. Die Plattform unterstützt das manuelle Umschalten der Schärfe zur Anpassung an unterschiedliche Geräteleistungen.

Ausgewählte Funktionen Operation Details

• 3D-Avatar Interaktiv
  Klicken Sie auf den Avatar, um die Geste anzuhalten, zu drehen oder zu vergrößern, um die Details der Geste genauer zu betrachten. Anfänger können die Geste mit der Slow-Play-Funktion schrittweise nachahmen.
• Bedeutung der Beiträge des Datensatzes
  Jedes hochgeladene Video half der Plattform, Daten zu sammeln, die schließlich in einer Zieldatenbank mit 400.000 Videoclips gipfelten. Dies unterstützt nicht nur das individuelle Lernen, sondern fördert auch den Einsatz von KI-Technologie im Bereich der Gehörlosigkeit, z. B. bei der Erkennung von Gebärdensprache in Videokonferenzen.
• Beteiligung der Gemeinschaft
  Die Seite wird regelmäßig mit einer Rangliste der Beiträge aktualisiert, um aktive Nutzer vorzustellen. Sie können auch Lernerfahrungen mit anderen austauschen oder Vorschläge im Forumbereich machen.

Tipps für die Verwendung

• Ratschläge für Anfänger
  Beginnen Sie mit dem Grundwortschatz und üben Sie täglich 10 Minuten, um sich allmählich mit den Zeichenmustern vertraut zu machen.
• Vorschläge für Video-Uploader
  Überprüfen Sie das Demonstrationsvideo vor der Aufzeichnung, um sicherzustellen, dass die Bewegungen standardisiert sind und um sich wiederholende Änderungen zu vermeiden.
• Technische Unterstützung
  Wenn Sie Fragen haben, können Sie eine E-Mail an "Contact Us" unten auf der Website senden, und das Team wird innerhalb von 48 Stunden antworten.

Mit den oben genannten Schritten können Sie die Kernfunktionen von Signs-ai leicht beherrschen, um Ihre ASL-Kenntnisse zu verbessern und gleichzeitig einen Beitrag zur Gemeinschaft zu leisten. Die Website ist einfach und intuitiv, geeignet für Benutzer aller Altersgruppen, insbesondere für Familien mit gehörlosen Kindern oder für Gebärdensprachenthusiasten, sie ist eine unverzichtbare Plattform zum Lernen und Teilen.