CYAN.AI (Cyan Puppet Technology): großes Modell zur Erzeugung von Aktionen, KI-Plattform zur Erzeugung von 3D-Aktionsdaten aus 2D-Video

Allgemeine Einführung

Cyanpuppets Technology (Cyanpuppets) ist ein führendes KI-Technologieunternehmen, das sich auf die Generierung von 3D-Bewegungsdaten aus 2D-Videos mittels Convolutional Neural Network (CNN) und Deep Neural Network (DNN) Algorithmen konzentriert. Sein Kernprodukt, die CYAN.AI Plattform, ist in der Lage, Gesichts-, Ausdrucks- und Körperbewegungen mit hoher Präzision zu erfassen und ist in einer Vielzahl von Bereichen wie Animationsproduktion, Spieleentwicklung und virtuellem sozialem Networking einsetzbar. Die Plattform macht das Tragen von komplexer Ausrüstung überflüssig, unterstützt Echtzeit-Bewegungserfassung mit extrem niedriger Latenz und hoher Präzision und findet breite Anwendung in den Bereichen Bildung, Unterhaltung, Medizin und anderen Branchen.

Funktionsliste

• 2D-Video zur Erzeugung von 3D-BewegungsdatenVerwendung von KI-Algorithmen zur Extraktion von Schlüsselmerkmalen menschlicher Bewegungen aus 2D-Videos, um hochpräzise 3D-Bewegungsdaten zu erzeugen.
• Hochpräzise BewegungserfassungErfassen von 208 Schlüsselpunkten, darunter 140 Punkte im Gesicht, 21 Punkte an den Fingern und 30 Punkte an den Gliedmaßen.
• Echtzeit-RenderingErzielen Sie eine Latenz von nur 0,1 Sekunden für eine reibungslose Bewegungserfassung in Echtzeit.
• Multiplattform-KompatibilitätUnterstützung von Metahuman, Unreal Skeleton Asset, Daz, CC4, iClone, Unity Avatar und anderen wichtigen Modellbonesystemen.
• Ein-Klick-ExportUnterstützt den Ein-Klick-Export von FBX-Daten zur einfachen Nachbearbeitung und Anwendung.
• Automatische KalibrierungAutomatisches Erkennen und Durchdringen von Personen, Hintergründen und Hindernissen, Anpassung an komplexe Umgebungen.

Hilfe verwenden

Einbauverfahren

1. Software herunterladenBesuchen Sie die offizielle Website von Cyan Puppet Technology, um das Installationspaket für die CYAN.AI-Plattform herunterzuladen.
2. Installation der SoftwareFühren Sie das Installationspaket aus und folgen Sie den Anweisungen, um die Installation abzuschließen.
3. Registrieren Sie sich für ein KontoNach dem Starten der Software registrieren Sie sich und melden Sie sich bei Ihrem Konto an.
4. Konfigurieren des GerätsSchließen Sie eine unterstützte Kamera oder Industriekamera für die Gerätekonfiguration an.

Verwendungsprozess

1. Startup-SoftwareÖffnen Sie die CYAN.AI Plattform und wählen Sie "Neues Projekt".
2. Video importierenImportieren Sie 2D-Videodateien in die Software. Das System erkennt und verarbeitet die Videoinhalte automatisch.
3. Einstellung der ParameterStellen Sie die Aufnahmeparameter wie Bildrate, Auflösung usw. nach Bedarf ein.
4. Erfassen beginnenKlicken Sie auf die Schaltfläche "Start Capture" und das System erzeugt 3D-Bewegungsdaten in Echtzeit.
5. Daten exportierenNachdem die Erfassung abgeschlossen ist, klicken Sie auf die Schaltfläche "One Click Export", um die generierten FBX-Daten in einen lokalen Ordner zu exportieren.

Detaillierte Funktionsweise

• GesichtserkennungHochpräzise Erfassung der Mimik durch 140 Gesichtspunkte für die virtuelle Sozial- und Animationsproduktion.
• Fingerabdruck: 21 Fingertastenpunkte zur präzisen Erfassung von Handbewegungen für fein manipulierte Animationsszenen.
• Körpererfassung30 Gliedmaßen-Keypoints zur vollständigen Erfassung menschlicher Bewegungen für die Spieleentwicklung und Bewegungsanalyse.
• Automatische KalibrierungDas System identifiziert und schneidet automatisch Personen, Hintergründe und Hindernisse aus, passt sich an komplexe Umgebungen an und gewährleistet eine hohe Aufnahmegenauigkeit.
• Multiplattform-KompatibilitätUnterstützung für Mainstream-Modellierungsskelettsysteme zur einfachen Integration in andere Software und Plattformen.
• Echtzeit-RenderingNiedrige Latenz von 0,1 Sekunden für eine reibungslose Echtzeit-Bewegungserfassung bei Echtzeit-Interaktionen und Live-Streaming-Szenarien.