Projekt Mariner: Browser-Automatisierung, ein Forschungsprototyp zur Erforschung der Zukunft der Mensch-Computer-Interaktion (unveröffentlicht)

Allgemeine Einführung

Project Mariner ist ein Forschungsprototyp, der von Google DeepMind ins Leben gerufen wurde, um die Zukunft der Interaktion zwischen Mensch und Computer zu erforschen. Das Projekt nutzt Zwillinge 2.0 Leistungsstarke multimodale Verstehens- und Argumentationsfähigkeiten zur Durchführung einer Vielzahl von Aufgaben durch Browser-Automatisierung Das Projekt Mariner ist in der Lage, komplexe Websites in Echtzeit zu verstehen und zu navigieren und Aufgaben im Browser zu automatisieren, ohne dass der Benutzer die Kontrolle verliert. Das Projekt steht derzeit nur einer kleinen Gruppe von vertrauenswürdigen Betatestern zur Verfügung, um seine Funktionalität zu testen und zu verbessern.

Funktionsliste

• multimodales VerständnisVerstehen Sie alles, was auf dem Browserbildschirm zu sehen ist, einschließlich Pixel, Text, Code, Bilder und Formulare.
• Browser-InteraktionAutomatisches Navigieren und Bedienen der Website, Ausführen von Benutzerbefehlen.
• logisches DenkvermögenFähigkeit, komplexe Anweisungen zu verstehen und sie in ausführbare Schritte zu zerlegen.
• Feedback in Echtzeit: Geben Sie visuelles Feedback und Aktualisierungen, wenn Aufgaben ausgeführt werden.
• SicherheitskontrolleBenutzerverwaltung: Behält die Benutzerkontrolle und gewährleistet die Sicherheit bei der Ausführung von Aufgaben.

Hilfe verwenden

Ablauf der Installation

1. Erweiterungen herunterladenBesuchen Sie die offizielle Website von Project Mariner, um die Chrome-Erweiterung herunterzuladen und zu installieren.
2. Einrichten eines KontosSobald die Installation abgeschlossen ist, öffnen Sie Chrome, klicken Sie auf das Symbol der Erweiterung und folgen Sie den Anweisungen, um Ihr Konto einzurichten und sich anzumelden.
3. Treten Sie der Tester-Warteschlange beiFüllen Sie die relevanten Informationen aus, um sich für die Warteschlange der vertrauenswürdigen Tester anzumelden.

Verwendung Prozess

1. Starten von ErweiterungenNach dem Einloggen klicken Sie auf das Erweiterungssymbol in der oberen rechten Ecke Ihres Browsers, um Project Mariner zu starten.
2. EingabeEingabe von Befehlen wie "Warenkorb erstellen" oder "Flüge suchen" in das Pop-up-Chatfenster.
3. betreiben.Project Mariner navigiert automatisch zu der entsprechenden Website und führt die Aufgabe aus. Der Benutzer kann den Fortschritt der Aufgabe in Echtzeit im Browser verfolgen.
4. Rückmeldungen und AnpassungenWenn Project Mariner weitere Informationen benötigt oder auf ein Problem stößt, bittet es den Benutzer in einem Chat-Fenster um Feedback. Der Benutzer kann zusätzliche Anweisungen geben oder Aufgaben nach Bedarf anpassen.

Hauptfunktionen

• Einkaufswagen erstellenGeben Sie Ihre Einkaufsliste ein, und Project Mariner navigiert automatisch zu Einkaufsseiten, sucht nach Artikeln und legt sie in Ihren Einkaufswagen.
• Flüge und Hotels findenGeben Sie Ihre Reisedaten und Ihr Reiseziel ein, und Project Mariner sucht automatisch nach relevanten Flug- und Hotelinformationen und zeigt diese an.
• Rezepte findenGeben Sie den Namen einer Zutat oder eines Gerichts ein, und Project Mariner sucht automatisch nach dem Rezept und zeigt es an.

Ausgewählte Funktionen

• multimodales VerständnisProject Mariner ist in der Lage, eine Vielzahl von Elementen auf dem Browserbildschirm zu verstehen und zu verarbeiten, darunter Text, Bilder und Formulare.
• Feedback in EchtzeitWährend der Ausführung einer Aufgabe bietet Project Mariner visuelles Feedback in Echtzeit, um sicherzustellen, dass der Benutzer über den Fortschritt der Aufgabe informiert ist.
• SicherheitskontrolleProject Mariner behält bei der Durchführung von Aufgaben die Kontrolle über den Benutzer und gewährleistet die Sicherheit und Genauigkeit der Aufgabe.

Der Leitfaden für Laien zum Einstieg in die KI

Hilft Ihnen, die Nutzung von KI-Tools kostengünstig und von Null an zu erlernen.KI ist, wie Bürosoftware, eine wesentliche Fähigkeit für jeden. Die Beherrschung von KI verschafft Ihnen einen Vorteil bei der Stellensuche und die Hälfte des Aufwands bei Ihrer zukünftigen Arbeit und Ihrem Studium.

Details ansehen>