Computer-Use-Agents sind KI-Modelle, die einen Computer oder Browser wie ein Mensch bedienen: Sie betrachten den Bildschirm, bewegen den Cursor, klicken, tippen und lesen das Ergebnis. Anthropic’s Claude Computer Use, OpenAI’s Operator und der Agent-Modus in ChatGPT sowie Googles Project Mariner sind Beispiele. Alien Road nutzt sie für wiederkehrende Prüfungen auf Websites und Werbeplattformen, immer mit eingeschränkten Berechtigungen und menschlicher Freigabe für Änderungen.
Sie sind nützlich, weil vielen Marketing-Tools eine API für die benötigte Aufgabe fehlt oder die API nicht zeigt, was ein Kunde sieht. Ein Agent, der die Benutzeroberfläche nutzt, kann diese Lücke schließen.
Wie funktionieren Computer-Use-Agents?
Der Agent erhält ein Ziel in natürlicher Sprache. Er macht einen Screenshot, entscheidet über die nächste Aktion, führt sie per Maus- und Tastaturbefehl aus, macht einen weiteren Screenshot und wiederholt den Vorgang. Einige laufen in einem Cloud-Browser des Anbieters; andere laufen in einer virtuellen Maschine oder einem Container, den Sie kontrollieren.
Diese Schleife ist langsamer als ein API-Aufruf und weniger vorhersehbar. Eine Seite, die spät lädt, ein Pop-up oder eine Layoutänderung können den Agenten in die Irre führen. Deshalb sind Aufgabenwahl und Überwachung wichtig.
Welche Kampagnenaufgaben eignen sich für Computer-Use-Agents?
- Landingpage-QA: Ausfüllen von Formularen mit Testdaten, Überprüfung von Bestätigungsseiten und Dankeschön-Events
- Überprüfung, wie Anzeigen und Produktlisten in Suchergebnissen und Marktplätzen aus einer sauberen Sitzung heraus erscheinen
- Wettbewerber-Monitoring: Besuch von Preisseiten und Notieren von Änderungen
- Sammeln von Daten von Plattform-Bildschirmen, die keine Exportoption haben
- Durchlaufen eines Checkouts, um nach einem Website-Update defekte Schritte zu finden
All dies sind Aufgaben, die hauptsächlich aus Lesen bestehen und deren Ergebnis ein Mensch verifizieren kann. Aufgaben, die Geld kosten, Inhalte veröffentlichen oder Nachrichten senden, bleiben bei Menschen oder werden über APIs mit strengen Limits abgewickelt.
Warum nicht einfach eine API oder ein Skript verwenden?
Wo eine API existiert und die Aufgabe abdeckt, ist sie die bessere Wahl: schneller, billiger und einfacher zu protokollieren. Herkömmliche Browser-Automatisierung mit Playwright oder Selenium ist auch zuverlässiger für feste, wiederholte Abläufe.
Computer-Use-Agents haben ihren Platz dort, wo sich der Ablauf häufig ändert, wo ein Skript bei jedem Redesign kaputt gehen würde oder wo die Aufgabe Urteilsvermögen erfordert, wie z. B. die Entscheidung, ob eine Seite auf Mobilgeräten defekt aussieht. In der Praxis nutzen wir oft einen Agenten, um einen Ablauf zu erkunden, und ein Skript, um ihn zu wiederholen, sobald er stabil ist.
Wie Alien Road Computer-Use-Agents anwendet
Discovery
In einem typischen Engagement listet unser Team die manuellen Prüfungen auf, die die Marketing- und Web-Teams des Kunden jede Woche durchführen, inklusive des Zeitaufwands und wie oft Fehler zu spät entdeckt werden. Gute Kandidaten sind Aufgaben, die langweilig, regelmäßig und visuell sind: jemand, der nach jedem Release Formulare durchklickt oder jeden Montag Wettbewerberseiten screenshotet.
Setup
Agents laufen in einer isolierten Browserumgebung mit Testkonten, niemals mit den persönlichen Logins des Kunden. Sie erhalten nur den Zugriff, den die Aufgabe erfordert, typischerweise eine Staging-Site oder Read-only-Ansichten. Wir schreiben die Aufgabe als kurze Checkliste mit expliziten Stopp-Bedingungen: Stoppen und melden, wenn ein Login erforderlich ist, wenn ein Zahlungsschritt erscheint oder wenn die Seite nach persönlichen Daten fragt.
Supervision
Jeder Lauf wird als Screenshot und Aktionsprotokoll aufgezeichnet. In den ersten Wochen überprüft eine Person jeden Lauf vollständig. Sobald die Ergebnisse konsistent mit manuellen Prüfungen übereinstimmen, verlagert sich die Überprüfung auf Ausnahmen: Läufe, die ein Problem markiert haben oder sich ungewöhnlich verhalten haben.
Reporting
Monatliche Berichte zeigen abgeschlossene Läufe, gefundene und bestätigte Probleme, Fehlalarme, eingesparte Zeit im Vergleich zu manuellen Prüfungen und Laufkosten. Ein defektes Formular, das am Morgen nach einem Release gefunden wird, bevor bezahlter Traffic darauf trifft, ist die Art von Ergebnis, die das Setup rechtfertigt.
Was sind die Risiken?
- Prompt Injection: Eine Webseite kann Text enthalten, der versucht, dem Agenten Anweisungen zu geben
- Falsche Klicks: Ein Agent kann ein Formular absenden oder Bedingungen akzeptieren, die er nicht sollte
- Datenexposition: Screenshots können persönliche oder vertrauliche Daten erfassen
- Nutzungsbedingungen: Einige Websites verbieten automatisierten Zugriff
- Kosten und Geschwindigkeit: Lange Aufgaben verbrauchen viele Modellaufrufe
Unsere Kontrollen adressieren jedes dieser Risiken: Seiteninhalte werden als Daten behandelt, irreversible Aktionen erfordern menschliche Freigabe, Umgebungen verwenden Testdaten, wir respektieren Robots-Regeln und Website-Bedingungen, und Läufe haben Schritt- und Kostenlimits.
Was bedeutet das für Ihre Website?
Computer-Use-Agents besuchen auch Websites im Auftrag von Nutzern, zum Beispiel um Produkte zu vergleichen oder Dienstleistungen zu buchen. Seiten mit klaren Beschriftungen auf Schaltflächen und Formularfeldern, Standard-HTML-Steuerelementen und ohne unnötige Pop-ups sind für diese Agenten einfacher zu nutzen, genau wie für Screenreader. Barrierefreiheitsarbeit und Agentenfreundlichkeit überschneiden sich stark.
Wie schneiden Computer-Use-Agents im Vergleich zur Browser-Automatisierung ab?
- Skripte (Playwright, Selenium): schnell, billig, wiederholbar; brechen, wenn sich das Seitenlayout ändert
- Computer-Use-Agents: passen sich an Änderungen an und handhaben Urteilsvermögen; langsamer, kosten mehr pro Lauf, weniger vorhersehbar
- APIs: am zuverlässigsten und billigsten, wo sie existieren; decken nur ab, was der Anbieter freigibt
- Manuelle Prüfungen: bestes Urteilsvermögen; teuer und leicht zu überspringen in arbeitsreichen Wochen
Ein sinnvolles Setup nutzt alle vier. APIs für Daten, Skripte für stabile Abläufe, Agents für sich ändernde oder urteilsintensive Prüfungen und Menschen für Entscheidungen und alles Irreversible.
Was enthält ein gutes Agenten-Aufgabenbriefing?
Agents befolgen Anweisungen wörtlich und füllen Lücken mit Vermutungen. Ein Briefing, das funktioniert, listet die Start-URL, die genauen Schritte, wie Erfolg bei jedem Schritt aussieht, welche Daten zu verwenden sind und wann zu stoppen ist. Es sagt auch, was der Agent niemals tun darf: echte Zahlungen absenden, Bedingungen akzeptieren, Kontoeinstellungen ändern oder Nachrichten senden.
Kurze Briefings mit nummerierten Schritten übertreffen lange, konversationelle. Wenn ein Lauf fehlschlägt, zeigt das Protokoll, welcher Schritt schief gelaufen ist, und das Briefing wird nur für diesen Schritt aktualisiert.
Wo man diese Woche anfangen sollte
Schreiben Sie jeden Schritt Ihres Haupt-Lead-Formulars oder Checkouts als nummerierte Liste auf, einschließlich der erwarteten Bestätigung. Gehen Sie es selbst auf Mobilgeräten und Desktop durch und stoppen Sie die Zeit. Diese Liste ist das Briefing für einen ersten Agententest, und das Stoppen der Zeit zeigt, wie viele Stunden manuelle QA pro Woche ein Agent ersetzen könnte.
Beginnen Sie mit einer Aufgabe und einer Website. Die Ausweitung auf mehrere Kunden oder Abläufe, bevor der erste stabil ist, vervielfacht den Überprüfungsaufwand und verbirgt, welches Briefing Fehler verursacht.
Weiterlesen: AI Marketing Agentur · AI Marketing