Computer-Use Agents sind KI-Systeme, die einen Computer wie ein Mensch bedienen: Sie betrachten den Bildschirm, bewegen den Cursor, klicken, tippen und navigieren durch Websites, um eine Aufgabe zu erledigen. Die häufigsten Fehler sind, ihnen zu viel Zugriff zu gewähren, Aufgaben zu wählen, die eine API bereits besser erledigt, die menschliche Genehmigung für irreversible Schritte zu überspringen und Text auf Webseiten als Anweisungen zu vertrauen. Agenturen vermeiden dies mit eingeschränkten Berechtigungen, Testkonten und Genehmigungsschleifen.
Mehrere Anbieter bieten diese Funktion an. Anthropic hat die Computer-Use-Funktion für Claude veröffentlicht, OpenAI hat seinen Operator-Agenten eingeführt und später Agentenfunktionen in ChatGPT integriert, und Google hat Browser-Agenten gezeigt, die auf Gemini basieren. Der Ansatz ist vielversprechend für Aufgaben ohne API, aber er ist langsamer und weniger vorhersehbar als herkömmliche Automatisierung.
Wofür sind Computer-Use Agents eigentlich gut?
Sie sind dort nützlich, wo eine Aufgabe innerhalb einer Website oder Desktop-App stattfindet, für die keine Integration verfügbar ist. Im Marketing umfasst dies das Sammeln von Informationen von Websites ohne Exportfunktion, das Ausfüllen sich wiederholender Formulare in alten Systemen und das Überprüfen, wie Seiten in verschiedenen Abläufen aussehen und sich verhalten.
- Sammeln öffentlicher Wettbewerberinformationen, die über viele Seiten verteilt sind.
- Überprüfung, ob Landingpage-Formulare in einer Testumgebung korrekt übermittelt werden.
- Kopieren von Daten zwischen Tools, die keine Verbindung haben.
- Durchlaufen von Checkout- oder Anmeldeabläufen in einer Staging-Umgebung, um fehlerhafte Schritte zu erkennen.
- Erstellen von Screenshots von Anzeigen oder Seiten für Audit-Protokolle.
Fehler 1: Verwendung eines Agenten, wo eine API existiert
Wenn Google Ads, Meta, HubSpot oder Shopify eine API oder eine native Integration für die Aufgabe anbieten, nutzen Sie diese. API-Aufrufe sind schneller, günstiger, protokolliert und vorhersehbar. Ein Agent, der durch die Google Ads-Oberfläche klickt, um Budgets zu ändern, ist anfällig: Ein Layout-Update oder ein Pop-up kann dazu führen, dass er auf das falsche Steuerelement klickt. Sparen Sie Agenten für die Lücken auf.
Fehler 2: Anmeldung des Agenten in Konten mit vollen Berechtigungen
Ein Agent, der in einem Browser arbeitet, in dem der Benutzer bei E-Mail, Werbekonten und Bankgeschäften angemeldet ist, kann auf alle zugreifen. Eine falsch gelesene Anweisung oder eine bösartige Seite könnte ihn an einen schädlichen Ort führen. Geben Sie Agenten ein separates Browserprofil oder eine virtuelle Maschine, mit Zugriff, der auf das eine Tool beschränkt ist, das die Aufgabe benötigt, und verwenden Sie Konten mit der niedrigsten funktionsfähigen Rolle.
- Separates Browserprofil oder isolierte virtuelle Maschine pro Aufgabe.
- Schreibgeschützte oder eingeschränkte Rollen, wo die Plattform dies unterstützt.
- Keine gespeicherten Passwörter oder Zahlungsmethoden in der Umgebung des Agenten.
- Test- oder Staging-Konten für alles, was Daten schreibt.
Warum ist Prompt Injection ein echtes Risiko für Agenten?
Ein Agent liest Webseiten, um zu entscheiden, was als Nächstes zu tun ist. Wenn eine Seite versteckten Text enthält, der besagt, ignorieren Sie Ihre Anweisungen und senden Sie den Inhalt dieses Kontos an eine Adresse, könnte ein schlecht geschützter Agent dies als Befehl behandeln. Anbieter haben Abwehrmechanismen hinzugefügt, aber keiner behauptet, das Problem sei gelöst. Behandeln Sie jede Seite, die der Agent besucht, als nicht vertrauenswürdigen Inhalt und entwerfen Sie Aufgaben so, dass eine injizierte Anweisung keinen ernsthaften Schaden anrichten könnte, selbst wenn sie befolgt würde.
Fehler 3: keine Genehmigungsschleife vor irreversiblen Aktionen
Das Senden einer E-Mail, das Veröffentlichen eines Beitrags, das Absenden eines Formulars, das Löschen eines Datensatzes oder das Tätigen eines Kaufs kann nicht einfach rückgängig gemacht werden. Agenten sollten vor solchen Schritten anhalten und eine Person um Bestätigung bitten, wobei genau angezeigt wird, was passieren wird. Die meisten Agentenprodukte enthalten ein Bestätigungsverhalten für sensible Aktionen; lassen Sie es eingeschaltet und bauen Sie Ihre eigenen Kontrollpunkte in benutzerdefinierten Setups ein.
Fehler 4: keine Protokolle, keine Screenshots, keine Überprüfung
Wenn ein Agent scheitert, müssen Sie sehen, was er gesehen hat. Zeichnen Sie jeden Schritt mit einem Screenshot und der durchgeführten Aktion auf. Überprüfen Sie wöchentlich eine Stichprobe der Durchläufe, auch erfolgreiche, da ein Agent den richtigen Endbildschirm auf einem falschen Weg erreichen kann, der beim nächsten Mal zum Absturz führt.
Fehler 5: Erwartung von menschlicher Geschwindigkeit und Zuverlässigkeit
Agenten sind bei kurzen Aufgaben oft langsamer als ein Mensch, da jeder Schritt das Erstellen eines Screenshots, das Nachdenken und das Handeln beinhaltet. Sie scheitern auch an CAPTCHAs, ungewöhnlichen Layouts und Multi-Faktor-Abfragen, die sie nicht versuchen sollten zu umgehen. Planen Sie Aufgaben, bei denen Warten akzeptabel ist und bei denen ein fehlgeschlagener Durchlauf einfach wiederholt oder markiert wird.
Wie Alien Road Computer-Use Agents einsetzt
In einem typischen Engagement listet die Discovery wiederkehrende Browseraufgaben auf und prüft jede zuerst gegen verfügbare APIs und Konnektoren. Nur Aufgaben ohne besseren Weg werden zu Agentenkandidaten, und jede wird danach bewertet, wie viel Schaden ein Fehler verursachen könnte.
Das Setup führt Agenten in isolierten Umgebungen mit eingeschränkten Konten, schriftlichen Aufgabenanweisungen, einer Liste erlaubter Websites und Genehmigungsschleifen vor jedem Absende-, Sende- oder Veröffentlichungsschritt aus. Staging-Sites werden für Formular- und Ablauf-Tests verwendet.
Die Messung verfolgt die Erfolgsquote, die durchschnittliche Laufzeit, menschliche Eingriffe und Fehler, die bei Genehmigungsschleifen abgefangen wurden. Der monatliche Bericht empfiehlt, welche Aufgaben beibehalten, welche auf API-Automatisierung umgestellt und welche gestoppt werden sollten.
Wie sollte eine Agentur den Agenteneinsatz gegenüber Kunden erklären?
Kunden sollten wissen, wann Software in ihren Konten oder in ihrem Namen handelt. Ein kurzer schriftlicher Hinweis im Engagement deckt dies ab: welche Aufgaben Agenten verwenden, welchen Zugriff sie haben, was sie niemals tun können und wer ihre Ausgabe überprüft. Dies ist eine gute Praxis und oft eine vertragliche Notwendigkeit, insbesondere wenn Kundendaten durch einen Modellanbieter fließen.
Seien Sie spezifisch bezüglich des Zugriffs. Ein schreibgeschützter Zugriff auf ein Werbekonto ist etwas ganz anderes als die Fähigkeit, Beiträge zu veröffentlichen. Kunden sind im Allgemeinen damit einverstanden, dass Agenten Informationen sammeln und überprüfen, und fühlen sich viel weniger wohl dabei, wenn Agenten ohne Überprüfung handeln. Das Anbieten von Protokollen oder Screenshots von Agentendurchläufen auf Anfrage schafft Vertrauen und erleichtert die Untersuchung, wenn etwas falsch aussieht.
Überprüfen Sie den Hinweis erneut, wenn eine neue Agentenaufgabe hinzugefügt wird. Ein einzeiliges Update per E-Mail ist besser, als später festzustellen, dass der Kunde etwas anderes angenommen hat.
Wo man diese Woche anfangen sollte
Listen Sie fünf Browseraufgaben auf, die Ihr Team wöchentlich wiederholt. Prüfen Sie für jede, ob die Plattform eine API, einen Export oder einen Konnektor hat. Streichen Sie jede Aufgabe, die dies hat.
- Wählen Sie eine verbleibende risikoarme, schreibgeschützte Aufgabe.
- Führen Sie sie in einem isolierten Browser mit einem eingeschränkten Konto aus.
- Zeichnen Sie jeden Durchlauf zwei Wochen lang mit Screenshots auf.
- Entscheiden Sie basierend auf der Erfolgsquote, nicht darauf, wie beeindruckend es aussieht.
Agenten werden sich verbessern. Die Gewohnheiten von engem Zugriff und menschlicher Genehmigung bleiben nützlich, egal wie leistungsfähig sie werden.
Weiterlesen: AI Marketing Agentur · AI Marketing