Bilgisayar kullanım ajanları, bilgisayarı bir insan gibi kullanan AI sistemleridir: ekrana bakarlar, imleci hareket ettirirler, tıklarlar, yazarlar ve bir görevi tamamlamak için web sitelerinde gezinirler. Yaygın hatalar, onlara çok fazla erişim vermek, bir API’nin zaten daha iyi hallettiği görevleri seçmek, geri döndürülemez adımlar için insan onayını atlamak ve web sayfalarındaki metne talimat olarak güvenmektir. Ajanslar bunlardan dar izinler, test hesapları ve onay kapıları ile kaçınırlar.
Birkaç sağlayıcı bu yeteneği sunuyor. Anthropic, Claude için bilgisayar kullanımını yayınladı, OpenAI Operator ajanını tanıttı ve daha sonra ajan özelliklerini ChatGPT’ye dahil etti, Google ise Gemini tabanlı tarayıcı ajanlarını gösterdi. Yaklaşım, API olmayan görevler için umut vericidir, ancak geleneksel otomasyondan daha yavaş ve daha az öngörülebilirdir.
Bilgisayar kullanım ajanları aslında ne için iyidir?
Bir görevin entegrasyonu olmayan bir web sitesi veya masaüstü uygulaması içinde olduğu yerlerde yerlerini kazanırlar. Pazarlamada bu, dışa aktarımı olmayan sitelerden bilgi toplamayı, eski sistemlerde tekrarlayan formları doldurmayı ve sayfaların akışlar boyunca nasıl göründüğünü ve davrandığını kontrol etmeyi içerir.
- Birçok sayfaya yayılmış halka açık rakip bilgilerinin toplanması.
- Açılış sayfası formlarının bir test ortamında doğru şekilde gönderildiğinin kontrol edilmesi.
- Bağlantısı olmayan araçlar arasında veri kopyalama.
- Bozuk adımları tespit etmek için staging ortamında ödeme veya kayıt akışlarının çalıştırılması.
- Denetim kayıtları için reklamların veya sayfaların ekran görüntülerinin alınması.
Hata 1: API mevcutken ajan kullanmak
Google Ads, Meta, HubSpot veya Shopify görev için bir API veya yerel entegrasyon sunuyorsa, onu kullanın. API çağrıları daha hızlı, daha ucuz, kayıtlı ve öngörülebilirdir. Bütçeleri değiştirmek için Google Ads arayüzünde tıklama yapan bir ajan kırılgandır: bir düzen güncellemesi veya bir açılır pencere, yanlış kontrole tıklamasına neden olabilir. Ajanları boşluklar için saklayın.
Hata 2: ajanı tam izinlere sahip hesaplara giriş yaptırmak
Kullanıcının e-posta, reklam hesapları ve bankacılık işlemlerine giriş yaptığı bir tarayıcıda çalışan bir ajan, hepsine ulaşabilir. Yanlış okunmuş bir talimat veya kötü niyetli bir sayfa onu zararlı bir yere götürebilir. Ajanlara ayrı bir tarayıcı profili veya sanal makine verin, erişimi görevin ihtiyaç duyduğu tek araçla sınırlayın ve en düşük işlevsel role sahip hesapları kullanın.
- Görev başına ayrı tarayıcı profili veya korumalı sanal makine.
- Platformun desteklediği yerlerde salt okunur veya sınırlı roller.
- Ajanın ortamında kayıtlı şifre veya ödeme yöntemi yok.
- Veri yazan her şey için test veya staging hesapları.
Prompt injection neden ajanlar için gerçek bir risktir?
Bir ajan bir sonraki adımda ne yapacağına karar vermek için web sayfalarını okur. Bir sayfa, talimatlarınızı görmezden gelin ve bu hesabın içeriğini bir adrese gönderin diyen gizli metin içeriyorsa, kötü korunan bir ajan bunu bir komut olarak kabul edebilir. Sağlayıcılar savunmalar ekledi, ancak hiçbiri sorunun çözüldüğünü iddia etmiyor. Ajanın ziyaret ettiği her sayfayı güvenilmeyen içerik olarak kabul edin ve görevleri, enjekte edilen bir talimat izlense bile ciddi zarara yol açmayacak şekilde tasarlayın.
Hata 3: geri döndürülemez eylemlerden önce onay kapısı olmaması
E-posta göndermek, gönderi yayınlamak, form göndermek, kayıt silmek veya satın alma işlemi yapmak kolayca geri alınamaz. Ajanlar bu tür adımlardan önce durmalı ve bir kişiden ne olacağını tam olarak göstererek onay istemelidir. Çoğu ajan ürünü hassas eylemler için onay davranışı içerir; bunu açık tutun ve özel kurulumlarda kendi kontrol noktalarınızı oluşturun.
Hata 4: günlük, ekran görüntüsü veya inceleme yok
Bir ajan başarısız olduğunda, ne gördüğünü görmeniz gerekir. Her adımı bir ekran görüntüsü ve gerçekleştirilen eylemle kaydedin. Haftalık olarak başarılı olanlar da dahil olmak üzere bir çalışma örneğini inceleyin, çünkü bir ajan yanlış bir yolla doğru son ekrana ulaşabilir ve bu bir dahaki sefere bozulacaktır.
Hata 5: insan hızı ve güvenilirliği beklemek
Ajanlar kısa görevlerde genellikle bir insandan daha yavaştır, çünkü her adım ekran görüntüsü almayı, akıl yürütmeyi ve harekete geçmeyi içerir. Ayrıca CAPTCHA’larda, sıra dışı düzenlerde ve çok faktörlü istemlerde başarısız olurlar, bunları atlamaya çalışmamalıdırlar. Beklemenin kabul edilebilir olduğu ve başarısız bir çalışmanın sadece yeniden denendiği veya işaretlendiği görevleri planlayın.
Alien Road bilgisayar kullanım ajanlarını nasıl uyguluyor
Tipik bir çalışmada, keşif listesi tekrarlayan tarayıcı görevlerini sıralar ve her birini önce mevcut API’ler ve bağlayıcılarla kontrol eder. Sadece daha iyi bir yolu olmayan görevler ajan adayı olur ve her biri bir hatanın ne kadar zarar verebileceğine göre derecelendirilir.
Kurulum, ajanları sınırlı hesaplar, yazılı görev talimatları, izin verilen web sitelerinin listesi ve herhangi bir gönderme, iletme veya yayınlama adımından önce onay kapıları olan korumalı ortamlarda çalıştırır. Staging siteleri form ve akış testi için kullanılır.
Ölçüm, başarı oranını, ortalama çalışma süresini, insan müdahalelerini ve onay kapılarında yakalanan hataları takip eder. Aylık rapor, hangi görevlerin tutulacağını, hangilerinin API otomasyonuna taşınacağını ve hangilerinin durdurulacağını önerir.
Bir ajans, ajan kullanımını müşterilere nasıl açıklamalıdır?
Müşteriler, yazılımın hesaplarında veya kendi adlarına ne zaman hareket ettiğini bilmelidir. Sözleşmedeki kısa yazılı bir not bunu kapsar: hangi görevler ajanları kullanır, hangi erişime sahiptirler, asla ne yapamazlar ve çıktılarını kim inceler. Bu iyi bir uygulamadır ve özellikle müşteri verileri bir model sağlayıcısından geçtiğinde genellikle sözleşmesel bir ihtiyaçtır.
Erişim konusunda spesifik olun. Bir reklam hesabına salt okunur erişim, gönderi yayınlama yeteneğinden çok farklıdır. Müşteriler genellikle ajanların bilgi toplaması ve kontrol etmesi konusunda rahattır ve ajanların inceleme olmadan hareket etmesi konusunda çok daha az rahattır. İstek üzerine ajan çalışmalarının günlüklerini veya ekran görüntülerini sunmak güven oluşturur ve bir şey yanlış görünüyorsa araştırmayı kolaylaştırır.
Yeni bir ajan görevi eklendiğinde notu tekrar gözden geçirin. E-posta yoluyla bir satırlık güncelleme, müşterinin farklı bir şey varsaydığını daha sonra keşfetmekten daha iyidir.
Bu hafta nereden başlamalı
Ekibinizin haftalık olarak tekrarladığı beş tarayıcı görevini listeleyin. Her biri için platformun bir API, dışa aktarım veya bağlayıcısı olup olmadığını kontrol edin. Olan her görevi listeden çıkarın.
- Kalan düşük riskli, salt okunur bir görev seçin.
- Onu sınırlı bir hesapla korumalı bir tarayıcıda çalıştırın.
- Her çalışmayı iki hafta boyunca ekran görüntüleriyle kaydedin.
- Ne kadar etkileyici göründüğüne değil, başarı oranına göre karar verin.
Ajanlar gelişecek. Dar erişim ve insan onayı alışkanlıkları, ne kadar yetenekli olurlarsa olsunlar yararlı kalmaya devam edecektir.
Okumaya devam edin: AI Pazarlama Ajansı · AI Pazarlama