Bilgisayar kullanma ajanları, bir bilgisayarı veya tarayıcıyı bir insan gibi kullanan AI modelleridir: ekrana bakarlar, imleci hareket ettirirler, tıklarlar, yazarlar ve sonucu okurlar. Anthropic’in Claude bilgisayar kullanımı, OpenAI’ın Operator’ı ve ChatGPT’deki ajan modu ile Google’ın Project Mariner’ı buna örnektir. Alien Road bunları web siteleri ve reklam platformlarındaki tekrarlayan kontroller için, her zaman sınırlı izinlerle ve değişiklikler için insan onayıyla kullanır.
Bunlar yararlıdır çünkü birçok pazarlama aracında ihtiyacınız olan görev için bir API yoktur veya API bir müşterinin gördüğünü göstermez. Arayüzü kullanan bir ajan bu boşluğu doldurabilir.
Bilgisayar kullanma ajanları nasıl çalışır?
Ajan, düz bir dilde bir hedef alır. Bir ekran görüntüsü alır, bir sonraki işleme karar verir, bunu fare ve klavye komutlarıyla yürütür, başka bir ekran görüntüsü alır ve tekrarlar. Bazıları sağlayıcının sağladığı bir bulut tarayıcısında çalışır; diğerleri ise sizin kontrol ettiğiniz bir sanal makinede veya konteynerde çalışır.
Bu döngü, bir API çağrısından daha yavaştır ve daha az tahmin edilebilirdir. Geç yüklenen bir sayfa, bir pop-up veya bir düzen değişikliği ajanı yanlış yola sokabilir. Bu yüzden görev seçimi ve denetim önemlidir.
Hangi kampanya görevleri bilgisayar kullanma ajanları için uygundur?
- Açılış sayfası QA: formları test verileriyle doldurma, onay sayfalarını ve teşekkür etkinliklerini kontrol etme
- Reklamların ve ürün listelemelerinin arama sonuçlarında ve pazar yerlerinde temiz bir oturumdan nasıl göründüğünü kontrol etme
- Rakip izleme: fiyatlandırma sayfalarını ziyaret etme ve değişiklikleri not etme
- Dışa aktarma seçeneği olmayan platform ekranlarından veri toplama
- Bir site güncellemesinden sonra bozuk adımları bulmak için bir ödeme sürecini baştan sona kontrol etme
Bunların hepsi, bir insanın doğrulayabileceği bir sonuca sahip, çoğunlukla okuma odaklı görevlerdir. Para harcayan, içerik yayınlayan veya mesaj gönderen görevler insanlarda kalır veya sıkı limitleri olan API’ler aracılığıyla yürütülür.
Neden sadece bir API veya komut dosyası kullanmıyorsunuz?
Bir API’nin var olduğu ve görevi kapsadığı yerlerde, bu daha iyi bir seçimdir: daha hızlı, daha ucuz ve kaydetmesi daha kolaydır. Playwright veya Selenium ile geleneksel tarayıcı otomasyonu da sabit, tekrarlanan akışlar için daha güvenilirdir.
Bilgisayar kullanma ajanları, akışın sık sık değiştiği, bir komut dosyasının her yeniden tasarımda bozulacağı veya görevin bir sayfanın mobilde bozuk görünüp görünmediğine karar vermek gibi yargılama gerektirdiği yerlerde yerini alır. Uygulamada, genellikle bir akışı keşfetmek için bir ajan ve kararlı hale geldiğinde onu tekrarlamak için bir komut dosyası kullanırız.
Alien Road bilgisayar kullanma ajanlarını nasıl uyguluyor
Keşif
Tipik bir çalışmada ekibimiz, müşterinin pazarlama ve web ekiplerinin her hafta yaptığı manuel kontrolleri, harcanan zamanı ve hataların ne sıklıkla geç yakalandığını listeler. İyi adaylar sıkıcı, düzenli ve görsel olan görevlerdir: her sürümden sonra formları tıklayan veya her Pazartesi rakip sayfalarının ekran görüntüsünü alan biri.
Kurulum
Ajanlar, müşterinin kişisel giriş bilgileriyle değil, test hesaplarıyla yalıtılmış bir tarayıcı ortamında çalışır. Yalnızca görevin ihtiyaç duyduğu erişimi alırlar, genellikle bir hazırlık sitesi veya salt okunur görünümler. Görevi, açık durdurma koşulları olan kısa bir kontrol listesi olarak yazarız: giriş gerekiyorsa, bir ödeme adımı görünürse veya sayfa kişisel veri isterse durdur ve raporla.
Denetim
Her çalıştırma, ekran görüntüleri ve bir eylem günlüğü olarak kaydedilir. İlk haftalar için bir kişi her çalıştırmayı tamamen gözden geçirir. Sonuçlar manuel kontrollerle tutarlı bir şekilde eşleştiğinde, inceleme istisnalara geçer: bir sorunu işaretleyen veya olağandışı davranan çalıştırmalar.
Raporlama
Aylık raporlar tamamlanan çalıştırmaları, bulunan ve onaylanan sorunları, yanlış alarmları, manuel kontrollere kıyasla tasarruf edilen zamanı ve çalıştırma maliyetini gösterir. Bir sürümden sonraki sabah, ücretli trafik ona ulaşmadan önce bulunan bozuk bir form, kurulumu haklı çıkaran sonuç türüdür.
Riskler nelerdir?
- Prompt enjeksiyonu: bir web sayfası, ajana talimat vermeye çalışan metin içerebilir
- Yanlış tıklamalar: bir ajan bir form gönderebilir veya kabul etmemesi gereken şartları kabul edebilir
- Veri ifşası: ekran görüntüleri kişisel veya gizli verileri yakalayabilir
- Hizmet şartları: bazı siteler otomatik erişimi yasaklar
- Maliyet ve hız: uzun görevler birçok model çağrısı kullanır
Kontrollerimiz her birini ele alır: sayfa içeriği veri olarak işlenir, geri döndürülemez eylemler insan onayı gerektirir, ortamlar test verilerini kullanır, robot kurallarına ve site şartlarına saygı duyarız ve çalıştırmaların adım ve maliyet limitleri vardır.
Bu web siteniz için ne anlama geliyor?
Bilgisayar kullanma ajanları ayrıca kullanıcılar adına web sitelerini ziyaret eder, örneğin ürünleri karşılaştırmak veya hizmet rezervasyonu yapmak için. Düğmelerde ve form alanlarında net etiketleri, standart HTML kontrolleri olan ve gereksiz pop-up’ları olmayan sayfaların bu ajanlar tarafından kullanılması daha kolaydır, tıpkı ekran okuyucuları için olduğu gibi. Erişilebilirlik çalışması ve ajan dostu olma durumu büyük ölçüde örtüşür.
Bilgisayar kullanma ajanları tarayıcı otomasyonu ile nasıl karşılaştırılır?
- Komut dosyaları (Playwright, Selenium): hızlı, ucuz, tekrarlanabilir; sayfa düzeni değiştiğinde bozulur
- Bilgisayar kullanma ajanları: değişikliklere uyum sağlar ve yargılamayı yönetir; daha yavaş, çalıştırma başına daha maliyetli, daha az tahmin edilebilir
- API’ler: var oldukları yerlerde en güvenilir ve en ucuz; yalnızca sağlayıcının sunduklarını kapsar
- Manuel kontroller: en iyi yargılama; pahalı ve yoğun haftalarda atlanması kolay
Mantıklı bir kurulum dördünü de kullanır. Veriler için API’ler, kararlı akışlar için komut dosyaları, değişen veya yargılama gerektiren kontroller için ajanlar ve kararlar ve geri döndürülemez her şey için insanlar.
İyi bir ajan görev özeti ne içerir?
Ajanlar talimatları harfiyen izler ve boşlukları tahminlerle doldurur. Çalışan bir özet, başlangıç URL’sini, tam adımları, her adımda başarının neye benzediğini, hangi verilerin kullanılacağını ve ne zaman durulacağını listeler. Ayrıca ajanın asla yapmaması gerekenleri de söyler: gerçek ödemeler göndermek, şartları kabul etmek, hesap ayarlarını değiştirmek veya mesaj göndermek.
Numaralandırılmış adımlara sahip kısa özetler, uzun ve konuşma tarzı olanlardan daha iyi performans gösterir. Bir çalıştırma başarısız olduğunda, günlük hangi adımın yanlış gittiğini gösterir ve özet yalnızca o adım için güncellenir.
Bu hafta nereden başlamalı
Ana potansiyel müşteri formunuzun veya ödeme sürecinizin her adımını, beklenen onay dahil olmak üzere numaralandırılmış bir liste olarak yazın. Mobil ve masaüstünde kendiniz deneyin ve süresini ölçün. Bu liste, ilk ajan testi için özettir ve süresini ölçmek, bir ajanın haftada kaç saatlik manuel QA’nın yerini alabileceğini gösterir.
Bir görev ve bir site ile başlayın. İlki kararlı hale gelmeden önce birkaç müşteriye veya akışa genişlemek, inceleme işini çoğaltır ve hangi özetin hatalara neden olduğunu gizler.
Okumaya devam edin: AI Pazarlama Ajansı · AI Pazarlama