Bilgisayar kullanım ajanları, bir bilgisayarı tıpkı bir insan gibi kullanan AI sistemleridir: ekrana bakarlar, imleci hareket ettirirler, düğmelere tıklarlar ve alanlara yazı yazarlar. Pazarlamacılar için, dizin listelerini doldurmak, panellerden veri toplamak veya birçok hesapta reklamları kontrol etmek gibi API’si olmayan araçlardaki görevleri halledebilirler, ancak çoğu iş için hala insanlardan daha yavaş ve daha az güvenilirdirler.
Birkaç sağlayıcı bu yeteneği sunuyor. Anthropic, 2024’te Claude için bilgisayar kullanımını yayınladı, OpenAI, ChatGPT içinde kendi tarayıcısını çalıştıran bir ajan sunuyor ve Google, Gemini üzerine kurulu tarayıcı ajanlarını gösterdi. Tarayıcı uzantıları ve masaüstü uygulamaları, bu modelleri giderek daha fazla geliştirici olmayanların kullanabileceği araçlara dönüştürüyor.
Bilgisayar kullanım ajanları nasıl çalışır?
Model, ekranın bir ekran görüntüsünü alır, bir sonraki adımda ne yapacağına karar verir ve “bu konumda tıkla” veya “bu metni yaz” gibi bir eylem gönderir. Yeni bir ekran görüntüsü izler ve döngü, görev tamamlanana veya ajan pes edene kadar tekrarlanır.
Ajan görsel arayüz üzerinden çalıştığı için, prensipte bir insanın kullanabileceği her türlü yazılımı kullanabilir. Cazibesi de budur. Bazı ürünler web sayfalarındaki ekran görüntülerini atlar ve sayfa yapısını doğrudan okur, bu daha hızlı ve daha doğrudur, ancak fikir aynıdır: ajan, bir insanın göreceği arayüz üzerinden hareket eder. Bu aynı zamanda zayıf noktasıdır: arayüzler değişir, pop-up’lar görünür ve on piksel kayan bir düğme, dün çalışan bir adımı bozabilir.
Pazarlamacılar onları nerede kullanabilir?
En iyi kullanımlar, iyi entegrasyonları olmayan araçlardaki tekrarlayan görevlerdir; burada bir hatayı tespit etmek kolay ve düzeltmek ucuzdur.
- Dışa aktarma veya API’si olmayan panellerden metrik toplama
- Reklamların, açılış sayfalarının ve izleme etiketlerinin birçok sayfada doğru görüntülendiğini kontrol etme
- İş dizini listelerini doldurma ve yerel SEO için NAP ayrıntılarını tutarlı tutma
- Rakiplerin herkese açık sayfalarını, fiyat tablolarını ve ürün listelerini araştırma
- Hazırlık ortamlarında web sitesi formlarını ve ödeme akışlarını test etme
- Raporlar için arama sonuçlarının veya sosyal profillerin ekran görüntülerini alma
Bu, bir API entegrasyonundan nasıl farklıdır?
Bir API entegrasyonu, yapılandırılmış verilerle yazılımla doğrudan konuşur ve hızlı ve tahmin edilebilirdir. Bilgisayar kullanımı bir insanı taklit eder ve karşılaştırıldığında yavaştır, her adım saniyeler sürer.
Bir API veya Zapier veya Make gibi bir araç mevcut olduğunda her zaman onu kullanın. Kapalı görünen birçok platformun ayarlarında gizli bir dışa aktarma işlevi veya raporlama API’si vardır, bu yüzden ekranın tek yol olduğunu varsaymadan önce belgeleri kontrol edin. Bilgisayar kullanımı boşlukları doldurur: eski sistemler, entegrasyonu olmayan küçük satıcılar ve farklı düzenlere sahip birkaç siteyi kapsayan görevler. On binlerce öğe üzerinde saatlik olarak çalıştırdığınız bir görev için bu yanlış araçtır.
Mevcut sınırlar nelerdir?
Uzun görevlerde doğruluk düşer. Her tıklama belirli bir hata şansı taşır ve hatalar birikir. Ajanlar küçük metinleri yanlış okuyabilir, yoğun bir tabloda yanlış satıra tıklayabilir veya bir alanı yanlış değerle yanlış yere doldurabilir.
Ayrıca botları durdurmak için oluşturulan şeylerle de mücadele ederler. CAPTCHA’lar, olağandışı giriş akışları ve iki faktörlü kimlik doğrulama genellikle bir insan gerektirir ve birçok sağlayıcı ajanlarına bu kontrolleri hiç atlamamalarını talimat verir. Siteler ayrıca hizmet şartlarında otomatik erişimi yasaklayabilir, bu da üçüncü taraf bir sitede herhangi bir şeyi otomatikleştirmeden önce kontrol etmeye değer.
Tipik hata noktaları
- Sayfayı kaplayan çerez banner’ları ve pop-up’lar
- İçeriği gizleyen sonsuz kaydırma ve tembel yükleme
- Tarih seçiciler ve özel açılır menüler
- Uzun görevler sırasında oturum zaman aşımları
- Talimatların beklemediği dilde sayfalar
Hangi güvenlik kuralları uygulanmalıdır?
Bilgisayar kullanım ajanları ekranda ne varsa görür ve giriş yapmış kullanıcının yapabileceği her şeyi yapabilir. Bu onları hem güçlü hem de riskli kılar.
Onları, yalnızca görev için gereken hesapların bulunduğu ayrı bir tarayıcı profilinde veya sanal makinede çalıştırın. E-postanızın, bankacılık ve yönetici panellerinizin hepsinin giriş yaptığı bir tarayıcıyı kullanmalarına izin vermeyin. Onlara asla düz metin olarak şifre vermeyin; kendiniz giriş yapın, sonra teslim edin. Bir web sayfasının ajana yönelik gizli talimatlar içerdiği prompt injection’a dikkat edin ve gönderen, yayınlayan, satın alan veya silen herhangi bir eylem için bir insanı döngüde tutun.
Pilot uygulama nasıl yapılır?
Net bir bitişi, bilinen doğru bir sonucu ve düşük hata maliyeti olan bir görev seçin. Beş rakip siteden herkese açık fiyatları bir sayfaya toplamak iyi bir örnektir.
- Görevi, yeni bir stajyer için yapacağınız gibi numaralandırılmış adımlar olarak yazın
- İlk birkaç kez izlerken çalıştırın
- Çıktıyı manuel bir sürümle karşılaştırın ve hataları sayın
- Ajan ve bir insan tarafından harcanan süreyi kaydedin
- Tasarrufun kontrol süresini haklı çıkarıp çıkarmadığına karar verin
Tipik bir pilot uygulamada, ajan görev başına bir insandan daha yavaştır ancak arka planda çalışır, bu yüzden asıl soru, işini kontrol etmenin görevi kendiniz yapmaktan daha az zaman alıp almadığıdır.
Alien Road bilgisayar kullanım ajanlarını nasıl uygular?
Tipik bir çalışmada, keşif aşaması, ekibin verileri sistemler arasında elle kopyaladığı görevleri tanımlar ve bir API veya basit bir otomasyonun işi yapıp yapamayacağını kontrol eder. Bilgisayar kullanımı yalnızca bu seçeneklerin mevcut olmadığı durumlarda devreye girer.
Kurulum, özel hesapların bulunduğu ve görevin gerektirdiğinin ötesinde müşteri yönetici panellerine erişimin olmadığı izole bir tarayıcı ortamında gerçekleşir. Açılış sayfası kontrolleri ve rakip araştırması gibi yalnızca okuma amaçlı görevlerle başlarız ve bir stratejist her çıktıyı inceler. Ölçüm, görev başına tasarruf edilen süreyi ve hata oranını kaydeder ve aylık raporlar, kontrol etme işin kendisinden daha uzun sürdüğü için hangi görevlerin bırakıldığını not eder.
Bu hafta nereden başlanmalı?
Ekibinizin ekranlardan bilgi kopyalayarak yaptığı beş görevi listeleyin. Dışa aktarma veya API’si olmayanları işaretleyin. Bunlar adaylarınızdır.
En basitini seçin, kaydedilmiş şifreleri olmayan ayrı bir tarayıcı profili oluşturun ve siz izlerken bir ajanı üzerinde üç kez deneyin. Tereddüt ettiği veya yanlış gittiği her adımı not edin. Aracın yardımcı olup olmadığını veya görevin farklı bir çözüm gerektirip gerektirmediğini hızlıca öğreneceksiniz.
Okumaya devam edin: AI Pazarlama Ajansı · AI Pazarlaması