Xəbərlər üçün Yeni İstifadəçi Agenti

Çərşənbə, 2 Dekabr 2009

Bu gün biz nəşriyyatçılara məzmunları üzərində daha çox nəzarət imkanı verən Googlebot-News adlı robots.txt üçün yeni istifadəçi agentini elan edirik. Əgər eşitməmisinizsə
robots.txt, bu, bütün əsas axtarış sistemləri və vebi emal edən müvafiq “robotlar” tərəfindən dəstəklənən və
1994-cü ildən
istifadədə olan ümumi veb standartıdır. Axtarış sistemi hər hansı veb səhifəni taramaq və indeksləşdirmək üçün icazəsinin olub-olmadığını yoxladıqda, “bu səhifəni taramağa icazəmiz olub-olmadığını yoxla” mexanizmi robots.txt-dir.

Nəşriyyatçılar bizimlə əlaqə saxlaya bilərdilər
bir forma vasitəsilə
əgər onlar Google Xəbərlərə daxil olmaq istəmirdilərsə, lakin Google-un veb axtarış indeksində olmaq istəyirdilərsə. İndi nəşriyyatçılar Google Xəbərlərdəki məzmunlarını daha da avtomatlaşdırılmış şəkildə idarə edə bilərlər. Sayt sahibləri sadəcə olaraq əlavə edə bilərlər Googlebot-News xüsusi qaydaları robots.txt fayllarına. Bənzər Googlebot və Googlebot-Image istifadəçi agentləri kimi, yeni
Googlebot-News istifadəçi agentindən veb-saytın hansı səhifələrinin taranmalı və nəticədə Google Xəbərlərdə görünməli olduğunu müəyyən etmək üçün istifadə oluna bilər.

Nəşriyyatçılar üçün bir neçə nümunə buradadır:

Səhifələri həm Google veb axtarışına, həm də Xəbərlərə daxil edin:

Bu, ən asan haldır. Əslində, bu hal üçün robots.txt faylı belə tələb olunmur.

Səhifələri Google veb axtarışına daxil edin, lakin Xəbərlərə daxil etməyin:

Bu robots.txt faylı bildirir ki, Google-un ümumi veb skaneri olan Googlebotüçün heç bir fayl qadağan edilməyib, lakin Googlebot-News istifadəçi agenti veb-saytdakı bütün fayllardan bloklanıb.

Səhifələri Google Xəbərlərə daxil edin, lakin Google veb axtarışına daxil etməyin:

robots.txt faylını təhlil edərkən Google ən xüsusi qaydaya tabe olur. İlk iki sətir bizə bildirir ki, Googlebot (Google-un veb indeksi üçün istifadəçi agenti) saytdan hər hansı səhifənin taranmasından bloklanıb. Google Xəbərlər üçün daha xüsusi istifadəçi agentinə tətbiq olunan növbəti qayda Googlebot-un bloklanmasını ləğv edir və Google Xəbərlərə saytdan səhifələri taramaq üçün icazə verir.

Google veb axtarışı və Google Xəbərlərdən müxtəlif səhifə dəstlərini bloklayın:

Google veb axtarışı və Google Xəbərlərdən bloklanan səhifələr müstəqil şəkildə idarə oluna bilər. Bu robots.txt faylı son xəbər məqalələrini (/latest_news qovluğundakı URL-lər) Google veb axtarışından bloklayır, lakin onların Google Xəbərində görünməsinə icazə verir. Əksinə, o, premium məzmunu (/archives qovluğundakı URL-lər) Google Xəbərlərdən bloklayır, lakin onların Google veb axtarışında görünməsinə icazə verir.

Google veb axtarışı və Google Xəbərin səhifələri taramasını dayandırın:

Bu robots.txt faylı Google-a bildirir ki, veb axtarış skanerimiz üçün istifadəçi agenti olan Googlebot saytdan heç bir səhifəni taramamalıdır. Googlebot-News üçün heç bir xüsusi qayda verilmədiyi üçün Xəbərlər axtarışımız Googlebot üçün ümumi rəhbərliyə əməl edəcək və Google Xəbərlər üçün səhifələri taramayacaq.

Bəzi sorğular üçün biz adi veb axtarış nəticələrimizlə birlikdə veb axtarış nəticələri səhifəsində ayrı bir qutuda və ya bölmədə Google Xəbərlərdən nəticələr göstəririk. Biz bunu bəzən Şəkillər, Videolar, Xəritələr və Məhsullar üçün də edirik. Bu kimi tanınır
Universal axtarış nəticələri. Google Xəbərlər Universal “Xəbər” axtarış nəticələrini təmin etdiyindən, əgər siz
Googlebot-News istifadəçi agentini bloklasanız, saytınızın xəbər hekayələri Universal axtarış nəticələrinə daxil edilməyəcək.

Biz hazırda yeni istifadəçi agenti üçün dəstəyimizi sınayırıq. Hər hansı problemlə qarşılaşsanız
zəhmət olmasa bizə bildirin. Nəzərə alın ki,
Google üçün mümkündür
həmin səhifəni taramadığımız hallarda belə bəzi hallarda səhifəyə keçid qaytarmaq. Əgər istəyirsinizsə
robots.txt haqqında ətraflı oxuyun, biz veb-saytımızda əlavə sənədlər təqdim edirik. Ümid edirik ki, veb-ustalar Googlebot-News istifadəçi agentinin təmin etdiyi çeviklikdən və daha asan idarəetmədən zövq alacaqlar.

Yazdı
Jonathan Simon,
Vebmaster Trendləri Analitiki