Şəxsi məlumatların Google axtarışından silinməsi məzmunu indeksdən bloklamaqla yanaşı, mənbə fayllarını veb serverinizdən silmək üçün sistemli bir yanaşma tələb edir. Google bu sorğuları idarə etmək üçün aydın mexanizmlər təqdim edir, lakin uğur məlumatın artıq krolerlər üçün əlçatan olmamasını təmin etməkdən asılıdır. Məlumatı mənbədən silməyə müvəffəq olmasanız, müvəqqəti silinmə sorğunuzun müddəti bitdikdən sonra o, çox güman ki, axtarış nəticələrində yenidən görünəcək.
Google həssas məlumatları necə indeksləşdirir?
Axtarış motorları avtomatlaşdırılmış krolerlərdən istifadə edərək şəkillər və sənədlər daxil olmaqla ictimai məzmunu indeksləşdirir. Bu sistemlər müxtəlif fayl növlərini emal edir və çox vaxt insan istifadəçiləri üçün gizli görünən məlumatları oxuyur. Bir çox sayt sahibi vizual gizliliyin məlumatın redaktə edilməsi ilə eyni olduğuna inanır. Lakin krolerlər kod və metadata əsasında işləyir, bu da onların səhifəni insan gözü ilə şərh etmədiyi mənasına gəlir.
Məsələn, PDF-də mətnin üzərinə qara qutu qoysanız, əsas mətn çox vaxt faylın ikili strukturunda qalır. Kroler optik xarakter tanıma və ya xam sənəd qatlarını oxumaqla bu mətni asanlıqla çıxara bilər. Hətta fayl xüsusiyyətləri və ya dəyişiklik tarixi kimi metadata belə, siz onları redaktə etdiyinizi düşündükdən uzun müddət sonra tam adlar və ya daxili ünvanlar kimi həssas detalları sızdıra bilər.
Mətni kiçik şriftlə yazmaq, fon rəngi ilə eyni rəngdə şrift istifadə etmək və ya mətni şəkillə örtmək insan gözü üçün onu görünməz etsə də, bu üsullar materialı axtarış motorlarının onu indeksləşdirməsinin qarşısını alacaq şəkildə redaktə etmir.
Google Search Central
Məlumatların redaktə edilməsində ümumi səhvlər hansılardır?
Ümumi səhvlərdən biri məzmunu gizlətmək üçün front-end CSS fəndlərinə güvənməkdir. Bir div elementini display: none olaraq təyin etmək və ya şrift rənglərini fonla uyğunlaşdırmaq məzmunu brauzerdən gizlədə bilər, lakin Googlebot HTML mənbə kodunu birbaşa əldə edir. Kroler DOM-u təhlil etdiyi üçün, o, necə üslublandırılmasından asılı olmayaraq faylda və ya kodda olan hər şeyi effektiv şəkildə görür.
Bundan əlavə, Word və ya PDF kimi sənəd formatları versiya tarixçəsini saxlamaqla tanınır. Həssas adları silmək üçün sənədi redaktə etsəniz, lakin onu düz, son versiya kimi saxlamasanız, əvvəlki iterasiyalar faylda yerləşdirilmiş qala bilər. Googlebot bu sənədləri indeksləşdirərkən, çox vaxt bütün tarixçəni oxuyur və bu da sizin qismən redaktənizi yararsız edir.
Axtarış nəticələrindən məzmunu silmək üçün hansı addımlar atılmalıdır?
Məlumatın daimi olaraq silinməsini təmin etmək üçün iki mərhələli prosesi izləməlisiniz. Birincisi, təcili sorğular üçün Google Search Console Silinmə alətindən istifadə edin. İkincisi, mənbə fayllarına daimi bloklama üsullarını tətbiq edin ki, onlar gələcək krollardan kənarda qalsınlar.
- Xüsusi URL-ləri və ya şəkilləri dərhal və müvəqqəti gizlətmək üçün Search Console-da Silinmə alətindən istifadə edin.
- Fayllarınızın HTTP başlığında ‘noindex’ X-Robots-Tag tətbiq edin ki, onların indeksdən çıxarıldığından əmin olun.
- Həssas məlumatları ehtiva edən xüsusi yolları krollamaqdan imtina etmək üçün robots.txt faylınızı konfiqurasiya edin.
- Server başlıqlarına və ya robots faylına nəzarətiniz yoxdursa, faylları serverinizdən və ya CMS-dən tamamilə silin.
Alien Road bu prosesi necə tətbiq edir
Alien Road-da biz müntəzəm texniki auditlər keçirməklə müştərilərimiz üçün məxfilik idarəetməsini həyata keçiririk. Müştəri həssas faylları müəyyən etdikdə, biz sadəcə silinmə alətinə güvənmirik. Biz gələcək indeksləşdirmənin qarşısını almaq üçün server cavab başlıqlarının düzgün konfiqurasiya edildiyini yoxlayırıq. Biz həmçinin sənədlərdəki metadata və ya düzəliş tarixçəsi kimi, çox vaxt həssas detalları sızdıra bilən ‘gizli’ məlumatları da yoxlayırıq.
Tipik bir iş prosesində, biz ifşa olunmuş şəxsi məlumatların bütün hallarını tapmaq üçün müştərinin saytını krollamaqla başlayırıq. Sonra server tərəfi konfiqurasiyasının botun bu yolları yenidən krollamasının qarşısını aldığından əmin oluruq. HTTP status kodlarını və başlıqlarını yoxlayaraq, axtarış motorunun səhifəni qeydlərindən silmək üçün aydın təlimat aldığını təsdiqləyirik.
- Həssas URL-in alt domenlər üzrə bütün hallarını müəyyən etmək üçün sayt xəritələrini və server qeydlərini audit edin.
- Xüsusi kataloqu və ya fayl yolunu bloklamaq üçün robots.txt faylının düzgün formatlandığını yoxlayın.
- curl və ya brauzer inspektoru kimi alətlə server cavab başlığını yoxlayaraq X-Robots-Tag-in aktiv olduğunu təsdiqləyin.
- Prosesi sürətləndirmək üçün silinmə sorğusunu rəsmi Search Console tablosu vasitəsilə göndərin.
Mənbə faylını silmək niyə lazımdır?
Silinmə aləti əsas problemi həll edərkən dərhal rahatlıq təmin etmək üçün nəzərdə tutulmuş müvəqqəti bir həlldir. Faylı serverinizdən silməsəniz və ya bloklamasanız, Googlebot sonda URL-i yenidən krollayacaq. Kroler səhifəni yenidən tapdıqda, o, məzmunu yenidən indeksləşdirəcək, silinmə sorğunuzu effektiv şəkildə ləğv edəcək və məlumatı yenidən ifşa edəcək.
Silinmə alətini ‘fasilə’ düyməsi kimi düşünün. O, linkin nəticələrdə görünməsini dayandırır, lakin krolerə faylı əbədi olaraq görməzdən gəlməyi demir. Yalnız noindex etiketi və ya robots.txt qaydasından istifadə etməklə siz krolerin URL-i sonradan verilənlər bazasına geri əlavə etməsinin qarşısını alan daimi təlimatı verə bilərsiniz.
Bu həftə haradan başlamaq lazımdır
Həssas şəxsi məlumatları ehtiva edən hər bir URL-i müəyyən etməklə başlayın. Google Search Console hesabınıza daxil olun və indeks menyusunun altındakı ‘Silinmələr’ bölməsini yoxlayın. Hədəf faylları müəyyən etdikdən sonra bloklama üsullarından birini — robots.txt və ya noindex etiketlərini seçin və onu server parametrlərinizə tətbiq edin. Sorğuların işləndiyindən əmin olmaq üçün Search Console-dakı statusu izləyin.
Daxili sənədlər üçün media kitabxananızda yoxlama aparın. CMS istifadə edirsinizsə, plaginlərinizin həssas metadatanı indeksləşdirə biləcək istənməyən əlavə səhifələri yaradıb-yaratmadığını yoxlayın. Bu elementləri sistemli şəkildə həll etməklə, rəqəmsal izinizi gələcək indeksləşdirmə problemlərindən qoruyursunuz.