Comment nous avons combattu le spam de recherche sur Google en 2020

Jeudi 29 avril 2021

La Recherche Google est un outil puissant pour vous aider à trouver des informations utiles sur le web ouvert. Malheureusement, toutes les pages web ne sont pas créées avec de bonnes intentions. Beaucoup d’entre elles sont explicitement créées pour tromper les gens, et c’est ce que nous combattons chaque jour. Pour garantir votre sécurité et protéger votre expérience de recherche contre les contenus perturbateurs et les comportements malveillants, la Recherche a investi dans de nombreuses innovations en 2020.

Combattre le spam plus intelligemment

Bien que nous ayons combattu le spam depuis les premiers jours de la Recherche, les progrès récents de l’Intelligence Artificielle (AI) offrent un potentiel sans précédent pour révolutionner notre approche.

En combinant notre connaissance approfondie du spam avec l’AI, l’année dernière, nous avons pu construire notre propre AI de lutte contre le spam, qui est incroyablement efficace pour attraper les tendances de spam connues et nouvelles. Par exemple, nous avons réduit les sites avec du contenu généré automatiquement et extrait de plus de 80% par rapport à il y a quelques années.

Le spam piraté était encore endémique en 2020, car le nombre de sites web vulnérables est resté assez important, bien que nous ayons amélioré notre capacité de détection de plus de 50% et supprimé la plus grande partie du spam piraté des résultats de recherche.

C’est un problème que nous ne pouvons pas résoudre seuls. Même si nous pouvions détecter et nous protéger contre tout le spam, les pirates ne cesseraient d’exploiter les failles jusqu’à ce qu’elles soient toutes fermées. Les propriétaires de sites web peuvent protéger leurs sites en pratiquant une bonne hygiène de sécurité : il est plus facile d’empêcher un site d’être piraté que de se remettre d’un piratage. Google propose des ressources pour vous aider à comprendre les moyens les plus courants par lesquels les sites web sont piratés et comment utiliser Search Console pour vérifier si votre site a été piraté. Jetez-y un œil et gardons le web plus sûr ensemble !

Avec les grands événements de l’année dernière, y compris une pandémie mondiale, nous avons déployé des efforts considérables pour étendre la protection aux milliards de recherches que nous avons reçues sur des sujets aussi importants. Si vous cherchez un site de test COVID près de chez vous, vous ne devriez pas avoir à vous soucier d’atterrir sur du spam charabia qui pourrait vous rediriger vers des sites de phishing. Outre l’élimination du contenu de spam, nous avons travaillé avec plusieurs autres équipes de Recherche pour vous assurer de recevoir les informations les plus récentes et de la plus haute qualité quand et où cela compte le plus.

Empêcher le spam de vous atteindre

Avant de fournir un ensemble de résultats de recherche sur Google, il se passe beaucoup de choses en coulisses. Chaque jour, nous découvrons, explorons et indexons des milliards de pages web. Parmi ces pages se trouve beaucoup de spam — chaque jour, nous découvrons 40 milliards de pages de spam. Voici comment nous travaillons pour empêcher ce spam de perturber votre recherche d’informations utiles et pratiques.

Tout d’abord, nous avons des systèmes capables de détecter le spam lorsque nous explorons des pages ou d’autres contenus. L’exploration (crawling) se produit lorsque nos systèmes automatiques visitent le contenu et l’envisagent pour l’inclure dans l’index que nous utilisons pour fournir des résultats de recherche. Certains contenus détectés comme du spam ne sont pas ajoutés à l’index.

Ces systèmes fonctionnent également pour le contenu que nous découvrons via les sitemaps et Search Console. Par exemple, Search Console dispose d’une Demander l’indexation fonctionnalité pour que les créateurs puissent nous informer des nouvelles pages qui devraient être ajoutées rapidement. Nous avons observé des spammeurs pirater des sites vulnérables, se faire passer pour les propriétaires de ces sites, se vérifier dans Search Console et utiliser l’outil pour demander à Google d’explorer et d’indexer les nombreuses pages de spam qu’ils ont créées. En utilisant l’AI, nous avons pu identifier les vérifications suspectes et empêcher les URL de spam d’entrer dans notre index de cette manière.

Ensuite, nous avons des systèmes qui analysent le contenu inclus dans notre index. Lorsque vous effectuez une recherche, ils travaillent pour double-vérifier si le contenu correspondant pourrait être du spam. Si c’est le cas, ce contenu n’apparaîtra pas dans les principaux résultats de recherche. Nous utilisons également ces informations pour mieux améliorer nos systèmes afin d’empêcher un tel spam d’être inclus dans l’index.

Le résultat est que très peu de spam se retrouve réellement dans les principaux résultats que quiconque voit pour une recherche, grâce à nos systèmes automatisés aidés par l’AI. Nous avons estimé que ces systèmes automatisés aident à garder plus de 99% des visites de la Recherche complètement sans spam. Quant au minuscule pourcentage restant, nos équipes prennent mesure manuelle et utilisent les enseignements tirés pour améliorer encore nos systèmes automatisés.

Vous protéger au-delà du spam

Au-delà du spam, nous avons élargi nos efforts en 2020 pour vous protéger contre d’autres types d’abus. Nombre d’entre eux peuvent causer des préjudices financiers et personnels importants.

En 2020, nous avons fait des progrès significatifs dans l’amélioration de notre couverture et la protection de plus d’utilisateurs contre les escroqueries et les fraudes en ligne. Les escroqueries en ligne prennent de nombreuses formes et peuvent vous affecter négativement de plus de manières que le webspam traditionnel. Par exemple, de nombreux escrocs prétendent proposer des numéros de téléphone de support client pour des services et produits populaires, uniquement pour tromper les utilisateurs qui appellent en les faisant payer par virements bancaires ou cartes cadeaux. Communément appelé « escroquerie au support client » ou « escroquerie au support technique », ce type d’escroquerie a été signalé par des centaines de milliers d’utilisateurs où les utilisateurs peuvent perdre des centaines de dollars aux escrocs dans chaque cas.

Depuis 2018, nos systèmes ont pu protéger des centaines de millions de recherches par an en détectant des sites potentiellement frauduleux. Sur le web, les escrocs ont tenté de créer de nombreux sites web de faible qualité avec du bourrage de mots-clés, des logos de marques qu’ils imitent et un numéro de téléphone qu’ils veulent que vous appeliez. Nos solutions algorithmiques ont fait en sorte qu’il soit très peu probable que l’escroquerie et la fraude apparaissent dans vos résultats de recherche. Ce n’est là qu’une des nombreuses protections que nous avons lancées l’année dernière pour garantir la qualité des résultats de recherche et votre sécurité. Notre mission est de prendre les devants face aux défis pour vous fournir les résultats les plus dignes de confiance. En même temps, vous pouvez également mieux vous protéger en restant informé et en vous renseignant sur les escroqueries.

Une autre dimension où les progrès de l’AI ont énormément aidé a été la compréhension du contenu des sites. Un exemple de cela peut être trouvé dans la façon dont nous avons aidé à améliorer la façon dont nous classons les avis sur les produits, les sites d’information et d’achat. La Recherche Google est un excellent moyen de faire des recherches et de trouver des produits avant d’effectuer un achat, et nous voulions nous assurer que vous obteniez les informations les plus utiles pour votre prochain achat en récompensant le contenu qui bénéficie d’une recherche plus approfondie et d’informations utiles.

Malgré les progrès significatifs que nous avons réalisés dans nos efforts de lutte contre le spam, les spammeurs sont très motivés pour développer de nouvelles techniques capables d’éluder notre détection. Nous travaillons toujours pour nous améliorer et protéger les personnes contre de nouveaux types d’abus, et les rapports externes peuvent aider. Avez-vous eu des expériences récentes avec la Recherche où vous vous êtes senti trompé, escroqué ou spammé, et pensez-vous que nous pouvons faire un meilleur travail pour prévenir ces expériences ? Si c’est le cas, veuillez partager vos commentaires en utilisant le rapport de spam, ainsi que la requête et toute autre information qui pourrait être utile.

Publié par Cody Kwok, Ingénieur Principal