Crawling infrastructure

APIs-Google User-Agent

APIs-Google ist der User-Agent, den Google APIs verwenden, um Push-Benachrichtigungsnachrichten zuzustellen. Anwendungsentwickler können diese Benachrichtigungen anfordern, um nicht ständig die Server von Google abfragen zu müssen, um herauszufinden, ob sich die Ressourcen, an denen sie interessiert sind, geändert haben. Um sicherzustellen, dass niemand diesen Dienst missbraucht, verlangt Google von Entwicklern den Nachweis, dass sie Eigentümer der Domain sind, bevor sie eine URL mit einer Domain als Ort registrieren dürfen, an dem sie Nachrichten empfangen möchten.

Wie APIs-Google auf Ihre Website zugreift

APIs-Google sendet jede Push-Benachrichtigung über eine HTTPS-POST-Anfrage. Wenn die Anfrage aufgrund eines Fehlerzustands fehlschlägt, der möglicherweise vorübergehend ist, sendet APIs-Google die Benachrichtigung erneut. Wenn die Anfrage immer noch nicht erfolgreich ist, wird sie basierend auf einem exponentiellen Backoff-Zeitplan bis zu mehrere Tage lang weiter versuchen.

APIs-Google User-Agent

Die Rate, mit der APIs-Google auf Ihre Website zugreift, variiert je nachdem, wie viele Push-Benachrichtigungsanfragen für Server auf Ihrer Website erstellt wurden, wie schnell die überwachten Ressourcen aktualisiert werden und wie viele Wiederholungsversuche stattfinden. Infolgedessen können die Verkehrsmuster von APIs-Google in einigen Szenarien konsistent sein, in anderen Szenarien kann der Verkehr jedoch sporadisch oder sprunghaft sein.

Bereiten Sie Ihre Website auf APIs-Google vor

APIs-Google verwendet HTTPS, um Push-Benachrichtigungen zuzustellen, daher erfordert es, dass Ihre Website ein gültiges SSL-Zertifikat hat. Ungültige Zertifikate umfassen Folgendes:

  • Selbstsignierte Zertifikate.
  • Zertifikate, die von einer nicht vertrauenswürdigen Quelle signiert wurden.
  • Zertifikate, die widerrufen wurden.

Vermeiden Sie unnötige Wiederholungsanfragen, indem Sie sicherstellen, dass Ihre Anwendung gut konzipiert ist und zeitnah (innerhalb von Sekunden) auf Benachrichtigungsnachrichten reagiert.

APIs-Google User-Agent — 2

Verhindern Sie, dass APIs-Google Ihre Website aufruft

Um zu verhindern, dass APIs-Google Ihre Website aufruft, führen Sie einen der folgenden Schritte aus:

  • Melden Sie sich von Benachrichtigungen ab. Wenn Sie eine Domain verwalten, die Subdomains oder URL-Unterbereiche hat, die separat besessen oder verwaltet werden, hat möglicherweise einer der Subdomain-Eigentümer eine Anwendung eingerichtet, die Push-Benachrichtigungen verwendet. Wenn Sie APIs-Google blockieren möchten, kontaktieren Sie jeden, der eine solche Anwendung eingerichtet haben könnte, und bitten Sie ihn, diese zu deaktivieren.
  • Verwenden Sie robots.txt. Der User-Agent, der in der robots.txt-Datei angegeben werden muss, ist
    APIs-Google – APIs-Google folgt nicht den Regeln für den Googlebot User-Agent. Es kann eine kleine Verzögerung geben, bevor APIs-Google Ihre robots.txt-Dateiänderung entdeckt. Wenn
    APIs-Google weiterhin Nachrichten an Ihre Website sendet, nachdem Sie sie in der robots.txt blockiert haben, überprüfen Sie, ob sich die robots.txt am richtigen Ort befindet.

Überprüfen Sie den Anrufer

Wenn Sie vermuten, dass Sie gefälschte Anfragen erhalten, können Sie
überprüfen, ob ein Bot, der auf Ihren Server zugreift, tatsächlich von google.com aufruft.
Durchsuchen Sie Ihre Protokolle nach IP-Adressen, die sich als APIs-Google

Alien Road

So setzen wir das um

APIs-Google traffic surprises teams that do not know a Google service is calling their endpoints. We identify it before anyone writes a firewall rule that breaks an integration.

Verwandte Leistungen

Teilen