Google stellt zwei neue Web-Crawler vor

Google hat zwei neue Crawler veröffentlicht, die speziell für das Scraping von Bild- und Videoinhalten entwickelt wurden. Obwohl nicht explizit erwähnt, wird davon ausgegangen, dass das Blockieren dieser Crawler keine Auswirkungen auf das Ranking hat.

Zwei GoogleOther-Varianten

Es gibt zwei neue GoogleOther Crawler:

GoogleOther-Image

User Agent Tokens:

• GoogleOther-Image
• GoogleOther

Kompletter User Agent String:

• GoogleOther-Image/1.0

GoogleOther-Video

User Agent Tokens:

• GoogleOther-Video
• GoogleOther

Kompletter User Agent String:

• GoogleOther-Video/1.0

Diese Crawler sind für das Crawlen von Binärdaten wie Bildern und Videos bestimmt. Sie sind Varianten des im April 2023 eingeführten GoogleOther Crawler, der für Einmal-Crawls zu Forschungs- und Entwicklungszwecken verwendet wird.

Google hat auch die User Agent Strings für den regulären GoogleOther Crawler aktualisiert. Für Blockierungszwecke kann weiterhin derselbe User Agent Token wie zuvor verwendet werden (GoogleOther).

GoogleOther Familie der Bots

Diese neuen Bots können in deinen Server-Logs auftauchen und helfen Publishern, die entscheiden möchten, ob sie ihre Bilder und Videos für Forschungs- und Entwicklungszwecke scrapen lassen wollen.