Googles neue Crawler optimieren die Suche nach Bildern und Videos

May 16, 2024

Die Welt des Internets entwickelt sich ständig weiter, und Suchmaschinen stehen an vorderster Front dieser Entwicklung. Eine der wichtigsten Aufgaben von Suchmaschinen ist das Crawlen von Inhalten, um Daten zu sammeln und zu indizieren, die den Nutzern bei ihren Suchanfragen präsentiert werden können. Google, als führende Suchmaschine, ist bekannt für seine fortschrittlichen Technologien in diesem Bereich und hat kürzlich zwei neue spezialisierte Crawler eingeführt: GoogleOther-Image und GoogleOther-Video. GoogleOther-Image und GoogleOther-Video sind Erweiterungen des bereits bestehenden Crawlers GoogleOther, der im April 2023 ins Leben gerufen wurde. Dieser wurde entwickelt, um das öffentliche Web zu durchsuchen und gleichzeitig Ressourcen für die Hauptcrawler von Googlebot freizusetzen. Die neuen Versionen sind speziell für das Abrufen von Bild- und Videodaten optimiert und sollen die Erfassung von binären Daten verbessern, die für Forschungs- und Entwicklungsarbeiten genutzt werden könnten. GoogleOther-Image ist die Variante des GoogleOther-Crawlers, die für das Abrufen öffentlich zugänglicher Bild-URLs optimiert ist. Dieser Crawler verwendet die Benutzeragent-Token GoogleOther-Image und GoogleOther, und die vollständige Benutzeragent-Zeichenfolge lautet GoogleOther-Image/1.0. Auf der anderen Seite ist GoogleOther-Video für das Abrufen öffentlich zugänglicher Video-URLs optimiert und verwendet die Benutzeragent-Token GoogleOther-Video und GoogleOther. Die vollständige Benutzeragent-Zeichenfolge für diesen Crawler ist GoogleOther-Video/1.0. Die Einführung dieser spezialisierten Crawler ist ein wichtiger Schritt für Google, da sie die Effizienz und Genauigkeit der Datenindizierung verbessern kann. Indem sie sich auf spezifische Medientypen konzentrieren, können diese Crawler relevante Informationen schneller und genauer erfassen, was letztendlich zu einer verbesserten Sucherfahrung für die Nutzer führt. Neben GoogleOther-Image und GoogleOther-Video umfasst die Familie der Googlebot-Crawler eine Vielzahl anderer Crawler, darunter: - Googlebot – der Hauptcrawler für Googles Suchprodukte, der immer die Regeln von robots.txt beachtet. - Spezialisierte Crawler – Crawler, die spezifische Funktionen ausführen (wie AdsBot), die möglicherweise die robots.txt-Regeln beachten oder auch nicht. - Von Benutzern ausgelöste Fetcher – Tools und Produktfunktionen, bei denen der Endbenutzer einen Abruf auslöst. Beispielsweise handelt es sich bei Google Site Verifier um eine Anfrage eines Benutzers, und einige Tools der Google Search Console senden Google, um die Seite basierend auf einer Aktion des Benutzers abzurufen. Darüber hinaus hat Google IP-Adressbereiche und Reverse-DNS-Masken für jeden Crawlertyp aufgelistet, um Webmastern und SEO-Fachleuten die Möglichkeit zu geben, ihre Crawling-Aktivitäten und Bot-Aktivitäten auf ihren Websites und in ihren Logdateien zu überprüfen. Wenn diese neuen GoogleOther-Crawler in den Protokolldateien auftauchen, besteht kein Grund zur Sorge, da es sich um echte Googlebots handelt. Die Bedeutung dieser Entwicklungen für Webmaster und SEO-Experten kann nicht hoch genug eingeschätzt werden. Es ist von entscheidender Bedeutung, dass sie die Aktivitäten von Crawlern auf ihren Websites überwachen und sicherstellen, dass ihre Inhalte richtig indiziert werden, um in den Suchergebnissen von Google sichtbar zu sein. Die Einführung von GoogleOther-Image und GoogleOther-Video wird ihnen dabei helfen, ein besseres Verständnis dafür zu entwickeln, wie Google Bild- und Videomaterial auf ihren Seiten crawlt und indiziert. Für Unternehmen, die auf visuelle Inhalte angewiesen sind, wie z.B. Online-Shops oder Medienplattformen, bieten diese spezialisierten Crawler die Möglichkeit, ihre Bilder und Videos effektiver zu präsentieren und damit ihre Sichtbarkeit und ihren Traffic zu steigern. Mit den neuen Tools kann Google hochwertige, relevante visuelle Inhalte besser erkennen und Nutzern zur Verfügung stellen, die nach solchen Inhalten suchen. Abschließend lässt sich sagen, dass die Einführung von GoogleOther-Image und GoogleOther-Video einen weiteren Schritt in der ständigen Weiterentwicklung von Googles Suchtechnologie darstellt. Diese spezialisierten Crawler werden die Art und Weise, wie Bild- und Videoinhalte im Web erfasst und indiziert werden, verbessern und gleichzeitig die Recherche- und Entwicklungsprozesse von Google unterstützen. Für Webmaster und SEO-Experten bedeutet dies eine weitere Anpassung ihrer Strategien, um die Vorteile dieser neuen Technologie voll auszuschöpfen und sicherzustellen, dass ihre Inhalte in der sich ständig verändernden Landschaft des Internets sichtbar bleiben.