{"id":31885,"date":"2024-11-12T12:40:12","date_gmt":"2024-11-12T12:40:12","guid":{"rendered":"https:\/\/www.seobility.net\/?post_type=wiki&p=31885"},"modified":"2025-03-18T13:46:57","modified_gmt":"2025-03-18T13:46:57","slug":"Deepbot","status":"publish","type":"wiki","link":"https:\/\/www.seobility.net\/de\/wiki\/Deepbot","title":{"rendered":"Deepbot"},"content":{"rendered":"

Definition<\/span><\/h2>\n
\n
\"Deepbot\"<\/a> <\/p>\n
Abbildung:<\/b> Deepbot – Autor: Seobility – Lizenz: CC BY-SA 4.0<\/a><\/div>\n<\/div>\n<\/div>\n

Deepbot ist ein \u00e4lterer Begriff f\u00fcr einen Crawler<\/a> von Google, der im Internet Websites durchsucht. In den fr\u00fchen 2000er Jahren waren SEOs und Webmastern zwei verschiedene Crawler bekannt. Einer davon war Deepbot. Der Bot crawlte bis in die tiefsten Ebenen einer Website und folgte dabei jedem verf\u00fcgbaren Link. Der andere Crawler nannte sich Freshbot und war auf \u00c4nderungen von Seiten sowie auf neue Seiten & Ressourcen fokussiert. Seitdem hat Google seine Crawler unz\u00e4hlige Male optimiert, um die Crawling-Frequenz und Effizienz permanent zu verbessern und so eine Erweiterung des Index und eine Verbesserung der Ergebnisse zu gew\u00e4hrleisten. Der Begriff Deepbot wird deshalb mittlerweile sehr viel seltener genutzt als zur Zeit seiner Entdeckung.\n<\/p>\n

Die Funktionsweise von Deepbot<\/span><\/h2>\n

Deepbot war der Name eines von Google genutzten Crawlers. Ein Crawler, auch als Bot oder Spider bezeichnet, ist eine Software zum Navigieren und Dokumentieren von Websites. Er bewegt sich im Internet von Seite zu Seite, indem er Links folgt. Dabei erstellt der Bot eine Art Momentaufnahme jeder Seite.
\nMan ging davon aus, dass Deepbot sich durch eine Website arbeitete, indem er jedem Link auf einer Seite folgte. Diese Theorie best\u00e4tigten Webmaster anscheinend dadurch, dass sie einen Reverse DNS Lookup durchf\u00fchrten und dabei die Serverprotokolle pr\u00fcften. So konnten sie feststellen, ob es sich um einen Crawler von Google handelte und welche Seiten der Bot besucht hatte. Deepbot war wahrscheinlich darauf ausgerichtet, auf der Website so viele Seiten wie m\u00f6glich zu crawlen, ohne dabei Aspekte wie Aktualit\u00e4t zu ber\u00fccksichtigen.\n<\/p>\n

Deepbot vs. Freshbot<\/span><\/h2>\n

Sowohl Deepbot als auch Freshbot waren Googlebots zum Crawling von Websites. Allerdings verhielten sich beide sehr unterschiedlich, wodurch viele SEOs und Webmaster sie voneinander unterscheiden konnten.\n<\/p>\n

Deepbot<\/span><\/h3>\n

Deepbot war ein Bot, mit dem Google eine komplette Website crawlte. Der Googlebot ging die Seite durch und folgte jedem Link, den er finden konnte, um einen vollst\u00e4ndigen \u00dcberblick der Websitearchitektur zu erhalten.\n<\/p>\n

Freshbot<\/span><\/h3>\n

Freshbot war ein Googlebot, der sehr viel mehr Wert auf Aktualit\u00e4t legte. Er suchte nach aktuellem Content und man konnte sehen, wie der Bot Websites \u2013 je nachdem wie oft der Seite neuer Content hinzugef\u00fcgt wurde \u2013 mehr oder weniger regelm\u00e4\u00dfig crawlte.\n<\/p>\n

Aktueller Stand<\/span><\/h2>\n

Die Begriffe \u201cFreshbot\u201d und \u201cDeepbot\u201c sind im SEO-Bereich und in der Marketing-Community kaum noch gel\u00e4ufig. Google hat seit 2002\/2003, als beide Begriffe noch h\u00e4ufig genutzt wurden, viel an der Art und Weise des Crawlings und der Indizierung von Seiten ge\u00e4ndert. Es gibt momentan einige verschiedene Googlebots<\/a>, die durch Google best\u00e4tigt wurden und die sich \u00fcberwiegend auf die verschiedenen von Google betriebenen Suchmaschinen konzentrieren.\n<\/p>\n

\"Deepbot\"\n<\/p>\n

Screenshot eines Abschnittes einer Tabelle von developers.google.com<\/a>, die weitere Informationen zu einigen der wichtigsten, von Google aktuell genutzten Crawlern liefert.\n<\/p>\n

Relevanz f\u00fcr SEO<\/span><\/h2>\n

Bei der Suchmaschinenoptimierung einer Website ist es wichtig zu ber\u00fccksichtigen, wie Google beim Crawling vorgeht. Da das Crawling einen wichtigen Teil der Indizierung ausmacht, kann das Verst\u00e4ndnis, wie Google Crawler arbeiten, und die entsprechende Optimierung einer Website bei SEO Ma\u00dfnahmen im Marketing helfen.\n<\/p>\n

Die Optimierung von Websites f\u00fcr Google Crawler ist heute immer noch wichtig, obwohl sich die Methoden mit der Zeit ge\u00e4ndert haben. Heutzutage gelten Pagespeed<\/a>, Aktualit\u00e4t des Contents, Backlinks<\/a> und diverse andere Faktoren als Top-Faktoren f\u00fcr die Optimierung f\u00fcr Suchmaschinen Crawler. Diese Optimierungen wiederum helfen Deiner Website, von Suchmaschinen gefunden und indiziert zu werden.\n<\/p>\n

Weiterf\u00fchrende Links<\/span><\/h2>\n