Crawler

Ein Crawler, auch Bot oder Spider genannt, ist ein Programm, das Suchmaschinen nutzen, um das Internet nach Informationen zu durchsuchen.

Der Content einer Website wird gecrawled, wenn der Bot eine Website und die damit verknüpften Seiten durchsucht.

Je mehr Fresh Content, im Idealfall ausschließlich Unique Content, der Crawler dabei entdeckt, desto besser schneidet die Website im Google Ranking ab.

Zur Glossarübersicht