Robot

Ein Robot arbeitet im Auftrag für Suchmaschinen. Es handelt sich um ein Programm, das auf der ständigen Suche nach neuen Inhalten ist. Seine Aufgaben sind die Erfassung, Bewertung und Indexierung von Daten. Ein Synonym ist „Bot“, „Spider“ oder „Crawler“. Der Robot erkennt die bestehenden Links zwischen Webseiten. Sowohl interne als auch externe Links werden erfasst. Informationen, die beispielsweise durch einen Login gesperrt sind, sind für den Robot unzugänglich.