Archive

Crawler

Der Crawler, oder auch Web-Crawler, ist ein Computerprogramm, welches Links im World Wide Web verfolgt und so Daten über Webseiten sammelt. Die Crawler werden hauptsächlich von Suchmaschinen zum Zweck des Erfassens von Webseiten verwendet. Doch auch die Ermittlung von veränderten, verschobenen oder gelöschten Inhalten gehören zu ihren Aufgaben. Der Crawler beginnt seine Arbeit durch einen […]

von Bernhard Koch | 0 Reaktionen |