Diskussion:Webcrawler

aus Wikipedia, der freien Enzyklopädie

[Bearbeiten] Das Wort "Indexierung"

Heißt es nicht korrekterweise "Indizierung"? Will aber nichts ändern, weil es verlinkt ist.

~~__Würde dem zustimmen.

Es gibt Indexierung und Indizierung. In diesem Fall ist mMn Indexierung gemeint. --Doc ζ 08:49, 24. Jun. 2008 (CEST)

[Bearbeiten] Crawl-Abstände

Was ist mit Werten für die Abstände in denen Crawler über Seiten laufen? Es gibt leider keinen Standard, aber viele Schätzungen, die der gleichen Meinung sind.

Die Abstände mit der Webseiten gecrawlt werden sind sehr unterschiedlich und von vielen Parametern abhängig, wie z.B. dem jeweiligen Crawler (Google, Yahoo etc.) der Frequenz mit der die Seite geändert wird, die Anzahl der Backlinks u.s.w. Eine Angabe wird deshalb schwierig werden. --Doc ζ 08:49, 24. Jun. 2008 (CEST)