Diskussion:Webcrawler

message: Heißt es nicht korrekterweise "Indizierung"? Will aber nichts ändern, weil es verlinkt ist.
~~__Würde dem zustimmen.
: Es gibt Indexierung und Indizierung. In diesem Fall ist mMn Indexierung gemeint. --Doc ζ 08:49, 24. Jun. 2008 (CEST)
replies: text: Das ist nicht ganz richtig. In dem Fall ist das computergestützte Indexierung, und das ist dann wiederumg Indizierung. --Mullinger 07:30, 21. Jan. 2009 (CET)
thread_title:  Das Wort "Indexierung" 

message: Was ist mit Werten für die Abstände in denen Crawler über Seiten laufen? Es gibt leider keinen Standard, aber viele Schätzungen, die der gleichen Meinung sind.
: Die Abstände mit der Webseiten gecrawlt werden sind sehr unterschiedlich und von vielen Parametern abhängig, wie z.B. dem jeweiligen Crawler (Google, Yahoo etc.) der Frequenz mit der die Seite geändert wird, die Anzahl der Backlinks u.s.w. Eine Angabe wird deshalb schwierig werden.  --Doc ζ 08:49, 24. Jun. 2008 (CEST)
thread_title:  Crawl-Abstände 

message: ist damit der Webcrawler obsolet?   Mit der Software sendet der Webserver Änderungen und neue Seiten an Suchmaschinen. -- Cherubino 03:05, 26. Jan. 2009 (CET)
replies: text: Nein, es hilft den Suchmaschinen (und damit dem Webcrawler) nur die vorhandenen Seiten besser zu finden und zu aktualisieren. --Doc ζ 08:35, 26. Jan. 2009 (CET)
thread_title:  Google Sitemap Generator 

message: Wir haben noch keinen Artikel zum übergeordneten Lemma Crawler und ich denke es wird hier nicht sehr viel wichtiges spezifisch zu Webcrawlern gesagt, was nicht unter dem Lemma Crawler gut aufgehoben wäre, hingegen gibt es durchaus erwähnenswertes über Crawler-Bots zu sagen, die nicht unbedingt im Web unterwegs sind.
Daher würde ich diesen Artikel gerne erstmal nach Crawler verschieben und dazu leicht anpassen.--Wondigoma 10:00, 8. Okt. 2009 (CEST)
replies: text: Wenn es etwas zu sagen gibt, dass nicht in Webcrawler oder Bot enthalten ist, dann kann man einen entsprechenden Artikel Crawler  neu anlegen. Verschieben sollte man diesen Artikel jedenfalls nicht. --79.222.129.109 10:32, 8. Okt. 2009 (CEST)
thread_title:  Verallgemeinerung 

message: Ein weiterer Verwendungszweck von Webcrawlern ist das Auffinden von urheberrechtlich geschützten Stadtplänen im Internet.
Das scheint mir eine eher seltene Spezialanwendung von Crawlern zu sein. Ist das wirklich relevant für das Thema Webcrawler? Wenn ja, dann sollte das zumindest irgendwie belegt werden. --Johannes Koch 22:18, 13. Mai 2010 (CEST)
thread_title:  Auffinden von Stadtplänen 

message: die pdf datei auf der in referenz 1 (webcrawler 40% des traffics) gewiesen wird, gibt es nicht mehr. Ich hab auch auf google auf den ersten blick nichts neues passendes gefunden, es wird oft angemerkt, dass der verursachte traffic (zu) hoch ist. -- 84.139.114.144 19:19, 30. Jul. 2011 (CEST)
thread_title:  Referenz 1 404 

message: * http://webdocs.cs.ualberta.ca/~macg/Pubs/2002/ICCCN/crawlers.pdf
– GiftBot (Diskussion) 21:20, 8. Okt. 2012 (CEST)
replies: text: Hier wiedergefunden. -- IvlaDisk. 13:26, 19. Nov. 2012 (CET)
thread_title:  Defekter Weblink 

message: "Auf diese Weise können theoretisch alle erreichbaren Seiten des WWW gefunden werden". Eigentlich doch nur verlinkte Seiten, oder? Also besser "Auf diese Weise können theoretisch alle verlinkten Seiten des WWW gefunden werden" ? --85.181.21.81 14:07, 30. Mai 2013 (CEST)
replies: text: Danke, ich hab's mal geändert. --Doc ζ 16:50, 30. Mai 2013 (CEST)
thread_title:  Das ganze WWW?