RedBaron
"myXOOPs"-Fortgeschrittener
Gepostet am:20.08.2008 00:52
#6
die Hinweise zur robots.txt kenne ich schon lange. Geht auch nicht drum, den Bot auszusperren. Es war mehr ne Frage, ob jemand ähnliche Erfahrungen gemacht hat und rätseln, wieso ein Bot plötzlich so viele Anfragen sendet. Der Majestic Bot kommt schon seit mind. einem Jahr auf meine Seiten. Bisher immer moderate Anfragen, die keine Serverlast erzeugen. Extrem viele Anfragen waren erst in den letzten Tagen.
Bevor ich da einen Bot aussperre, warte ich lieber ab, ob bei zu vielen Anfragen auf Dauer bleibt oder wieder einpegelt.
Re: www.majestic12.co.uk Bot ist lästig
20.08.2008 00:52 Hallo LupusC,die Hinweise zur robots.txt kenne ich schon lange. Geht auch nicht drum, den Bot auszusperren. Es war mehr ne Frage, ob jemand ähnliche Erfahrungen gemacht hat und rätseln, wieso ein Bot plötzlich so viele Anfragen sendet. Der Majestic Bot kommt schon seit mind. einem Jahr auf meine Seiten. Bisher immer moderate Anfragen, die keine Serverlast erzeugen. Extrem viele Anfragen waren erst in den letzten Tagen.
Bevor ich da einen Bot aussperre, warte ich lieber ab, ob bei zu vielen Anfragen auf Dauer bleibt oder wieder einpegelt.