|
|
|
#1
|
||||
|
||||
|
kann ich auch bestätigen, dass es schneller ist, hab zwar selber nen breitband anschluss
__________________
gruss san |
|
#2
|
||||
|
||||
|
Es kann sein, dass es langsamer wird, wenn Google seine Spider aufs Forum loslässt.
__________________
|
|
#3
|
||||
|
||||
|
Die Spider hab ich gerade (hoffentlich) auf das Archiv (das offizielle, nicht unser eigenes) mittels einer robots.txt umgeleitet
![]()
__________________
Zitat:
|
|
#4
|
||||
|
||||
|
Zitat:
Ich denke die verursachen eine Menge Traffic, wenn die immer wieder die riesigen HTML-Seiten saugen.
__________________
|
|
#5
|
||||
|
||||
|
Es halten sich auch nicht alle Suchmaschinen an die Vorgaben der robots.txt.
Google allerdings sollte sich allerdings dran halten (Lycos macht es nicht....)
__________________
Zitat:
|
|
#6
|
||||
|
||||
|
Im Archiv sind Links auf die Orignialbeiträge. Diese werden mit dem script "showthread.php" geöffnet, das aber nicht in der disallow-Section der robots.txt aufgeführt ist.
Jeder gültige link, der nicht durch die robots.txt verboten ist, wird von google verfolgt. ![]()
__________________
|
|
#7
|
||||
|
||||
|
Nein, die Beiträge im 'Archiv' werden durch eine eigene Routine geöffnet, das hat nichts mit der Showthread zu tun.
Aber die hatte ich in der robots.txt wohl vergessen, thx für den Hinweis ![]()
__________________
Zitat:
|