XHTMLforum

XHTMLforum (http://xhtmlforum.de/index.php)
-   Fragen, Konstruktive Kritik, Lob / Bekanntmachungen (http://xhtmlforum.de/forumdisplay.php?f=76)
-   -   Sperren für Suchbots (http://xhtmlforum.de/showthread.php?t=33970)

Greg5000 29.12.2004 04:52

Sperren für Suchbots
 
Hallo,

mir ist grade aufgefallen, dass bei Google auch Suchergbenisse dieses Forums gefunden werden. Ich würde es sinnvoll finden, wenn man per robots.txt ein paar Seiten vor dem indexing befreit. Also zB search.php und viewprofile.

hemfrie 29.12.2004 10:55

Hi Greg5000,

aus welchem Grund würdest Du search.php und viewprofile.php nicht indexieren lassen?

:)
hemfrie

Greg5000 29.12.2004 16:24

Weil über die Suche ja keine Posts gefunden werden, die auch so nicht gefunden werden. Es tauchen also viele Posts "doppelt" im (z.B.) Googleindex auf. Das halte ich nicht für sinnvoll.

Bei den Profilen ist es einfach so, dass dort ja keine wirklichen "Inhalte" stehen. Darüber lässt sich natüröich streiten ;)

Jedenfalls hätte es bei beiden noch den Nebeneffekt, dass es Traffic spart. Wahrscheinlich nicht so besonders viel, aber gemessen an dem geringen Aufwand ist das schon ok denke ich.

hemfrie 29.12.2004 16:52

Zitat:

Bei den Profilen ist es einfach so, dass dort ja keine wirklichen "Inhalte" stehen. Darüber lässt sich natüröich streiten Winken
ok, die Inhalte sind wirklich nicht wichtig :)

search.php und viewprofile.php sind nun mit in der robot.txt.

Zitat:

Jedenfalls hätte es bei beiden noch den Nebeneffekt, dass es Traffic spart. Wahrscheinlich nicht so besonders viel, aber gemessen an dem geringen Aufwand ist das schon ok denke ich.
Traffic von Google hab ich eigentlich sehr gerne. Google ist im Moment der "Userlieferant" Nr.1 für dieses Forum. ;)

So schnell wird das Forum auch nicht an die monatliche Trafficgrenze stoßen. Erst vor ca. 2 Wochen wurde das monatliche Transfervolumen von 25 GB auf 500 GB erhöht.

:)
hemfrie

Greg5000 29.12.2004 16:58

Ok, danke :)

Zitat:

Erst vor ca. 2 Wochen wurde das monatliche Transfervolumen von 25 GB auf 500 GB erhöht.
Wow, das ist echt mal eine drastische Maßnahme! 8)

Tapsiturtle 29.12.2004 17:08

Wenn man Tapsiturtle bei Google eingibt ist mein Profil hier das zweite was gefunden wird. :D Das xhtmlforum hat sich wirklich "hochgearbeitet" bei Google.

hemfrie 29.12.2004 17:39

Zitat:

Zitat von Tapsiturtle
Wenn man Tapsiturtle bei Google eingibt ist mein Profil hier das zweite was gefunden wird. :D Das xhtmlforum hat sich wirklich "hochgearbeitet" bei Google.

Na ein Glück das Google jetzt die Mitgliedernamen nicht mehr spidern wird :) Vielleicht hätte das Forum sonst noch Deine eigene Seite vom 1. Platz abgelöst. ;)

@Greg5000

Die drastische Erhöhung der monatlichen Transfergrenze kam durch einen Tarifwechsel, den ich vorgenommen habe. Grund war aber nicht der Traffic, sondern der Speicherplatz. Mit den ursprünglichen 25 GB Traffic würde das Forum zur Zeit auch noch prima auskommen.

Aber trotzdem gut zu wissen, dass das Forum nun weiter wachsen kann :)

:)
hemfrie

psycho_dmr 29.12.2004 19:05

na dann fang doch direkt mal an ...

man könnte nen phpforum machen, oder nen jsforum ... :D

ne ka ..


Alle Zeitangaben in WEZ +2. Es ist jetzt 12:36 Uhr.

Powered by vBulletin® Version 3.8.11 (Deutsch)
Copyright ©2000 - 2024, vBulletin Solutions, Inc.

© Dirk H. 2003 - 2023