[laborix]

Hallo miteinander,

in einem CMS-System (mein eigenes) kann man eine Inhaltsseite in der Navigation verstecken/unsichtbar machen. Diese Inhaltsseite kann man, wenn man weiss wie die URL lautet, aufrufen und sich ansehen. Es existiert kein Link innerhalb des CMS-Systemes auf diese einzelne versteckte/unsichtbare Inhaltsseite. Auch von extern gibt es keinen Link auf diese Inhaltsseite.

Mir geht es darum, diese Methode zu verstehen. Hintergedanke ist, interne nur mir bekannte Testcases für Browser Tests über solche Inhaltsseiten zu realisieren. Wenn diese dann funktionieren, kommt der Haken bei versteckt/unsichtbar weg und die Inhaltsseite ist danach öffentlich. Oder einen Seitenentwurf abzulegen und nach mehreren Korrekturen veröffentlichen.

Hat jemand Erfahrung, ob solche in der Navigation versteckten/unsichtbaren Inhaltsseiten auf den Index in Suchmaschinen kommen, wenn das CMS-System regelmäßig gecrawlt wird?

[Praktikant]

Google und co crawlen, wenn überhaupt, nur Nameserver. Die Domains, die dann gefunden werden werden aufgerufen und in den Index gesetzt. Wird eine Domain alle über Links erreichbaren Seiten werden natürlich auch indexiert.

Wenn eine Seite nicht in der Navigation ist, dann wird sie nicht indexiert. Allerdings gibt Chrome und ich glaube auch die Google ToolBar Informationen an Google weiter. Somit können dann auch Testseiten in den Index bekommen.

Du kannst das aber mit einer robots.txt verhindern.

[laborix]

Zitat von Praktikant

... Wenn eine Seite nicht in der Navigation ist, dann wird sie nicht indexiert. ...

Schon praktische Erfahrungen damit?

Zitat von Praktikant

... Allerdings gibt Chrome und ich glaube auch die Google ToolBar Informationen an Google weiter. Somit können dann auch Testseiten in den Index bekommen. ...

Vermutung oder Wissen?

Prinzipiell geht es mir darum, ob ich Testcases oder Entwürfe ohne große Bedenken machen kann. Wenn ich diese Seiten dann für gut befinde, sollen sie auf den Index. Aber nur über die CMS-Administration durch Entfernen des Hakens versteckt/unsichtbar und nicht noch zusätzlich durch manuelles Bearbeiten der robots.txt

[Webcoder]

Hi laborix

Meine Erfahrungen mit Google sind leider ganz andere. Es wird alles indexiert was irgendwie gefunden wird. Und leider löscht Google auch so schnell nix aus dem Index heraus, selbst wenn es über eine robot.txt gesperrt wurde.

Zur Lösung deines Problems sehe ich 2 Wege.

Weg 1:
Du arbeitest mit Meta-Tags, welche die Indexierung verhindern (siehe Selfhtml). Wobei ich mir nicht sicher bin, dass diese Methode 100%ig sicher ist. Die Umsetzung kann über einen Parameter aus der Datenbank in Verbindung mit PHP erfolgen.

Weg 2:
Du prüfst über Session ob der Besucher ein Mod oder Admin ist und gibst nur dann die Seite aus. Andernfalls wird die Fehlerseite ausgegeben. Somit ist die Seite nicht im Netz und kann auch nicht indexiert werden. Diese Methode scheint mir sicherer zu sein.


Es gibt bestimmt auch ein Weg über die robot.txt eine Indexierung zu verhindern, nur wird der wohl nicht so ganz einfach. Entweder müsstest du die robot.txt jedes Mal umschreiben, was wohl automatisch über ein PHP-Script möglich aber ziemlich aufwendig sein dürfte.

Oder der Link zur Seite beinhaltet einen extra Ordner in Namen der im PHP abgefangen und ausgewertet wird. Also sowas (http://deine-domain.TLD/Testcase/seite), wobei der Ordner Testcase nicht existieren muss. Trotzdem könntest du dann den Ordner in der robot.txt für Indexierung sperren. Nach Freigabe würde sich der Link zur Seite dann ändern, etwa so (http://deine-domain.TLD/Webseiten/seite).


Ich hoffe du findest ein paar hilfreiche Anregungen in der Antwort.


Mit freundlichem Gruß
Webcoder


PS: Frage an den Admin, lässt sich die automatische Umwandlung der angegeben Beispieldomains irgendwie verhindern?

[Praktikant]

Ich habe selber nur Erfahrungen damit gemacht einen Ordner zu sperren, der immer extiert. Wir haben eine Art "Vorschau-Ordner", in dem wir für Kunden selber entwickeln. Dieser ist per robots.txt gesperrt und das funktioniert auch gut, ist aber eben ein statisches Verzeichnes.

Zitat von Webcoder

PS: Frage an den Admin, lässt sich die automatische Umwandlung der angegeben Beispieldomains irgendwie verhindern?

Ich bin zwar nicht der Admin, aber ich weiß wie es geht
Unter "Zusätzliche Einstellungen" gibt es in "Verschiedene Einstellungen" eine Checkbox, die das macht. Ist der Hacken bei "Bei externen Links den Seitentitel der Zielseite als Linktext verwenden." nicht gesetzt, dann wird das nicht gewandelt

[Webcoder]

Zitat von Praktikant

Ich bin zwar nicht der Admin, aber ich weiß wie es geht
Unter "Zusätzliche Einstellungen" gibt es in "Verschiedene Einstellungen" eine Checkbox, die das macht. Ist der Hacken bei "Bei externen Links den Seitentitel der Zielseite als Linktext verwenden." nicht gesetzt, dann wird das nicht gewandelt

Danke für den Tipp, hab es geändert. Wobei man die Einstellungen wohl für jeden Post vornehmen muss.

[Praktikant]

Zitat von Webcoder

Danke für den Tipp, hab es geändert. Wobei man die Einstellungen wohl für jeden Post vornehmen muss.

Ja, das ist anscheinend wirklich so.... Zumindest kann ich im Kontrollzentrum nichts entsprechendes finden.

[laborix]

So, ich habe gestern Abend eine relativ stabile Fassung meines CMS-System ins Netz gestellt und werde mit einem (relativ unwichtigen) Live-System Erfahrungen sammeln. Die Seite wird regelmäßig gecrawlt und zwischendurch auch mal von experimentierfreudigen Script-/URL Manipulations (spider?/bots?)/Script Kiddies? besucht.

Ich lasse mich jetzt einfach mal überraschen