[Sabine1]

Ich möchte verhindern, dass die Bilder im Verzeichnis images einer Internetseite in den Index der Suchmaschinen aufgenommen werden. Also bei der Bildersuche egal welcher Suchmaschine sollen keine Bilder aus dem Ordner images der Internetseite angezeigt werden. Nur wie macht man das?
Über die Robots.txt

User-agent: *
Disallow: 
Disallow: /images/

aber dann habe ich gelesen, dass diese Datei nur für das crawlen zuständig ist und nicht für die Aufnahme in den Index.
Und das folgende funktioniert nur bei Google:

User-Agent: Googlebot-Image
Disallow: /

dann bin ich auf folgende Seite gestoßen: https://www.weihmann.de/blog/noindex-bilder-dateien/
habe dann versucht, das ganze an meine Bedürfnisse anzupassen und das ist dabei herausgekommen:

<ifmodule mod_headers.c>
  <FilesMatch "images/*\.jpg">
     Header set X-Robots-Tag "noindex"
  </FilesMatch>
</ifmodule>

was würdet ihr empfehlen?

[protonenbeschleuniger]

Ich hab für so was das in der robots.txt stehen:

User-agent: *
Disallow: /*.gif$
Disallow: /*.jpg$
Disallow: /*.pdf$

Also dein erster Vorschlag sollte funktionieren.

Wo siehst du den Unterschied zum crawlen und aufnehmen in einen Index?
Um in einen Index aufgenommen zu werden, muss ein Inhalt "gecrawlt" werden. Aber diese Regeln sind tatsächlich nur eine Empfehlung an die sich die "höflichen" Robots halten.

Ein wirkliches sperren von Robots ist nicht wirklich möglich. Auch die Methode per header ist nur eine Empfehlung an die sich aber alle grossen Suchmaschinen halten und daher sollte es reichen um nicht in den Index aufgenommen zu werden.

[Sabine1]

Zitat von protonenbeschleuniger

Ich hab für so was das in der robots.txt stehen:

User-agent: *
Disallow: /*.gif$
Disallow: /*.jpg$
Disallow: /*.pdf$

Also dein erster Vorschlag sollte funktionieren.

Wo siehst du den Unterschied zum crawlen und aufnehmen in einen Index?
Um in einen Index aufgenommen zu werden, muss ein Inhalt "gecrawlt" werden. Aber diese Regeln sind tatsächlich nur eine Empfehlung an die sich die "höflichen" Robots halten.

Ein wirkliches sperren von Robots ist nicht wirklich möglich. Auch die Methode per header ist nur eine Empfehlung an die sich aber alle grossen Suchmaschinen halten und daher sollte es reichen um nicht in den Index aufgenommen zu werden.

Danke für deine Antwort und deine Empfehlung!

Zu deiner Frage: auf https://www.weihmann.de/blog/noindex-bilder-dateien/ steht folgendes:
Der weit verbreitete Glauben, dass man den Zugriff durch Suchmaschinen und die Indexierung in der robots.txt verhindern kann, funktioniert an dieser Stelle nicht. Die robots.txt dient der Steuerung des Crawling, aber nicht der Indexierung!

Keine Ahnung, ob das zutrifft oder nicht.

[protonenbeschleuniger]

Das dürfte zutreffen, wobei ich aber nicht genau verstehe wo der Autor den praktischen Unterschied sieht. Wenn ich den Crawler verbiete ein Dokument zu crawlen, wird es nicht indexiert (hab's vorhin auch ausprobiert, die Bilder der entsprechenden Seite werden von google nicht gefunden).

Wobei aber seine Lösung auch nicht schlecht ist, wenn das dein Server kann, würd ich das auch machen.

[Sabine1]

Zitat von protonenbeschleuniger

Das dürfte zutreffen, wobei ich aber nicht genau verstehe wo der Autor den praktischen Unterschied sieht. Wenn ich den Crawler verbiete ein Dokument zu crawlen, wird es nicht indexiert (hab's vorhin auch ausprobiert, die Bilder der entsprechenden Seite werden von google nicht gefunden).

Wobei aber seine Lösung auch nicht schlecht ist, wenn das dein Server kann, würd ich das auch machen.

Danke für deine Antwort und auch danke fürs ausprobieren.
Wenn ich das ganze über die Robots.txt mache, muss diese dann folgendermaßen lauten?

User-agent: *
Disallow: /images/
Sitemap: /sitemap.xml

Oder so?

User-agent: *
Disallow:
Disallow: /images/
Sitemap: /sitemap.xml

[protonenbeschleuniger]

Das leere Disallow macht eigentlich keinen Sinn.

[Sabine1]

Zitat von protonenbeschleuniger

Das leere Disallow macht eigentlich keinen Sinn.

Danke für deine Antwort!