Verhindern, dass Suchroboter von Triggern Download von Bild von RETS Server

Question

Ich baue eine Objekt Website für einen Kunden, wobei ich alle meine Daten vom RETS Server werden zu bekommen. Es gibt etwa 5.000 + Objekte im DB so dass ich die Bilder für jede Eigenschaft im Fluge (im Gegensatz zu nicht überlastet meinen Server) ziehen.

Alles funktioniert einwandfrei, aber ich nur die Bilder ziehen, wenn ein Benutzer die bestimmte Eigenschaft betrachtet. Also meine Frage ist: wird auch eine Suche Bot auslösen Bild herunterladen ??

Wenn ja, wie kann ich verhindern, dass ??

Answer 1

Abhängig von der Suche bietet. Wenn Ihre Bilder alle von einer bekannten und wohlgeformten URL serviert werden, dann können Sie Bots sagen, nicht sie trafen, indem eine disallow Zeile in der robots.txt-Datei hinzufügen:

User-agent: *
Disallow: /images/