Запретить поисковому роботу запускать загрузку изображения с сервера RETS

Я создаю веб-сайт недвижимости для клиента, с помощью которого я буду получать все свои данные с сервера RETS. В базе данных более 5000 свойств, поэтому я извлекаю изображения для каждого свойства на лету (чтобы не перегружать свой сервер).

Все работает правильно, но я загружаю изображения только тогда, когда пользователь просматривает определенное свойство. Итак, мой вопрос: будет ли поисковый бот также запускать загрузку этого изображения??

Если да, то как я могу предотвратить это??


person Booski    schedule 20.09.2010    source источник


Ответы (1)


Зависит от поискового бота. Если все ваши изображения подаются с какого-то известного и правильно сформированного URL-адреса, вы можете указать ботам не нажимать на них, добавив строку запрета в ваш файл robots.txt:

User-agent: *
Disallow: /images/
person Alex Howansky    schedule 13.10.2010