Как запретить Google индексировать или отслеживать что-либо внутри каталога

У меня есть сайт WordPress и iframe, src которого имеет вид 'http://my-website.com/www.downloadedwebsite.com/index.html». Мне пришлось загрузить веб-сайт iframe, потому что я изменяю в нем несколько вещей, и для этого требуется то же происхождение. На этот URL нет обратных ссылок - только один iframe, однако я вижу, что Google проиндексировал его (плохо!).

Как запретить Google индексировать или отслеживать все, что находится внутри "http://my-website.com/www.downloadedwebsite.com/"?


person Gintas_    schedule 09.05.2017    source источник


Ответы (2)


Google, безусловно, до сих пор не связывает содержимое во фрейме с родительской страницей. Таким образом, на ваш рейтинг страницы это не повлияет. Но вы можете остановить его с помощью файла robots.txt.

в robots.txt запретить путь.

Пользовательский агент: *

Запретить: /имя-папки/

person Ajay Dhul    schedule 09.05.2017

Вы пробовали использовать robots.txt?

Для одной страницы вы также можете использовать метатег

<head>
<meta name="robots" content="noindex">
</head>
person thommyberglund    schedule 09.05.2017