Проверка роботс
Автор Forexlabor задал вопрос в разделе Другие языки и технологии
Как проверить наличие на сайте файла robots.txt ? и получил лучший ответ
Ответ от Galagan[гуру]
А зайти в корневой каталог сайта через FTP менеджер не пробовали? Это же проще некуда. "Сеть и работа в интернете. 2-ая страница. "
Ответ от Андрей[активный]
файл роботс всегда лежит в корне (иначе в нем смысла нет) найти его просто мойсайт. рф/роботс. тхт если открывается то все ок если не открывается то все плохо! А насчет правельности составления все зависит от скрипта
файл роботс всегда лежит в корне (иначе в нем смысла нет) найти его просто мойсайт. рф/роботс. тхт если открывается то все ок если не открывается то все плохо! А насчет правельности составления все зависит от скрипта
Ответ от Владимир Судьин[гуру]
Для проверки работоспособности этого файла воспользуйся сервисом
Для проверки работоспособности этого файла воспользуйся сервисом
Ответ от 3 ответа[гуру]
Привет! Вот подборка тем с ответами на Ваш вопрос: Как проверить наличие на сайте файла robots.txt ?
По robots.txt в Яше.
Вообще-то, достаточно только - Disallow: /index2.php
Остальные -Disallow: /index2.php/ и
подробнее...