Robots закрыть от индексации
Автор Дмитрий Николаевич задал вопрос в разделе Другие языки и технологии
Как правильно закрыть от индексации постраничную навигацию сайта в файле robots.txt? и получил лучший ответ
Ответ от Gruz[гуру]
подробно эти причины были описаны на странице блога «Яндекс. Поиска» : «Почему всё находится»
попробуйте так
User-agent: Yandex
Allow: /cgi-bin
Disallow: /
– запрещает скачивать всё, кроме страниц, начинающихся с ‘/cgi-bin’.
вот здесь есть спец для вордпресса
Источник: ссылка
Ответ от 3 ответа[гуру]
Привет! Вот подборка тем с ответами на Ваш вопрос: Как правильно закрыть от индексации постраничную навигацию сайта в файле robots.txt?
спросили в Интернет Сайт
как долго индексируется сайт в яндексе? неделю ждем. ускорить процесс можно?
Индексация сайта может быть произведена двумя способами. Первый – это добавление сайта через
подробнее...
как долго индексируется сайт в яндексе? неделю ждем. ускорить процесс можно?
Индексация сайта может быть произведена двумя способами. Первый – это добавление сайта через
подробнее...
Как узнать по какой ссылке переходят или уходят посетители с моего сайта.В счетчиках этой статистики не нашел....
Есть такие счетчики правда они платные, я про то что бы посмотреть куда уходят,. .
А откуда
подробнее...