яндекс роботс
Автор Ѐоман Ким задал вопрос в разделе Интернет
Что должно быть в robots.txt чтобы быстро яндекс индексировал сайт? и получил лучший ответ
Ответ от Ѐоман Магдийчук[гуру]
Помоему етот файл robots.txt наоборот для запрета поисковикам индексировать конкретные страницы сайте которые в нём указать. так что если нада чтоб яндекс проиндексировал весь сайт то там ничего не должно быть.
П. С а у тебя там вот такие строки
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Sitemap: ссылка - films.ucoz. kz/sitemap. xml
Sitemap: ссылка - films. ucoz. kz/sitemap - forum. xml
Sitemap: ссылка - films.ucoz. kz/sitemap - shop. xml
(без пробелов естестно. )
онизапрещают индексирование всего твоего сайта для всех поисковиков. Удали.
Роботс не влияет на скорость индексации. Сделайте пару яндекс. блогов и с них ссылки на сайт. Робот прибежит в течение суток.
Сделай также сайтмэп с автоматическим обновлением, если сайт на CMS. А правила написания роботс смотри в яндекс-справке, раздел вэб-мастер.
там должен быть прописан путь к карте сайта, а вообще для индексации нужны обратные ссылки на твой сайт и на юкозе в течении первого месяца запрет на индексацию заложен для всех поисковых ботов.
робот. тхт — файл ограничения доступа к содержимому роботам на сервере, он наоборот закрывает доступ к индексации! выдали его...
Обращаймя выдвину сайт в топ - быстро и не дорого)
почему робот яндекса не заходит?
Яндекс- искалка придурковатая.
Если файл роботс составлен без ошибок, ждите, покуда Платон
подробнее...
как убрать файл robots.txt с сайта ucoz? а то яндекс и гугл тупят что то
Робота ты сможешь убрать только через 30-40 дней. Только тогда сможешь добавить сайт в поисковик.
подробнее...
Поисковики не видят сайт, ключевые слова, описание.
Откройте файл robots txt и всё оттуда удалите.
На всякий случай почитайте:
подробнее...
По robots.txt в Яше.
Вообще-то, достаточно только - Disallow: /index2.php
Остальные -Disallow: /index2.php/ и
подробнее...