яндекс роботс
Автор Ѐоман Ким задал вопрос в разделе Интернет
Что должно быть в robots.txt чтобы быстро яндекс индексировал сайт? и получил лучший ответ
Ответ от Ѐоман Магдийчук[гуру]
Помоему етот файл robots.txt наоборот для запрета поисковикам индексировать конкретные страницы сайте которые в нём указать. так что если нада чтоб яндекс проиндексировал весь сайт то там ничего не должно быть.
П. С а у тебя там вот такие строки
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Sitemap: ссылка - films.ucoz. kz/sitemap. xml
Sitemap: ссылка - films. ucoz. kz/sitemap - forum. xml
Sitemap: ссылка - films.ucoz. kz/sitemap - shop. xml
(без пробелов естестно. )
онизапрещают индексирование всего твоего сайта для всех поисковиков. Удали.
Роботс не влияет на скорость индексации. Сделайте пару яндекс. блогов и с них ссылки на сайт. Робот прибежит в течение суток.
Сделай также сайтмэп с автоматическим обновлением, если сайт на CMS. А правила написания роботс смотри в яндекс-справке, раздел вэб-мастер.
там должен быть прописан путь к карте сайта, а вообще для индексации нужны обратные ссылки на твой сайт и на юкозе в течении первого месяца запрет на индексацию заложен для всех поисковых ботов.
робот. тхт — файл ограничения доступа к содержимому роботам на сервере, он наоборот закрывает доступ к индексации! выдали его...
Обращаймя выдвину сайт в топ - быстро и не дорого)