robots txt sitemap



Sitemap в robots

Автор DV задал вопрос в разделе Интернет

Google не индексирует сайт, не загружает sitemap, не видит robots.txt и получил лучший ответ

Ответ от Cheery[гуру]
Ну. . на новые сайты гугл не всегда сразу приходит. .
"Общая ошибка HTTP: Имя домена не найдено "
говорит о том, что не смог резолвить имя вашего сайта. . проверьте, что не сделали ошибки, когда указывали путь к sitemap.xml
robots.txt тоже в порядке.
тут регистрировались?
хотя скорее всего да, иначе как бы sitemap отправили. .
структуру xml файла глянул - тоже все в порядке. у меня такая же, разве что в генераторе, что я сам написал, не использовал перенос после первого urlset. ну и я использую больше аттрибутов у loc.. например указывая частоту обновлений.
robots.txt можете проверить там же в разделе "Crawler access"
ну и добавьте еще в robots.txt ссылку на sitemap
Sitemap:
Cheery
Высший разум
(198948)
Если yandex видит, то и остальные должны.. если, конечно, не заблокировали его специально )
возможно вы недавно поменяли IP адрес в записях домена и у гугла не обновились DNS записи, поэтому не смог резолвить адрес домена. об этом ошибка, которую я процитировал, и говорит.
не подключиться не может, а именно резолвить.

Ответ от Алена Новикова (Ефимцева)[новичек]
Трудно сказать. Может Гоше не нравиться большое количество внешних ссылок и просто банит. Внимательно гляньте их правила. Удачи.

Ответ от 3 ответа[гуру]
Привет! Вот подборка тем с похожими вопросами и ответами на Ваш вопрос: Google не индексирует сайт, не загружает sitemap, не видит robots.txt
Стандарт исключений для роботов на Википедии
Посмотрите статью на википедии про Стандарт исключений для роботов
 

Ответить на вопрос:

Имя*

E-mail:*

Текст ответа:*
Проверочный код(введите 22):*