robots что это



Автор Екатерина Артеменко задал вопрос в разделе Другие языки и технологии

Сайт не индексируется поисковиками. Может это быть связано с тем, что файл для роботов-robots.txt.dist, а не robots.txt? и получил лучший ответ

Ответ от Игорь Зона[гуру]
Конечно

Ответ от Ai 0.0.1 beta[гуру]
Это значит что файла попросту нет. Но он тут и не причем. Возможно у тебя бан.
Удали его вообще. В нем обычно пишется то что не нужно индексировать. Если из-за переадресации яндекс не забанил твой сайт на полгода, тогда проиндексирует но не сразу весь, а постепенно частями.

Ответ от Дмитрий не надо знать[гуру]
Нужно смотреть сам сайт. И сколько ему лет или месяцев) что за контент там у вас и есть ли он вообще и какой.. . Файл роботикс важен) но и без него нормально индексируются сайты. Хочешь помощи? Пиши мне в скайп Art_dsugar.

Ответ от Владимир Немцов[гуру]
Обратите внимание на контент, если копипаст с других ресурсов, то индексации не дождетесь.

Ответ от Sh![гуру]
robots.txt и название файла менять нельзя

Ответ от 3 ответа[гуру]
Привет! Вот подборка тем с ответами на Ваш вопрос: Сайт не индексируется поисковиками. Может это быть связано с тем, что файл для роботов-robots.txt.dist, а не robots.txt?

Disallow: /*ru что это значит в robots.txt?
Файл robots.txt
Все поисковые роботы при заходе на сайт в первую очередь ищут файл robots.txt.
подробнее...

Для индексации Яндекс просит загрузить robots.txt в корень, см+!!!
Подождите от 2х недель до месяца и Ваш robots.txt станет каким нужно )) Или активируйте одну из
подробнее...
спросили в Тэги Atari
что обозначают эти строчки? кто может их прокоментировать?
Примерно вот так:
< meta name="Author" content="Автор сайта" >
< meta
подробнее...

Как сменить доменное имя
совсем не потерять позиции сложновато.
Что Вам придется сделать, что бы получить минимальные
подробнее...
Ответ от 3 ответа[гуру]
Привет! Вот еще темы с похожими вопросами:
спросили в Интернет
Есть ли у Гугла (Google) контакты службы поддержки Вебмастер (Инструменты для веб-мастеров)?
Панель вебмастера Google:

На главной странице выводится три панели с информацией и
подробнее...

Какая конкретная польза от карты сайта?
Нельзя сказать, что карта сайта – необходимая для каждого проекта вещь, однако она поможет вашим
подробнее...
спросили в Cardcaptor Sakura Natsume
Посоветуйте прикольное аниме или мультик. Посоветуйте какое нибудь прикольное аниме. Только не многосерийные.
Когда задаете подобные вопросы, то указывайте жанры, которые вы предпочитаете. Или уже полюбившиеся
подробнее...

После редактирования страницы сайта, в адресе появляется окончание? clear_cache=Y Что это?
GET переменная, судя по имени, очистить кэш. Нужно для того чтоб на странице сразу отображались
подробнее...
спросили в User ccu User cek
Как написать файл robots.txt?
Формат файла robots.txt Формат файла robots.txt - особый. Он состоит из записей, каждая из которых
подробнее...
спросили в Интернет
Google не индексирует сайт, не загружает sitemap, не видит robots.txt
Ну. . на новые сайты гугл не всегда сразу приходит. .
"Общая ошибка HTTP: Имя домена не
подробнее...
спросили в Интернет
Как сделать Анализ robots.txt
Пишешь файл робот. На Яндексе есть пример
Затем пишешь файл sitemap.txt где перечисляешь все
подробнее...
спросили в Интернет
как убрать файл robots.txt с сайта ucoz? а то яндекс и гугл тупят что то
Робота ты сможешь убрать только через 30-40 дней. Только тогда сможешь добавить сайт в поисковик.
подробнее...
спросили в User ccu User cek
Что надо сделать для того, чтобы сайт стал индексироваться в Яндексе?
Что Вас смущает? В robots.txt прописано указание роботам всех поисковиков индексировать сайт?
подробнее...
спросили в Интернет
Что такое чат бот?

Бот (англ. bot, сокр. от robot ) — программа, автоматически выполняющая действия на компьютере
подробнее...
 

Ответить на вопрос:

Имя*

E-mail:*

Текст ответа:*
Проверочный код(введите 22):*