Анонсы с пометкой «как составить правильный robots.»

Чтобы лишний раз робот не гулял по сайту, нужен этот файл

Блогосфера Чтобы лишний раз робот не гулял по сайту, нужен этот файл

Нужно защитить сайт от лишней индексации поисковыми роботами отдельных частей Вашего блога. Для этого умные люди придумали Файл robots.txt. Он состоит из записей, каждая из которых состоит из двух полей: строки с названием клиентского приложения (user-agent), и одной или нескольких строк, начинающихся с директивы Disallow. Robots.txt должен создаваться в текстовом формате Unix. Обсудить »
Как составить правильный robots.txt?База начинающего блоггера!

Блогосфера Как составить правильный robots.txt?База начинающего блоггера!

Здравствуйте, дорогие читатели моего блога! Сегодня хотелось бы посвятить пост такому важному файлу, как robots.txt.Как составить правильный robots.txt и для чего он нужен, все эти подробности мы рассмотрим в ходе статьи.В принципе каждый начинающий блоггер создает грубую ошибку, когда просто забывает составить или составляет неправильный файл robots.txt. Зачем нам нужен файл robots.txt? Обсудить »

Спонсоры

Авторизация

Имя:
Пароль:
 

Друзья проекта

Активность на сайте