Записи с меткой «robots.txt»
Составляем файл robots.txt
22.03.2011 | 
Автор: 
Для начала Теория.
Robots.txt- это текстовый файл, предназначенный для роботов различных поисковых систем, расположенный на сайте/блоге (в корне папки с файлами интернет ресурса).
В нем web- мастер перезаписывает правила индексации интернет ресурса. Эти правила можно прописать как для всех поисковых роботов сразу, так и для каждого из них по отдельности.
То есть, текстовый файл robots.txt, нужен для запретов к индексации определенных страниц интернет ресурсов.
Рубрика: Seo | 
Метки: Allow, Disallow, robots.txt, Sitemap, sitemap.xml, User-agent | 
Нет комментариев »
Рекламное производство в Орехово-Зуево предоставляет услуги по разработке и изготовлению полиграфической и широкоформатной продукции.
Контакты:
+7 (965) 377-09-06;
+7 (965) 376-02-38; rpcpegas@gmail.com