robot.txt (1 Viewer)

[Цербер]

В общем данный файл предназначен только для того что бы запретить поисковикам индексацию определённых дирректорий, файлов, либо запретить индексацию всего сайта.Если что то непонятно, прошу в асю=)

 

[Цербер]

помогите сделать robot.txt тоесть что должно приблизительно в него входить,в описаниях я так ничего и не понял на других ресурсах

 

[BegleZZZ]

User-agent:*Disallow: /user/User-agent: - данная инструкция относится ко всем поисковым роботамDisallow: - запрет на индексацию дирректории /user/Если хочешь запретить индексацию ещё одной дирректории например image добавляем Disallow: /image/И в общем получаеться следующая картинаUser-agent:*Disallow: /user/Disallow: /image/Всем роботам запрещена индексация дирректорий /user/ и /image/В этом же духе можно запретить и другие файлы и папки для индексации

 

[Deleted User]

можно через Page Promoter создать этот файл!!!

 

[SErr0r]

Загрузка...

robotstxt.orgОффтоп

 

[BegleZZZ]

< -system: при конвертации необходимо было добавить- >

 

[Fits]

.: А что нельзя там писать, чтобы не запретить \&quot;случайно\&quot; индексацию всего сайта (кроме index.php)?