Клуб о поиске Яндекса

июнь 2013
Дублирование страниц в индексации яндекса
chanel232
17 июня 2013, 19:42

Помогите пожалуйста настроить файл robots.  у меня  проблема индексирует дубли некоторых страниц сайта , не знаю как правильно их закрыть от роботов вот список дублей страниц не нужных для индексации:  

 

/component/content/article?id=29 ,

/ekskursii?id=30

/surfing?id=30

/?id=29

/shkola?id=30

/index.php/features /component/content/article?id=30

/index.php/typography

/index.php/joomla/member-login?view=reset

/index.php/features/menu-options

/?id=30

/index.php/tutorials/installation

/index.php/features/extensions

balisurfing.ru/shkola/zabronirovat-obuchenie?view=message&layout=message&pf=3&redirect_on_success=

это мой файл  joomla 2.5  Rocket Theme 

# If the Joomla site is installed within a folder such as at

# e.g. www.example.com/joomla/ the robots.txt file MUST be

# moved to the site root at e.g. www.example.com/robots.txt

# AND the joomla folder name MUST be prefixed to the disallowed

# path, e.g. the Disallow rule for the /administrator/ folder

# MUST be changed to read Disallow: /joomla/administrator/

#

# For more information about the robots.txt standard, see:

http://www.robotstxt.org/orig.html

#

# For syntax checking, see:

http://www.sxw.org.uk/computing/robots/check.html


User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /cli/

Disallow: /components/

Disallow: /images/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /logs/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

 

Disallow: /tmp/

какие нужно добавить строчки в файл ? Зарание благодарю за помощь!  

 

 

8 комментариев