Индексация профилей

[hrustek]

Подскажите как в robots закрыть индексацию профилей такого вида /index.php?action=profile;u=1
Disallow: /*action # не подходит, так как нужна индексация таких линков /index.php?action=live

[Yworld_garry]

1. Вариант:
Disallow: /*profile

2. Вариант:
Allow: /*live
Disallow: /*action

[hrustek]

благодарю.

[Dexus]

А почему у меня при наличии в robots строки Disallow: /*action в индекс все равно попадают страницы типа:
...forum/index.php?action=profile;area=showposts;sa=topics;u=517
...forum/index.php?action=profile;area=statistics;u=3

[Жека]

Disallow: /*action в индекс все равно попадают страницы типа:

А эта строчка с самого начала была?
Если нет, то вполне могли остаться старые страницы в индексе...

[Dexus]

Эта строчка давно, но надо проверить на свежих профилях, может правда только старые там.

[maestrosite.ru]

А почему у меня при наличии в robots строки Disallow: /*action в индекс все равно попадают страницы типа:
...forum/index.php?action=profile;area=showposts;sa=topics;u=517
...forum/index.php?action=profile;area=statistics;u=3

Этим вы чего хотели добиться:

Allow: /forum/index.php

?

[Dexus]

Это я хотел добиться индексации главной страницы с index.php.
Спасибо, что ткнули носом, сайтом занимаюсь набегами, когда время есть, поэтому за всем не успеваю.
А страница все-таки уже давно без index.php индексируется - убрал строку.

[maestrosite.ru]

А страница все-таки уже давно без index.php индексируется - убрал строку.

Код Выделить Развернуть


<link rel="canonical" href="http://krasota-zaprosto.ru/forum/" />

[hrustek]

Не помогло. Подскажите пожалуйста, что не правильно.

User-agent: Mediapartners-Google
Disallow:

User-agent: Googlebot-Mobile
Allow: /*wap
Allow: /*imode
Disallow: /

User-agent: YandexImageResizer
Allow: /*wap
Allow: /*imode
Disallow: /

User-agent: Googlebot
Allow: /*live
Allow: /$
Allow: /*board
Allow: /*topic
Allow: /*forum$
Allow: /*page
Allow: /*action=.xml
Disallow: /share42
Disallow: /*wap
Disallow: /*board=*wap
Disallow: /*topic=*wap
Disallow: /*topic=*.msg
Disallow: /*topic=*.new
Disallow: /*PHPSESSID
Disallow: /*profile
Disallow: /*action
Disallow: /
Disallow: /*;

User-agent: Yandex
Allow: /$
Allow: /*live
Allow: /*board
Allow: /*topic
Allow: /*forum$
Allow: /*page
Allow: /*action=.xml
Disallow: /share42
Disallow: /*wap
Disallow: /*board=*wap
Disallow: /*topic=*wap
Disallow: /*topic=*.msg
Disallow: /*topic=*.new
Disallow: /*PHPSESSID
Disallow: /*profile
Disallow: /*action
Disallow: /
Disallow: /*;

Host: sbets.ru

[digger®]

Не помогло. Подскажите пожалуйста, что не правильно.

Код Выделить Развернуть

Allow: /*action=live
и будет счастье.

И зачем у вас один и тот же блок правил для разных ботов два раза указан?

[hrustek]

Спасибо. Сделал так

User-agent: Mediapartners-Google
Disallow:

User-agent: Googlebot-Mobile
Allow: /*wap
Allow: /*imode
Disallow: /

User-agent: YandexImageResizer
Allow: /*wap
Allow: /*imode
Disallow: /

User-agent: *
Allow: /*action=live
Allow: /*action=forum
Allow: /*live
Allow: /$
Allow: /*board
Allow: /*topic
Allow: /*forum$
Allow: /*page
Allow: /*action=.xml
Disallow: /share42
Disallow: /*wap
Disallow: /*board=*wap
Disallow: /*topic=*wap
Disallow: /*topic=*.msg
Disallow: /*topic=*.new
Disallow: /*PHPSESSID
Disallow: /*profile
Disallow: /*action
Disallow: /
Disallow: /*;

Host: sbets.ru

[digger®]

Спасибо. Сделал так

В вебмастере же есть проверка robots.txt. Проверяйте там сразу интересующие урлы.

[hrustek]

del
Все ок