Роботс текст

Автор Alex32, 17 ноября 2013, 21:27:45

« назад - далее »

0 Пользователи и 1 гость просматривают эту тему.

Alex32

Может кто нибудь выложить правильный роботс текст, если установлен мод ЧПУ "Pretty URLs"

Yworld_garry

А ничего уникального....проверьте в панелях, но все работает.


User-agent: *
Allow: /*action=forum
Allow: /*sitemap
Allow: /*action=blogs
Allow: /*action=blog
Allow: /*type=rss
Disallow: /attachments/
Disallow: /avatars/
Disallow: /Packages/
Disallow: /Smileys/
Disallow: /Sources/
Disallow: /Themes/
Disallow: /Games/
Disallow: /*msg
Disallow: /*profile
Disallow: /*help
Disallow: /*search
Disallow: /*searchg
Disallow: /*mlist
Disallow: /*sort
Disallow: /*recent
Disallow: /*register
Disallow: /*groups
Disallow: /*unread
Disallow: /*topicseen
Disallow: /*wap
Disallow: /*imode
Disallow: /*action
Disallow: /*go.php
Disallow: /*showtopic
Disallow: /*prev_next
Disallow: /*all
Disallow: /*PHPSESSID

User-agent: Yandex
Allow: /*action=forum
Allow: /*sitemap
Allow: /*action=blogs
Allow: /*action=blog
Allow: /*type=rss
Disallow: /attachments/
Disallow: /avatars/
Disallow: /Packages/
Disallow: /Smileys/
Disallow: /Sources/
Disallow: /Themes/
Disallow: /Games/
Disallow: /*msg
Disallow: /*profile
Disallow: /*help
Disallow: /*search
Disallow: /*searchg
Disallow: /*mlist
Disallow: /*sort
Disallow: /*recent
Disallow: /*register
Disallow: /*groups
Disallow: /*unread
Disallow: /*topicseen
Disallow: /*wap
Disallow: /*imode
Disallow: /*action
Disallow: /*go.php
Disallow: /*showtopic
Disallow: /*prev_next
Disallow: /*all
Disallow: /*PHPSESSID
Sitemap: ваша карта
Host: ваш домен

User-agent: Mail.Ru
Disallow:
Crawl-delay: 10

User-agent: Slurp
Crawl-delay: 100