Оптимизация форума

[nemecfc]

Здравствуйте. Создал такой вот роботс (по соответствующей теме, скомпоновав там файл для скачивания и приведенный текст):

User-agent: *
Allow: /forum/*sitemap
Allow: /forum/*arcade
Allow: /forum/*rss
Disallow: /forum/attachments/
Disallow: /forum/avatars/
Disallow: /forum/Packages/
Disallow: /forum/Smileys/
Disallow: /forum/Sources/
Disallow: /forum/Themes/
Disallow: /forum/Games/
Disallow: /forum/*.msg
Disallow: /forum/*.new
Disallow: /forum/*sort
Disallow: /forum/*topicseen
Disallow: /forum/*wap
Disallow: /forum/*imode
Disallow: /forum/*action
Disallow: /forum/index.php?action=activate
Disallow: /forum/index.php?action=admin
Disallow: /forum/index.php?action=calendar
Disallow: /forum/index.php?action=emailuser
Disallow: /forum/index.php?action=findmember
Disallow: /forum/index.php?action=help
Disallow: /forum/index.php?action=helpadmin
Disallow: /forum/index.php?action=login
Disallow: /forum/index.php?action=logout
Disallow: /forum/index.php?action=mlist
Disallow: /forum/index.php?action=modifykarma
Disallow: /forum/index.php?action=pm
Disallow: /forum/index.php?action=post
Disallow: /forum/index.php?action=printpage
Disallow: /forum/index.php?action=profile
Disallow: /forum/index.php?action=recent
Disallow: /forum/index.php?action=register
Disallow: /forum/index.php?action=reminder
Disallow: /forum/index.php?action=search
Disallow: /forum/index.php?action=theme
Disallow: /forum/index.php?action=unread
Disallow: /forum/index.php?action=unreadreplies
Disallow: /forum/index.php?action=verificationcode
Disallow: /forum/index.php?action=who
Disallow: /forum/index.php?theme
Disallow: /forum/index.php?struct=on&data=on&action=dumpdb
Disallow: /forum/index.php?action=sitemap
Disallow: /forum/index.php?*;*
User-agent: Slurp
Crawl-delay: 100

Скажите, правильный ли роботс и что в нем изменить?
Поставил мод Sitemap, потом наткнулся на мод SEO4SMF. Маленькое описание при установке выдает:

What is doing this mod for your forum ?
=====================================

1. It's adding beatifull urls. Your url will look like:
Board: http://www.forum-example.com/the-board-name-id/
Topic: http://www.forum-example.com/the-board-name/the-topic-name-id.html
Profiles: http://www.forum-example.com/profiles/user-name-id.html
2. Change your meta tags kewords and descriptions.
3. Create sitemap and url list for Google and Yahoo
4. Redirecting old pages (if you already had "Search engine friendly URLs") enabled.
5. Social Bookmarks for every first message (submmiting to Delicious, SlashDot, Technorati, Furl, Digg)
6. Beautify actions Url's
7. Html Sitemap

Installation
============

Requirements
A working SMF 1.1RC3, SMF 1.1 and SMF 1.1.1.
Apache with mod_rewrite enabled.

Optional
TinyPortal 0.96 mod installed.

Just install the mod from your admin section and add the content of htaccess.txt to your .htaccess or in your apache configuration.

Settings

Before enable seo4smf hust enable "Search engine friendly URLs" from your admin area (Features and Settings).
The mod is just beautifyng your urls, changeding your description and kewords metatags and creating a sitemap for google and yahoo.
The sitemap/urllist generator is based on SMF sitemap modified by Davilac (http://www.davilac.net)

И тут есть пара вопросов:
1. Он модифицирует URL форума для более доступного вида, совместим ли он тогда (ведь ссылки будут выглядеть иначе) с приведенным роботс и ранее установленным модом Sitemap? Или надо удалить мод Sitemap (тем более что в моде SEO4SMF) уже есть подобная компонента, и переписать файл роботс конкретно под этот мод уже с "новыми, красивыми" ссылками? И зачем вообще нужны более красивые ссылки?
2. Необходим ли для его установки мод TinyPortal?
3. Обязательно ли включать "Search engine friendly URLs" (пункт 4: "4. Redirecting old pages (if you already had "Search engine friendly URLs") enabled.")? Какие плюсы и минусы этого? А то вроде где-то говорилось, что лучше не включать...
4. Вообще, стоит ли его устанавливать, или можно обойтись парочкой других модов для хорошей оптимизации?

[Yworld_garry]

Вот это лишнее и дублирует первую часть

Disallow: /__forum/index.php?action=activate
Disallow: /__forum/index.php?action=admin
Disallow: /__forum/index.php?action=calendar
Disallow: /__forum/index.php?action=emailuser
Disallow: /__forum/index.php?action=findmember
Disallow: /__forum/index.php?action=help
Disallow: /__forum/index.php?action=helpadmin
Disallow: /__forum/index.php?action=login
Disallow: /__forum/index.php?action=logout
Disallow: /__forum/index.php?action=mlist
Disallow: /__forum/index.php?action=modifykarma
Disallow: /__forum/index.php?action=pm
Disallow: /__forum/index.php?action=post
Disallow: /__forum/index.php?action=printpage
Disallow: /__forum/index.php?action=profile
Disallow: /__forum/index.php?action=recent
Disallow: /__forum/index.php?action=register
Disallow: /__forum/index.php?action=reminder
Disallow: /__forum/index.php?action=search
Disallow: /__forum/index.php?action=theme
Disallow: /__forum/index.php?action=unread
Disallow: /__forum/index.php?action=unreadreplies
Disallow: /__forum/index.php?action=verificationcode
Disallow: /__forum/index.php?action=who
Disallow: /__forum/index.php?theme
Disallow: /__forum/index.php?action=sitemap
Disallow: /__forum/index.php?*;*

Это можно оставить
Disallow: /__forum/index.php?struct=on&data=on&action=dumpdb
Это вам исходя из ваших модов
Disallow: /__forum/index.php?theme
Это нарушение ситаксиса.
Disallow: /__forum/index.php?*;*

Пишется через строку от основного блока
User-agent: Slurp
Crawl-delay: 100

SEO4SMF имеет уязвимость и насколько мне известно не поддерживался. Может что и поменялось.

Советую при использовании роботс из одноименной темки, прочитать по возможности всю тему. Тогда будет понятно как и что в нём регулировать. И как использовать.

[nemecfc]

Не совсем понял насчет SMF4SEO: чем он не поддерживался, какую уязвимость имеет? стоит ли его устанавливать?

[BIOHAZARD]

авторами не поддерживается и не обновляется
уязвимость критическую, по мне так лучше не ставить
да и нет смысла в этих танцах с бубном на форуме

[genix]

Не понял, а зачем эта строчка?
Disallow: /__forum/index.php?action=sitemap
А для кого вам карта сайта? Для людей что ли?

[FladeX]

У кого-нибудь установлен этот самый seo4smf? Можете открыть список пользователей для гостей и ботов на пару дней, нужно сервис генерации sitemap протестировать для этого мода.
Весь инет облазил, так и не нашел открытого списка пользователей А ведь остался только этот мод...