Успешная Search Engine Optimization

[Awilum]

Я проделал следующие дейсвия

1. Установил форум в корневой каталог
2. Прописал нужные мета теги
3. Заполнил и разместил в корне robot.txt

Код Выделить Развернуть


User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /index.php?action=sitemap;xml
Disallow: /index.php?action=sitemap;*
# Папки
Disallow: /attachments/
Disallow: /avatars/
Disallow: /Packages/
Disallow: /Smileys/
Disallow: /Sources/
Disallow: /Themes/
Disallow: /Games/
# Убираем мобильные версии
Disallow: /index.php?*;wap
Disallow: /index.php?*;wap2
Disallow: /index.php?*;imode
# Не нужно нам и это индексировать, собственно что закрывал тег noindex
Disallow: /index.php?*.msg
Disallow: /index.php?*.new
# Всё что связано с ; уберём
Disallow: /index.php?*;*
# Действия
Disallow: /index.php?action=activate
Disallow: /index.php?action=admin
Disallow: /index.php?action=calendar
Disallow: /index.php?action=emailuser
Disallow: /index.php?action=findmember
Disallow: /index.php?action=help
Disallow: /index.php?action=helpadmin
Disallow: /index.php?action=login
Disallow: /index.php?action=logout
Disallow: /index.php?action=mlist
Disallow: /index.php?action=modifykarma
Disallow: /index.php?action=pm
Disallow: /index.php?action=post
Disallow: /index.php?action=printpage
Disallow: /index.php?action=profile
Disallow: /index.php?action=recent
Disallow: /index.php?action=register
Disallow: /index.php?action=reminder
Disallow: /index.php?action=search
Disallow: /index.php?action=theme
Disallow: /index.php?action=unread
Disallow: /index.php?action=unreadreplies
Disallow: /index.php?action=verificationcode
Disallow: /index.php?action=who
Disallow: /index.php?theme
Disallow: /index.php?struct=on&data=on&action=dumpdb


# Ограничить потоки сканера Yahoo
User-agent: Slurp
Crawl-delay: 150

User-agent: Twiceler
Disallow: /

User-Agent: W3C-checklink
Disallow: /

4. Поставил мод Sitemap и отправил карту сайта index.php?action=sitemap;xml гуглу на проверку. Он проверил ее успешно
5. Использую <link rel="canonical" href=" " />
6. Использую <meta name="robots" content="all" />  <meta name="revisit-after" content="1 days" />
7. Установил Anonymize Links чтобы внешние ссылки были через редирект, чтобы не утекал вес форума, как я понял


Правильно ли я сделал?
Как еще необходимо улучшить форум чтобы он хорошо индексировался и был популярен в поисковиках ?

[Awilum]

Меня волнует вопрос по работ.тхт он правильно написан ?
А то мне кажется что мой сайт закрыт для поисковиков. А я его добавлял в них.

[Asix]

В самой первой теме выложен идеальный (оптимальный ) robot.txt, по крайней мере так говорят админы. С Вашим вариантом они различны, может лучше скопировать оттуда ?? =))

[Yworld_garry]

Уважаемый awilum, я вам в каком то топике уже писал, что нужно использовать роботс из аттача к этому посту
http://www.simplemachines.ru/index.php/topic,5089.msg33162.html#msg33162
Но до этого вам нужно сделать изменения те что описаны там, а это:

Для более полной индексации начал тестировать новый роботс.

Подготавливаем форум к его использованию.
В файле Themes\index.template.php
Убираем
Код: [Выделить]
<meta name="robots" content="noindex" />
А лучше заменяем на
Код: [Выделить]
<meta name="robots" content="index, follow" />

Плюс писал что вам нужно обязательно добавить в роботс (тот что скачаете)
Allow: /*__forum # Так как он у вас стоит экшеном.

И проверить в панелях и нужное если есть ещё разрешить. И вообще по поводу роботс и около него описано в одноименной прикреплённой теме в этом разделе.

[Awilum]

Yworld_garry
/*__forum #

Как Это должно выглядеть в ИТОГЕ ? какие там символы лишние.


Скачал я в той теме робот
вот его содержимое

Код Выделить Развернуть

User-agent: *
Allow: /__forum/*sitemap
Allow: /__forum/*arcade
Allow: /__forum/*rss
Disallow: /__forum/attachments/
Disallow: /__forum/avatars/
Disallow: /__forum/Packages/
Disallow: /__forum/Smileys/
Disallow: /__forum/Sources/
Disallow: /__forum/Themes/
Disallow: /__forum/Games/
Disallow: /__forum/*.msg
Disallow: /__forum/*.new
Disallow: /__forum/*sort
Disallow: /__forum/*topicseen
Disallow: /__forum/*wap
Disallow: /__forum/*imode
Disallow: /__forum/*action

User-agent: Slurp
Crawl-delay: 100

Он на порядок меньше почему то чем я собрал на основе вашего 0 поста в той теме.
__forum/ - необходимо убрать во всем файле, так как у меня все в корне ?

[Yworld_garry]

# Символ коммента
__ кривит ссылку, тоже не нужен

Да убрать.

Я не успеваю за постами, редактируйте предыдущий, не надо писать подряд, это карается наверно и на вашем форуме

[Awilum]

Поясните пожалуйста. Зачем этот символ  *  ?

[Yworld_garry]

Поясните пожалуйста. Зачем этот символ  *  ?

Спецсимвол '*' означает любую (в том числе пустую) последовательность символов

http://help.yandex.ru/webmaster/?id=996567

[Awilum]

И проверить в панелях и нужное если есть ещё разрешить

А вот тут что вы имели ввиду? что разрешить ?

Теперь сайт перенесен. на сколько долго займет заново его индексация в поисковиках ?

[Yworld_garry]

В панелях ПС как яндекса и гугла. Где и как написано в теме про роботс.
Разрешить если есть ещё модули установленные, типо галереи, магазина. Описано в теме про роботс.
Как повезёт, можно ускорить установкой ссылок/анонсов/рекламы на трастовых сайтах, размещением статей и тд.

[Awilum]

Yworld_garry
а что если сделать /forum/index.php
а там редирект на то как есть сейчас /index.php
что бы не выпасть из индексов ?

[Yworld_garry]

На самом деле это не так просто, нужно отловить все проиндексированные страницы и поставить именно с них редирект на новые. А в тупую если поставить редирект на главную, всё равно вылетит из индекса всё что там было.
Да думаю в вашем теперешнем положении форума , не самое страшное новая индексация.
Про установку редиректов, море инфы в сети можете покапать.

[Oleg+]

А "мобильные версии" зачем сделал неиндексируемыми? 

[BIOHAZARD]

А "мобильные версии" зачем сделал неиндексируемыми? 

http://www.simplemachines.ru/index.php/topic,5089.0.html

[Oleg+]

http://www.simplemachines.ru/index.php/topic,5089.0.html

Тогда уж лучше выбросить из индексации немобильные версии!

Мобильные версии и версии для печати бывают куда более "любимы" поисковиками...  в плане релевантности поисковому запросу, разумеется.

[BIOHAZARD]

пустой разговор

делайте нормальный код, будут любить нужную вам версию сайта