Disallow: /*PHPSESSID - быть или не быть

[maestrosite.ru]

Подробнее можно? Ваш мрд несовместим с Optimus Brave ?

Совместим. Отсутствие canonical на странице action=forum никак не связано с модом Anti-SID, его убивает оптимус. Вы можете удалить Anti-SID и увидеть, что тег canonical не появится.

[Nemo000]

Понял, То есть это:

BoardIndex.php, замените

Код Выделить Развернуть

// Set a canonical URL for this page.
$context['canonical_url'] = $scripturl;
на:

Код Выделить Развернуть

// Set a canonical URL for this page.
$context['canonical_url'] = $scripturl . '/forum/';

Можно вернуть в первоначальный вид?

[maestrosite.ru]

Понял, То есть это:Можно вернуть в первоначальный вид?

Если в оптимус не исправлять очистку адреса, то возвращайте.
Если хотите, чтобы список разделов отображался по отдельному адресу /forum/ , то оставьте и исправьте оптимус.

[GeorG]

Ваш мрд несовместим с Optimus Brave ?

Удалите Optimus Brave и каноникал будет на странице разделов форума (action=forum), установите, и он исчезнет от туда, и появится на главной странице портала. У чисто установленного портала, каноникал отсутствует на страницах раздела. В общем тут дело в портале и в Optimus Brave.

[maestrosite.ru]

Что же, распишу по шагам. Каждый сможет провести эксперимент и сравнить результат.

1. Установлены портал и оптимус - страница action=forum - тега нет (не зависимо от присутствия AntiSID)

2. Установлены портал и оптимус, AntiSID - отсутсутвует.
Subs-Optimus.php::optimus_operations(), закомментируем :

Код Выделить Развернуть


if (in_array($context['current_action'], array('forum', 'community')))
$context['canonical_url'] = '';

На странице action=forum -  тег canonical появляется - href="http://smf2.loc/index.php"

3. Установлены портал, оптимус и AntiSID. + теже заблокированные строки: - на странице тот же canonical.

Итого. Наличие мода Anti-SIDна появление/пропажу canonical не влияет.

Второе.
1. Изменяем BoardIndex:

Код Выделить Развернуть

// Set a canonical URL for this page.
$context['canonical_url'] = $boardurl . '/forum/';

2. Портал + оптимус + анти-сид + исправления в оптимус.
На странице action=forum тег canonical - href="http://smf2.loc/forum/"

3. Удаляем анти-сид - canonical тот же.
4. Возвращаем исправления в оптимус - canonical исчезает. (Установлены портал и оптимус)
5. Удаляем оптимус - появляется canonical href="http://smf2.loc/forum/"

Вывод второй. Наличие мода Anti-SID на появление/пропажу canonical не влияет.

[Жека]

Disallow: /*PHPSESSID

Вообще не понимаю, зачем этот костыль в robots лепят.

Проблема решается штатными средствами движка форума.
Внёс user-agent Яндекса в список пауков и всё, все ссылки для него без PHPSESSID.

Если ваши страницы содержат реальные адреса в rel="canonical", то не имеют смысла схожие правила:
Цитировать (выделенное)
Disallow: /forum/*.msg
Disallow: /forum/*.new
Disallow: /forum/*topicseen
Disallow: /forum/*prev_next

Да, на результат индексации правила не будут влиять, но будут влиять на процесс достижения результата.

То же правило Disallow: /forum/*.msg вносится, чтобы робот не ходил по каждой ссылке на каждое сообщение на странице темы, тем самым минимизируя нагрузку на сайт от пауков без изменения результата индексации сайта.

[Yworld_garry]

Вообще не понимаю, зачем этот костыль в robots лепят.

У вас какие то проблемы с лишним байтом в файлах или вы уверены что все вносят ботов в список, ставят мод(maestrosite и хаки) и тд и тп. Подстраховка.
Эта тема миллион раз обмусолена на форуме, кто читает  и МОЖЕТ, тот вносит, но еще куча но, одно из них не корректно работающая функция определения бота как пользователя или в определенной группе..

[maestrosite.ru]

Внёс user-agent Яндекса в список пауков и всё, все ссылки для него без PHPSESSID.

Сменил яндекс метку в агенте, использовал другой адрес, и тд - и придётся снова подкручивать настройки. Список пауков - ИМХО обходной путь.

Да, на результат индексации правила не будут влиять, но будут влиять на процесс достижения результата.

То же правило Disallow: /forum/*.msg вносится, чтобы робот не ходил по каждой ссылке на каждое сообщение на странице темы, тем самым минимизируя нагрузку на сайт от пауков без изменения результата индексации сайта.

Согласен. Не точная формулировка утверждения, может ввести в заблуждение.

[Жека]

Список пауков - ИМХО обходной путь.

Согласен в том, SMF "из коробки" не будет работать по-нормальному с неизвестными ему поисковиками.

Но и просто добавить /*PHPSESSID в robots.txt недостаточно.

Ведь если робот не принимает кукисы, то все ссылки будут с сессионной переменной => ничего не попадёт в индекс.
В итоге надо лезть в код движка (или ставить мод), чтобы хотя ссылки с тегом canonical были без PHPSESSID.

Лично мне проще через веб-интерфейс добавить новый user-agent, чем ковыряться в коде, чтобы была бОльшая универсальность для поисковиков, которые мне не нужны.

[hrustek]

У меня точтно такая же проблема! Этот rel="canonical" убивает страницы! 1656 страниц не являются каноническими, а потом и вовсе все станут такими. Это пока я переехал на новый домен. Но многие же страницы это и есть темы форума. Какие дубли стреиц? Пожалуйста помогите избавиться от этого проклятия!    Вот адрес гляньте пожалуйста http://guitardriver.ru

Аналогичная ситуация. Мод Anti-SID не убирает /PHPSESSID в юрлах. Пока сделал, как pehser. Варианты решения траблы еще есть?   

я решил подобный вопрос таким образом нашол в index.php

Код Выделить Развернуть

loadSession();
и заменил на

Код Выделить Развернуть

$ref = $_SERVER['HTTP_USER_AGENT'];
if (!preg_match('/YandexBot/i',$ref)) loadSession();

и проблема с Яшей решина

[maestrosite.ru]

Если мод не убрал из тега canonical сессионную переменную, вероятно, это баг. Покажите пример страницы, где в теге вылез PHPSESSID

[hrustek]

Если мод не убрал из тега canonical сессионную переменную, вероятно, это баг. Покажите пример страницы, где в теге вылез PHPSESSID

пожалуйста http://sbets.ru/index.php?PHPSESSID=qddrjk5r9oe71boj521faa6b80&topic=189.0

[maestrosite.ru]

пожалуйста http://sbets.ru/index.php?PHPSESSID=qddrjk5r9oe71boj521faa6b80&topic=189.0

На этой странице canonical нормальный:

Код Выделить Развернуть


<link rel="canonical" href='http://sbets.ru/index.php?topic=189.0' />

[hrustek]

а в чем тогда проблема?

[maestrosite.ru]

а в чем тогда проблема?

Прошу прощения, но это вопрос к вам. Что у вас неправильно работает?

[hrustek]

Что у вас неправильно работает?

Знал бы, за помощью не обратился
Вы меня не правильно поняли наверно. При первом обращении к форуму у гостей выдает подобные юрлы 

http://sbets.ru/index.php?PHPSESSID=qddrjk5r9oe71boj521faa6b80&topic=189.0

.
Эту проблему я хочу решить.