Не индексируется форум

Автор gdaylight, 25 сентября 2012, 00:28:18

« назад - далее »

0 Пользователи и 1 гость просматривают эту тему.

gdaylight

Не индексируется форум

Извините форум не на русском языке (на грузинском)

Мой robots.txt

User-agent: *

Allow: /forum/*sitemap
Allow: /forum/*arcade
Allow: /forum/*rss
Allow: /forum/*type=rss
Allow: /forum/*gallery

Disallow: /forum/attachments/
Disallow: /forum/avatars/
Disallow: /forum/Packages/
Disallow: /forum/Smileys/
Disallow: /forum/Sources/
Disallow: /forum/Themes/
Disallow: /forum/Games/
Disallow: /forum/*.msg
Disallow: /forum/*.new
Disallow: /forum/*sort
Disallow: /forum/*topicseen
Disallow: /forum/*wap
Disallow: /forum/*imode
Disallow: /forum/*action
Disallow: /forum/*prev_next
Disallow: /forum/*all
Disallow: /*PHPSESSID

Sitemap: http://www.sunnypage.ge/sitemap.xml
Host: www.sunnypage.ge

User-agent: Slurp
Crawl-delay: 100

Заменил в index.template.php на

<meta name="robots" content="index, follow" />';

Как вы думаете в чем проблема?  :)


Stern

Цитата: gdaylight от 25 сентября 2012, 00:28:18

Как вы думаете в чем проблема?  :)


происки Иванишвили?(
МышЫ плакали, кололись, но продолжали жрать кактус...

GeorG

1. Лишние переносы строки в robots.txt (вообще их уберите).
2. Сделайте ссылку с сайта на форум (карту форума тоже надо сделать).
3. У вас там 2 темы всего, что там индексировать-то?

Цитата: gdaylight от 25 сентября 2012, 00:28:18Заменил в index.template.php на
Зачем там что-то менять? Что этим заменили это понятно, а вот что и за место чего?

Установите этот плагин - http://custom.simplemachines.org/mods/index.php?mod=2659
Верстка тем по шаблону, их доработка/переработка, переделка тем с версии smf 1.1 на smf 2.0. Примеры работ - insidestyle.ru
Установка модов (заточка под ваш форум); Моды под заказ; Обновление форума; Правильный перенос; Удаление/лечение вирусов; Устранения ошибок.
Обращаться в ЛС
Мой форум
Модуль анти-спама CleanTalk, сам пользуюсь
Сервера которыми сам пользуюсь - cadedic.ru

maestrosite.ru

Что именно не индексируется? Я и Г видят и показывают. Английский, грузинский, русский + форум. Есть ошибки, но не смертельные.

----------------------------------------------------------------
Requested: sunnypage.ge
real=http://sunnypage.ge/=real
1) 200 'http://sunnypage.ge/' (http://sunnypage.ge/)
2) 200 'http://www.sunnypage.ge/' (http://www.sunnypage.ge/)
   WARNING! Both url available - Don't set main host
(autoselect)
         Audit report (mode: fast)
         Target URL: http://sunnypage.ge/ (http://sunnypage.ge/)
robots.txt:
   Is not main mirror: www.sunnypage.ge
   Invalid sitemap host: http://www.sunnypage.ge/sitemap.xml
Sitemaps:
   200 http://sunnypage.ge/sitemap.xml - ok
Favicon:
   404 http://sunnypage.ge/favicon.ico - not present
Invalid URL:
   ok
Markup:
   Error: Errors found: 8

Contact e-mail:
   auditor@maestrosite.ru
----------------------------------------------------------------

И кстати, сколько лет сайту? Судя по форуму не много.
Если задаются вопросы по вашей проблеме, значит это нужно вам!
---
Обновления форума, разрешение конфликтов, адаптация модов, исправление ошибок - ваши предложения о сотрудничестве направляйте по адресу smf@maestrosite.ru

gdaylight

Сайт индексируется а вот форум нет!

gdaylight


gdaylight

Немного добавил в robots.txt не знаю что лишнее, что лучше убрать?
Добавил мод: Optimus Brave
Сделал ссылку с сайта на форум.
Теперь жду когда придет бот!

User-agent: *

Allow: /forum/User-Agent: *
Allow: /forum/sitemap *
Allow: /forum/$
Allow: /forum/*arcade
Allow: /forum/*rss
Allow: /forum/*type=rss
Allow: /forum/*gallery
Allow: /forum/WAP *

Disallow: /forum/attachments/
Disallow: /forum/avatars/
Disallow: /forum/Packages/
Disallow: /forum/Smileys/
Disallow: /forum/Sources/
Disallow: /forum/Themes/
Disallow: /forum/Games/
Disallow: /forum/*.msg
Disallow: /forum/*.new
Disallow: /forum/*sort
Disallow: /forum/*topicseen
Disallow: /forum/*imode
Disallow: /forum/*action
Disallow: /forum/*prev_next
Disallow: /forum/*all
Disallow: /*PHPSESSID

User-Agent: Googlebot-Mobile

Allow: /forum/WAP *
Disallow: /forum/

User-Agent: YandexImageResizer

Allow: /forum/WAP *
Disallow: /forum/

Sitemap: http://www.sunnypage.ge/sitemap.xml
Host: www.sunnypage.ge

User-agent: Slurp
Crawl-delay: 100

Фисташка

Цитата: gdaylight от 25 сентября 2012, 13:38:31
Немного добавил в robots.txt не знаю что лишнее, что лучше убрать?
Добавил мод: Optimus Brave
Сделал ссылку с сайта на форум.
Теперь жду когда придет бот!
Не придет!

Зачем вот это:
Allow: /forum/User-Agent: *

И зачем пробел со звёздочкой, например тут?
Allow: /forum/WAP *

Читайте как составлять роботс. У вас он не правильный, но индексироваться всё должно


Bugo

Товарищ наверное просто установил мод и решил, что больше ничего делать не надо...

GeorG

Optimus Brave, сам предлагает не плохой вариант robots.txt, можно воспользоваться им (только он естественно не учитывает то, что ещё сайт установлен, так что его придётся доработать вручную, для сайта). Смотрите настройки мода, в админке.
Верстка тем по шаблону, их доработка/переработка, переделка тем с версии smf 1.1 на smf 2.0. Примеры работ - insidestyle.ru
Установка модов (заточка под ваш форум); Моды под заказ; Обновление форума; Правильный перенос; Удаление/лечение вирусов; Устранения ошибок.
Обращаться в ЛС
Мой форум
Модуль анти-спама CleanTalk, сам пользуюсь
Сервера которыми сам пользуюсь - cadedic.ru

gdaylight

Я программист 1C  поэтому в вебе абсолютно не разбираюсь, надеюсь такой вариант robots.txt сойдет. Главное чтоб форум индексировался, пусть даже плохо!   :)

User-agent: *

Allow: /forum/*sitemap
Allow: /forum/$
Allow: /forum/*arcade
Allow: /forum/*rss
Allow: /forum/*type=rss
Allow: /forum/*gallery

Disallow: /forum/attachments/
Disallow: /forum/avatars/
Disallow: /forum/Packages/
Disallow: /forum/Smileys/
Disallow: /forum/Sources/
Disallow: /forum/Themes/
Disallow: /forum/Games/
Disallow: /forum/*.msg
Disallow: /forum/*.new
Disallow: /forum/*sort
Disallow: /forum/*topicseen
Disallow: /forum/*imode
Disallow: /forum/*action
Disallow: /forum/*prev_next
Disallow: /forum/*all
Disallow: /*PHPSESSID

Sitemap: http://www.sunnypage.ge/sitemap.xml
Host: www.sunnypage.ge

User-agent: Slurp
Crawl-delay: 100

gdaylight

А не нужно как нибудь связать sitemap.xml сайта в корневой директории с "картой сайта" форума. Наверно глупый вопрос... :facepalm:

gdaylight

Окончательно я взял тот robots.txt который мне предложил (сгенерировал) мод: Optimus Brave

User-agent: Googlebot-Image
Disallow: /forum/

User-agent: YandexImages
Disallow: /forum/

User-agent: msnbot-MM
Disallow: /forum/

User-agent: Googlebot-Mobile
Allow: /forum/*wap
Disallow: /forum/

User-agent: YandexImageResizer
Allow: /forum/*wap
Disallow: /forum/

User-agent: MediaPartners-Google
Allow: /forum/

User-agent: *
Allow: /forum/$
Allow: /forum/*action=.xml
Allow: /forum/*sitemap
Disallow: /forum/*action
Disallow: /forum/*wap
Disallow: /forum/*board=*wap
Disallow: /forum/*topic=*wap
Disallow: /forum/*topic=*.msg
Disallow: /forum/*topic=*.new
Disallow: /forum/*;
Disallow: /forum/*PHPSESSID
Allow: /forum/*board
Allow: /forum/*topic
Disallow: /forum/
Sitemap: http://sunnypage.ge/forum/index.php?action=sitemap;xml
Crawl-delay: 5
Clean-param: PHPSESSID /forum/index.php
Host: sunnypage.ge

Mavn

gdaylight
правила форума пожалуйста перечитайте, в особенности п.6
SimpleMachines Russian Community Team
п.1 Пройду курсы гадалок для определения исходного кода по скриншоту.

п.2 У вас нет желания читать правила раздела, у меня нет желания одобрять темы, которые не соответствуют этим правилам.

GeorG

Если ещё не сделали:
Добавьте создание карты форума, модом Optimus Brave, и скормите её поисковикам.
Верстка тем по шаблону, их доработка/переработка, переделка тем с версии smf 1.1 на smf 2.0. Примеры работ - insidestyle.ru
Установка модов (заточка под ваш форум); Моды под заказ; Обновление форума; Правильный перенос; Удаление/лечение вирусов; Устранения ошибок.
Обращаться в ЛС
Мой форум
Модуль анти-спама CleanTalk, сам пользуюсь
Сервера которыми сам пользуюсь - cadedic.ru