Форум не индексируется поисковиками

[Mavn]

Посещаемость вообще прогнозировать сложно... сегодня у тебя аврал 200 человек колбасят форум а завтра и 50 не придут. Так что все относительно...

[Юран]

ф если убрать вообще роботс №№ это как то влияет на посещаемость№№№ или он должен быть обязательно№№ кто то мне говорил, что его лучше вообще не ложить....

[Юран]

сайчас вложил как тут

User-agent: *
Disallow: /attachments/
Disallow: /avatars/
Disallow: /Packages/
Disallow: /Smileys/
Disallow: /Sources/
Disallow: /Themes/
Disallow: /wysiwyg/
Disallow: /tp-images/
Disallow: /tp-files/
Disallow: /tp-downloads/
Disallow: /FCKeditor/
Disallow: /index.php?action=profile;
Disallow: /index.php?action=profile
Disallow: /index.php?action=post;
Disallow: /index.php?action=post
Disallow: /index.php?action=search;
Disallow: /index.php?action=search
Disallow: /index.php?action=search2;
Disallow: /index.php?action=search2
Disallow: /index.php?action=mlist;
Disallow: /index.php?action=admin;
Disallow: /index.php?action=admin
Disallow: /index.php?action=pm;
Disallow: /index.php?action=pm
Disallow: /index.php?action=sendtopic;
Disallow: /index.php?action=sendtopic
Disallow: /index.php?action=markasread;
Disallow: /index.php?action=markasread
Disallow: /index.php?action=notify;
Disallow: /index.php?action=notify
Disallow: /index.php?action=stats;
Disallow: /index.php?action=stats
Disallow: /index.php?action=recent;
Disallow: /index.php?action=recent
Disallow: /index.php?action=mergetopics;
Disallow: /index.php?action=mergetopics
Disallow: /index.php?action=mlist
Disallow: /index.php?action=register
Disallow: /index.php?action=reporttm;
Disallow: /index.php?action=reminder
Disallow: /index.php?action=verificationcode;
Disallow: /index.php?action=verificationcode
Disallow: /index.php?action=activate;
Disallow: /index.php?action=activate
Disallow: /index.php?action=help;
Disallow: /index.php?action=help
Disallow: /index.php?struct=on&data=on&action=dumpdb
Disallow: /search.html
Disallow: /search2.html
Disallow: /recent.html
Disallow: /login.html
Disallow: /stats.html
Disallow: /users.html
Disallow: /help.html
Disallow: /profile.html
Disallow: /register.html

но не пойму тольь народ идет пока его удаляю толи пока есть

[Юран]

а если такой оставить

User-agent: *
Disallow:

[bbbbbb]

за это можно очень быстро поймать бан от поисковиков.

кстате меня забанили, ко мне заходи все те кто порно искал
выход: сейчас я поменял домен новый, точнее еще один зарегил, сейчас два домена
а по айпи банить не будут .а ест ькстате правила по яндексу

а если такой оставить

User-agent: *
Disallow:

вместо форума проиндексирует страницу печати

[Роман]

народ, не знаю, в какую тему писать... новпрос по метатегам в принципе... я меняю в файле index.template.php  стандартную строчку:

Код Выделить Развернуть

<meta name="keywords" content="PHP, MySQL, bulletin, board, free, open, source, smf, simple, machines, forum" />
на свою

Код Выделить Развернуть

<meta name="keywords" content="Форум, общение, программы, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла" />
Но в результате у меня в исходном тексте все русские символы отображаются (не знаю, как описать этот значек) знаком вопроса в квадратике. И роботы соответственно тоже метатеги видят крякозябрами... форум 2.0 бета 3, версия русская UTF-8. ЧТо может быть не так?
вот тег кодировки: <meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />

[Роман]

под исходным текстом я имею в виду результат выполнения скрипта, который выводится в браузере

[dm_mb]

народ, не знаю, в какую тему писать... новпрос по метатегам в принципе... я меняю в файле index.template.php  стандартную строчку:

Код Выделить Развернуть

<meta name="keywords" content="PHP, MySQL, bulletin, board, free, open, source, smf, simple, machines, forum" />
на свою

Код Выделить Развернуть

<meta name="keywords" content="Форум, общение, программы, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла, бла-бла-бла" />
Но в результате у меня в исходном тексте все русские символы отображаются (не знаю, как описать этот значек) знаком вопроса в квадратике. И роботы соответственно тоже метатеги видят крякозябрами... форум 2.0 бета 3, версия русская UTF-8. ЧТо может быть не так?
вот тег кодировки: <meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />

файл после редактирования сохранен не в кодировке UTF-8

[Vsh]

Всем здрасти!
У меня жёсткие проблемы с ПС, даже уже не знаю что делать. Может вы подскажите?
Перечитал кучу тем, установил всё по максимуму, но так понял, что наварил каши...... Поисковики хавают и роботс, и ситимэп, но почему-то очень тяжело найти при всевозможных запросах по профилю форума. Гугл показывает 168 ключевых слов на моём форуме, но такие бредовые: smf, зарегистрироваться и т.д.
Проиндексированы все урлы ситимэпа, кроме заблокированных. Форуму уже второй месяц.

Может посмотрите глобальные недочёты!
vsh-tuning.ru (Mavn! я слышал что эти статьи не индексируются, но если ссылки нельзя, то можно стереть сообщение)

За любую инфу заранее спасибо!

[Mavn]

vsh-tuning.ru (Mavn! я слышал что эти статьи не индексируются, но если ссылки нельзя, то можно стереть сообщение)

если урлы не активны то я их не режу, я режу только тем кто злоупотребляет тэгом урл.

[Yworld_garry]

После беглого осмотра.
1 Определитесь что Вы отдаёте ПС. Домен с www или без. Там полная неразбериха с этим. Не забывайте что это не мало важно при индексации начальной.
2 В роботс какие-то противоречия, нет сейчас время смотреть. Скачайте роботс из первого поста одноименной темы, там он в аттаче. Насколько я понял вам его не придётся даже править, только убрать директорию форум.
3 Кто Вам сказал что имея пустую статичную главную страницу( всего пять ссылок и пара счётчиков) Вас полюбят поисковики?
4 Два месяца это конечно срок не большой, но если бы Вы отдавали ботам заглавную форума , то результат был бы в разы лучше.
5 Гугл показывает видимо то что увидел быстро робот у вас, видимо он был на сайте в момент его открытия и не увидел ни чего ролевентнее. А вы упорно подсовываете ему пустую заглавную и "отбиваете желание включать проект в основной индекс.
6 Возможно что ещё, но сейчас сорри нет время.

[Vsh]

Спасибо Yworld_garry, что глянул!
Появилось несколько вопросов:
По 1. гугл не хочет переправлять мой урл с ... .ru на www. .... .ru, говорит что надо подтвердить, но не показывает как это сделать, может проще удалить сайт из индексации и заново поставить?
По 2. Так роботс один в один, только без закрывания всех экшенов, я предпочёл закрыть их по списку
По 3,4,5. Лучше удалить пустую заглавную страницу? Что посоветуете поставить из движков?

[Yworld_garry]

1 Есть несколько вариантов
http://www.google.ru/support/webmasters/bin/answer.py?answer=44231&topic=9025
http://help.yandex.ru/webmaster/?id=995297
Можно редирект сделать.
2 Не понял
3,4,5 Я не могу посоветовать незная что у вас планируется на сайте. Ну и как бы это уже отдельная тема.

[Vsh]

1. Как  и где я знаю, но вот загвоздка начинается после этого, см. вложение.
Хотя подтверждающий файл есть, что ему нужно?!?!
2. Роботс я брал из этого поста, только за место закрытия всех экшенов, закрыл их по списку

[Yworld_garry]

1 Видимо не правильно выполнена инструкция с вашей стороны.
2 Вы роботс взяли вот этот из аттача и усложнили его в три раза??
User-agent: *
Allow: /__forum/*sitemap
Allow: /__forum/*arcade
Allow: /__forum/*rss
Disallow: /__forum/attachments/
Disallow: /__forum/avatars/
Disallow: /__forum/Packages/
Disallow: /__forum/Smileys/
Disallow: /__forum/Sources/
Disallow: /__forum/Themes/
Disallow: /__forum/Games/
Disallow: /__forum/*.msg
Disallow: /__forum/*.new
Disallow: /__forum/*sort
Disallow: /__forum/*topicseen
Disallow: /__forum/*wap
Disallow: /__forum/*imode
Disallow: /__forum/*action

User-agent: Slurp
Crawl-delay: 100

[Palich]

Vsh

1. Как  и где я знаю, но вот загвоздка начинается после этого, см. вложение.
Хотя подтверждающий файл есть, что ему нужно?!?!

Нужно подтвердить ваши права на сайт,т.е. либо вставить строку,сгенерированную гуглом в код,либо в корень поместить файл,опять же сгенерированный гуглом.Подробнее тут

[Yworld_garry]

Вставьте его тег подтверждающий в ваш индекс темы на главной( или что у вас генерит главную) и не будет гемора в дальнейшем.

[BIOHAZARD]

1. неее
он имеет, что надо сначала и с www в админку добавить, уже после этого их можно будет склеить
а сейчас в админке только без www числится

[Vsh]

Наконец-то получилось, спс всем, особенно BIOHAZARD за понимание.
Надо было просто добавь как бы ещё один сайт только с www

[Vsh]

1 Видимо не правильно выполнена инструкция с вашей стороны.
2 Вы роботс взяли вот этот из аттача и усложнили его в три раза??
User-agent: *
Allow: /__forum/*sitemap
Allow: /__forum/*arcade
Allow: /__forum/*rss
Disallow: /__forum/attachments/
Disallow: /__forum/avatars/
Disallow: /__forum/Packages/
Disallow: /__forum/Smileys/
Disallow: /__forum/Sources/
Disallow: /__forum/Themes/
Disallow: /__forum/Games/
Disallow: /__forum/*.msg
Disallow: /__forum/*.new
Disallow: /__forum/*sort
Disallow: /__forum/*topicseen
Disallow: /__forum/*wap
Disallow: /__forum/*imode
Disallow: /__forum/*action

User-agent: Slurp
Crawl-delay: 100

Нет, я брал от сюда:
http://www.simplemachines.ru/index.php/topic,5089.msg35293.html#msg35293

[Vsh]

Yworld_garry, ты же сам писал, что тебе не отредактировать предыдущие сообщения и усовершенствованные боты нужно брать в последующих ответах

[Yworld_garry]

Вроде там миллион раз написано какой нужно использовать. И пост где я писал что не отредактировать был очень давно. С тех пор много чего поменялось.
В первом посте конкретно написано какой использовать, это если нет время или лень читать топик.

PS
Изменил постик и теперь там нет этой фразы, но следуя логике вы должны были взять роботс из последних постов, там он представлен в последнем варианте.

[Vsh]

Сеньк! Исправил