Яндекс. В индексе только одна страница.

[RasDva12]

Здравствуйте! В индексе яндекса только 1 страница - главная. в гугле все нормально - 460 страниц. В чем может быть проблема?
возможно роботс блокирует? я в этом не силен. посмотрите пожалуйста роботс:

User-agent: *
Allow: /*sitemap
Allow: /*arcade
Allow: /*rss
Allow: /*type=rss
Disallow: /attachments/
Disallow: /avatars/
Disallow: /Packages/
Disallow: /Smileys/
Disallow: /Sources/
Disallow: /Themes/
Disallow: /Games/
Disallow: /*.msg
Disallow: /*.new
Disallow: /*sort
Disallow: /*topicseen
Disallow: /*wap
Disallow: /*imode
Disallow: /*action
Disallow: /*prev_next
Disallow: /*all
Disallow: /*PHPSESSID
Disallow: /*go.php
Host: open-taobao.ru

User-agent: Slurp
Crawl-delay: 100

[chilly86]

и давно такое?
была у меня такая же ситуация
написал им письмецо - помогло

http://www.simplemachines.ru/index.php?topic=13691.0

[RasDva12]

Да, давно уже!

[RasDva12]

написал письмо Яндексу.

Вот проверил роботс Яндексом.


только ничего тут непонимаю.

[Yworld_garry]

Список URL добавить, туда кликните и добавьте проверяемые урлы.
Но насколько я сейчас проверил, роботс тут не причем, все разрешено.

АГС, думается, как вариант без анализа. Плюс траблы с кодировкой.

[RasDva12]

Добавил насколько  URL - разрешено везде

[Yworld_garry]

Я выше написал что все правильно с роботс.
нужно смотреть дальше. Возможность попадания под санкции и не помешает написать платонам.

[RasDva12]

Письмо яндексу уже отправил пару часов назад - пока молчат.
Скажите каким образом можно проверить, попал сайт под санкции или нет?

[Yworld_garry]

Подождите ответа платонов.

[RasDva12]

Моё письмо Яндексу:
Здравствуйте!
В индексе только главная страница форума - http://open-taobao.ru
остальные страницы отсутствуют в поиске.
вот мой robots.txt :

User-agent: *
Allow: /*sitemap
Allow: /*arcade
Allow: /*rss
Allow: /*type=rss
Disallow: /attachments/
Disallow: /avatars/
Disallow: /Packages/
Disallow: /Smileys/
Disallow: /Sources/
Disallow: /Themes/
Disallow: /Games/
Disallow: /*.msg
Disallow: /*.new
Disallow: /*sort
Disallow: /*topicseen
Disallow: /*wap
Disallow: /*imode
Disallow: /*action
Disallow: /*prev_next
Disallow: /*all
Disallow: /*PHPSESSID
Disallow: /*go.php
Sitemap:  http://open-taobao.ru/sitemap.xml
Host: open-taobao.ru

User-agent: Slurp
Crawl-delay: 100

помогите решить проблему.

Ответ яндекса:
Здравствуйте, Дмитрий!

Рекомендую Вам воспользоваться формой проверки файла robots.txt:
http://webmaster.yandex.ru/robots.xml
Непосредственно в форме Вы можете корректировать указания и проверять, запрещены или разрешены необходимые Вам страницы к индексированию. Если нужные Вас страницы запрещены к индексированию, то соответствующий запрет следует убрать из файла.

Подробнее о файле robots.txt Вы можете прочитать на странице нашей помощи: http://help.yandex.ru/webmaster/?id=996567

И что делать я не пойму. роботс ведь нормальный.

[spack]

RasDva12, эту строчку из роботса Disallow: /*go.php можешь убрать если не стоит редирект, а его у тебя нет, я смотрел на твоем форуме.
Также эта лишняя Allow: /*arcade и эта Disallow: /Games/. На свежеинсталеных 2.0.2 нет такова.

з.ы. Скажи а ты чем sitemap.xml сгенерил ?

[Yworld_garry]

Allow: /*arcade и эта Disallow: /Games/, такого нет пока не стоят эти моды, приведено как пример того и как сделать что бы было/не в индексе.
Disallow: /*go.php, советую иметь всем без исключения, поставить мод.

[maestrosite.ru]

опять 25!

Disallow: /*PHPSESSID

Яндекс заходя к вам на сайт видит все локальные ссылки с этим параметром. Яндекс смотрит в роботс, видит параметр, и куда он дальше идёт?

upd. точно было! - http://www.simplemachines.ru/index.php?topic=14314.msg110231#msg110231

[Yworld_garry]

Яндекс заходя к вам на сайт видит все локальные ссылки с этим параметром. Яндекс смотрит в роботс, видит параметр, и куда он дальше идёт?

Уходит с сайта и больше никогда туда не придет, так как он обиделся что ему больше некуда идти и форум ему не генерирует нормальных ссылок. Бан на всегда.
Как то так.