Исключены из поиска темы и страницы разделов

Perm · 31 января 2018, 23:55:14

Всем привет.
Обнаружил через панель веб-мастера Яндекса, что некоторые темы на моём форуме, части тем (и даже целые страницы разделов) исключены как запрещённые элементом noindex. Буквально так. Но я не запрещал их индексирование через robos.txt. В чём тут может быть дело?
А в Гугле исключены не только темы, но и целые разделы. Написано вот что: Вариант страницы с тегом canonical. Статус: Исключено
Спасибо.

GeorG · 01 февраля 2018, 01:55:44

Дубли наверное исключены.

Пример ссылок дайте, те что исключены.

Perm · 01 февраля 2018, 01:57:59

В Яндексе - да, возможно. Но как может быть дублем страница раздела?
А в Гугле исключено как раз то, что я хотел бы видеть в поиске. Целые разделы выкинули почему-то...

GeorG · 01 февраля 2018, 01:59:21

Пример тех ссылок, что исключены дайте.

Perm · 01 февраля 2018, 02:43:15

GeorG, спасибо за ответ. Завтра напишу примеры (точнее, сегодня днём).

Perm · 01 февраля 2018, 13:08:32

Характерные примеры ссылок, которые исключены в Яндексе:

1) http://maths24.net/index.php?board=26.40

неканоническая

Страница проиндексирована по каноническому адресу http://maths24.net/index.php?board=26.30, который был указан в атрибуте rel="canonical" в исходном коде. Исправьте или удалите атрибут canonical, если он указан некорректно. Робот отследит изменения автоматически.

2) http://maths24.net/index.php?topic=3053.20

Запрещено элементом noindex

Страница была исключена из поиска из-за установленного с помощью мета-тега robots со значением content="noindex" или content="none" запрета на индексирование. Чтобы страница появилась в поиске, удалите запрет и отправьте её на переобход.

3) http://maths24.net/index.php?topic=1388.0

Ошибка 503

17.12.2017 при обращении к странице робот получил HTTP-код 503. Проверьте ответ сервера. Если проблема актуальна, обратитесь к администратору своего сайта или сервера. Если страница уже доступна, отправьте её на переобход.

4) http://maths24.net/index.php?board=7.30

http://maths24.net/index.php?board=88.25

http://maths24.net/index.php?board=82.75

http://maths24.net/index.php?board=13.50

http://maths24.net/index.php?board=82.50

http://maths24.net/index.php?board=82.100

http://maths24.net/index.php?board=41.100

http://maths24.net/index.php?board=7.25

http://maths24.net/index.php?board=3.50

http://maths24.net/index.php?board=3.25

http://maths24.net/index.php?board=3.100

Запрещено элементом noindex

Ещё дубли есть. Но с дублями - понятно.

P.S. Это далеко не всё.

В Гугле 96 исключённых ссылок, например, целый раздел http://www.maths24.net/index.php?board=13.0. Этот раздел, согласно замыслу форума, должен был стать центральным. Причина - Вариант страницы с тегом canonical. Главная страница исключена по той же причине.

Что с этим делать?

digger® · 01 февраля 2018, 13:40:34

Цитата: Perm от 01 февраля 2018, 13:08:32Характерные примеры ссылок, которые исключены в Яндексе:

1) http://maths24.net/index.php?board=26.40

У вас на страницах должно быть по 25 тем, а тут ссылка на 40, поэтому неканоническая.

ЦитироватьВ Гугле 96 исключённых ссылок, например, целый раздел http://www.maths24.net/index.php?board=13.0. Этот раздел, согласно замыслу форума, должен был стать центральным. Причина - Вариант страницы с тегом canonical. Главная страница исключена по той же причине.

Что с этим делать?

У вас домен maths24.net, поэтому ссылки с www неканонические.

Perm · 01 февраля 2018, 13:43:00

digger®, спасибо. А почему именно 25?

Цитата: digger® от 01 февраля 2018, 13:40:34У вас домен maths24.net, поэтому ссылки с www неканонические.

А это хорошо или плохо?

digger® · 01 февраля 2018, 13:48:21

Цитата: Perm от 01 февраля 2018, 13:43:00digger®, спасибо. А почему именно 25?

Это задается в настройках и такое число по умолчанию стоит в SMF.

ЦитироватьА это хорошо или плохо?

Это не хорошо и не плохо, обычно клеится правильно с canonical и указанием host в robots.txt. По-хорошему, нужно редирект с www сделать, чтобы не было этих хвостов.

Perm · 01 февраля 2018, 14:02:28

Посмотрел: сейчас уже 25 стоит.
А нельзя ли как-то скормить поисковикам те страницы, которые я считаю каноническими?

GeorG · 01 февраля 2018, 14:09:04

Цитата: Perm от 01 февраля 2018, 14:02:28А нельзя ли как-то скормить поисковикам те страницы, которые я считаю каноническими?

Какие например?
Вот ссылка http://maths24.net/index.php?board=26.40 по ней открывается вторая страница, но там правильная ссылка это - http://maths24.net/index.php?board=26.25 (т.к, по вывод задан по 25 тем в разделе), а первая (что 26.40) это дубль.
Сделайте тогда отображение по 10 тем, тогда и ссылка http://maths24.net/index.php?board=26.40 станет правильной, но в тоже время http://maths24.net/index.php?board=26.25 станет дублем.

Perm · 01 февраля 2018, 14:13:52

Цитата: GeorG от 01 февраля 2018, 14:09:04Какие например?

Может, я и чушь говорю, но, например, все темы этого раздела: http://maths24.net/index.php?board=94.0
А нельзя ли удалить тег canonical из всех страниц? Даст ли это что-нибудь?

GeorG · 01 февраля 2018, 14:16:14

Цитата: Perm от 01 февраля 2018, 14:13:52А нельзя ли удалить тег canonical из всех страниц?

Можно вырезать его из кода.

Цитата: Perm от 01 февраля 2018, 14:13:52Даст ли это что-нибудь?

Конечно - скорее всего бан в ПС.

Цитата: Perm от 01 февраля 2018, 14:13:52Может, я и чушь говорю, но, например, все темы этого раздела: http://maths24.net/index.php?board=94.0

А что там не так?

Perm · 01 февраля 2018, 14:46:18

Цитата: GeorG от 01 февраля 2018, 14:16:14А что там не так?

Наоборот. Хотел, чтобы это было в поиске.
Поясню. У меня на форуме есть два раздела, посвящённых математической логике: лекции и раздел с просьбами решить задачу. Естественно, тематика задач и лекций (в которых уже есть решённые задачи) пересекается. Мне хотелось бы, чтобы приоритет в поисковой выдаче был у раздела с лекциями. Это можно как-то сделать?

Perm · 01 февраля 2018, 14:57:34

А нельзя ли как-то сделать, чтобы лекции были не темами форума, а открывались на отдельной странице типа maths24.net/lectures ?
Как здесь, например: http://mathhelpplanet.com/static.php
Есть ли на форуме информация по созданию статических страниц? Поиск не помог.

Perm · 01 февраля 2018, 17:22:53

http://mods.simplemachines.org/index.php?mod=130

Нашёл такой мод, но на 2.0.10, наверное, не будет работать.
Никто не пользовался?

И вот такой:

http://custom.simplemachines.org/mods/index.php?mod=331

DiS · 01 февраля 2018, 23:35:52

Цитата: Perm от 01 февраля 2018, 17:22:53И вот такой:

http://custom.simplemachines.org/mods/index.php?mod=331

пожалуй похожие варианты
https://custom.simplemachines.org/mods/index.php?mod=1354
https://custom.simplemachines.org/mods/index.php?mod=3185
https://custom.simplemachines.org/mods/index.php?mod=1311
+ порталы

Perm · 01 февраля 2018, 23:47:07

DiS, спасибо!
А есть ли смысл оформить лекции как статьи?

DiS · 02 февраля 2018, 00:18:33

с точки зрения удобства наполнения и восприятия - да
с точки зрения SEO - не знаю

Perm · 02 февраля 2018, 12:06:43

Цитата: digger® от 01 февраля 2018, 13:48:21По-хорошему, нужно редирект с www сделать, чтобы не было этих хвостов.

А не подскажете, как это сделать?

digger® · 02 февраля 2018, 12:34:40

Цитата: Perm от 02 февраля 2018, 12:06:43А не подскажете, как это сделать?

https://www.reg.ru/support/hosting-i-servery/sajty-i-domeny/kak-dobavit-redirekt/kak-nastroit-pereadresatsiyu-na-domen-bez-www

Perm · 02 февраля 2018, 12:46:41

Спасибо.

Perm · 02 февраля 2018, 13:18:59

digger®, у меня на хостинге есть папка public_html. Это туда нужно файл кинуть?

digger® · 02 февраля 2018, 13:22:47

Цитата: Perm от 02 февраля 2018, 13:18:59digger®, у меня на хостинге есть папка public_html. Это туда нужно файл кинуть?

Если корень форума в ней, то да.

Perm · 08 февраля 2018, 01:10:45

Цитата: DiS от 01 февраля 2018, 23:35:52https://custom.simplemachines.org/mods/index.php?mod=3185

DiS, спасибо огромное! Поставил. Вроде бы, всё работает. А нет ли русификации для данного мода?

P.S. Русификацию нашёл тут - https://dragomano.ru/translations/sa-knowledge-base. Если кому-то нужно...