Карта сайта для smf 2.0.2

[Жека]

Нужно добавлять эти строки:
Allow: /*topic
Или необязатльно?

С этим правилом есть очень интересный нюанс.

Если в роботс.тхт одновременно правила:
Allow: /*topic
Disallow: /*action

То роботам будет разрешено скачивать вложения, т.к. в ссылках на вложения одновременно есть и action и topic => сработает разрешающее правило.

Если не хотите, чтобы роботы скачивали вложения (а это рекомендуют Mavn и Yworld_garry тут), обязательно уберите строчку Allow: /*topic