SEO для TYPO3
Частично соглашусь
Всё зависит от того что я Allow или Disallow и как именно.
Вот здесь тоже немного описано.
http://tools.seobook.com/robots-txt/
Я так предполагаю,
или сам TYPO3 или Extensions (realUrl или multilingual) что-то генерируют, что я не вижу.
А может Гугль у себя запомнил, что я несколько недель назад русскую ветку для прочёски закрыл.
Но я после этого уже несколько раз новые robots.txt и Sitemaps им пересылал.
Основной язык видит каждый раз, когда я какие изменения делаю
и реагирует соответственно.
А вот с дополнительным языком не хочет.
только в зависимости от чистоты и правильности robots.txt
или блокирует полностью всю ветку и показывает только одно предупреждение,
или блокирует каждый пункт навигации по отдельности и показывает 11 предупреждений.