Всем привет!
Не так давно создал форум на vBulletin 3.8.6
Создал файл robots.txt и залил в корень.
Содержимое файла robots:
Код:
User-agent: *
Allow: /
При помощи онлайн сервиса создал файл sitemap.xml и так же залил в корень.
Всё это указал в панели "Инструменты для веб-мастеров" Google.
Гугл начал индексировать форум, но индексирует только архив и МETA описание.
В блоке "Кто на форуме" вижу что поисковый робот гугл смотрит календарь, и так постоянно! Практически безвылазно смотрит календарь и ничего больше.
Вот скриншот:
Как заставить индексировать темы и посты, а не только архив?
Сегодня создал другой файл robots.txt такого содержания:
Код:
User-agent: *
Disallow: /clientscript/
Disallow: /cpstyles/
Disallow: /customavatars/
Disallow: /customgroupicons/
Disallow: /customprofilepics/
Disallow: /images/
Disallow: /includes/
Disallow: /signaturepics/
Disallow: /clear.gif
Disallow: /ajax.php
Disallow: /album.php
Disallow: /announcement.php
Disallow: /attachment.php
Disallow: /calendar.php
Disallow: /converse.php
Disallow: /cron.php
Disallow: /editpost.php
Disallow: /external.php
Disallow: /faq.php
Disallow: /global.php
Disallow: /group.php
Disallow: /group_inlinemod.php
Disallow: /groupsubscription.php
Disallow: /infraction.php
Disallow: /inlinemod.php
Disallow: /joinrequests.php
Disallow: /login.php
Disallow: /member.php
Disallow: /member_inlinemod.php
Disallow: /memberlist.php
Disallow: /menuimg.php
Disallow: /moderation.php
Disallow: /moderator.php
Disallow: /newattachment.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /payment_gateway.php
Disallow: /payments.php
Disallow: /picture_inlinemod.php
Disallow: /picturecomment.php
Disallow: /poll.php
Disallow: /posthistory.php
Disallow: /postings.php
Disallow: /private.php
Disallow: /profile.php
Disallow: /register.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /search.php
Disallow: /sendmessage.php
Disallow: /showgroups.php
Disallow: /subscription.php
Disallow: /threadrate.php
Disallow: /usercp.php
Disallow: /usernote.php
Disallow: /visitormessage.php
Может теперь нормально будет?
Я в этом деле совсем ещё новичёк, поэтому самому разобраться наверное не под силу, да и свободного времени на изучение всего этого не так много.
Подскажите пожалуйста, что не так с форумом? Почему так плохо индексируется?
Линейный вид
