Re: Вопросы по WordPress
Цитата:
Сообщение от Incap
Заранее извиняюсь, если мой пост не в той теме, проблема заключается в следующем:
есть некоторый блог, проиндексированный поисковиками, но при проверке пишет, что индескируемых страниц всего 1-2, хотя постов больше 20. Также пишет, что всему виной файл robots.txt, который блокирует эти страницы... Пробовал разные сочетания файла robots, на данный момент содержание его такого:
sitemap: адрес сайта/sitemap.xml
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /go/
Disallow: /archives/
disallow: /*?*
Disallow: /wp-*
Disallow: /author
Disallow: /comments/feed/
До этого были другие, но результат не поменялся... В чём может быть проблема?
|
А движок то какой у сайта?
То что у вас тут если закинуть в вордпресс то это полный запрет индексации практически, так, как у вордпресс структура записей:
site.ru/?p=номер это блокируется disallow: /*?*
site.ru/archives/номер это блокируется Disallow: /archives/
site.ru/2011/07/название/ вот это чисто.
Так что нужно смотреть по структуре сайта, может у вас роботс вообще не блокирует (именно для вас), а может весь контент в блоке.