11.08.2011, 01:13 PM
Предлагаю обсудить варианты идеального robots.txt для MyBB
На офф форуме советуют использовать следующий robots.txt:
Хочу добавить, что при данной настройки поисковики не будут обрабатывать темы в режиме просмотра "для печати", что на мой взгляд не правильно.
На офф форуме советуют использовать следующий robots.txt:
Код:
Sitemap: /sitemap.xml
User-Agent: *
Disallow: /chat
Disallow: /archive
Disallow: /captcha.php
Disallow: /editpost.php
Disallow: /misc.php
Disallow: /modcp.php
Disallow: /moderation.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /printthread.php
Disallow: /private.php
Disallow: /ratethread.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /sendthread.php
Disallow: /task.php
Disallow: /usercp.php
Disallow: /usercp2.php
Disallow: /calendar.php
Disallow: /thankyoulike.php
Disallow: /postloop.php
Disallow: /tylsearch.php
Disallow: /memberlist.php
Disallow: /*action=emailuser*
Disallow: /*action=nextnewest*
Disallow: /*action=nextoldest*
Disallow: /*year=*
Disallow: /*action=weekview*
Disallow: /*action=nextnewest*
Disallow: /*action=nextoldest*
Disallow: /*sort=*
Disallow: /*order=*
Disallow: /*mode=*
Disallow: /*datecut=*
Disallow: /member.php?*action=profile
Allow: /Хочу добавить, что при данной настройки поисковики не будут обрабатывать темы в режиме просмотра "для печати", что на мой взгляд не правильно.