Robots.txt

Для того, чтобы ускорить индексации сайта в поиске - закрываем в Robots.txt неинтересные, и бесполезные для пользователей информацию. Например, статистика посещений, страница с результатами поиска, страницу регистрации. И так, создаем новый текстовый документ, переименовываем его в Robots (многие переименовывают в Robots.txt, этого ни в коем случае делать нельзя, так как .txt - это расширение текстового документа) и вставляем нижеуказанный код.

User-Agent: *

Disallow: /wiki/Служебная:UserLogin

Host: wikiency.org

Где Disallow: указывает на запрет индексации станицы, а /wiki/Служебная:UserLogin путь к указанной страницы.

Host: wikiency.org - ваш домена.