Как я загружал файл robots.txt

Что-то я намудрил со своими жалкими сео-опытами и в результате куча моих страниц выпала из индекса. Но нет худа без добра: в результате узнал множество интересной и полезной информации для себя. Правда, мой блог сейчас в глубокой заднице и пока не уверен, что знаю правильный выход из ситуации.

Не буду описывать подробно проблему, но вкратце: Яндекс видит только одну треть урлов, а Гугл не видит ни одной ссылки на мой блог. Зато индексирует все страницы. Хрен его знает, как побороть злодеев, но я решил, что все дело в robots.txt. И, в-общем, заменил сегодня свой robots на другой, так как оказалось, что старый блокировал главную страницу («а не лезь, если не понимаешь» – это я про себя )!

Как загрузить файл robots.txt

Короче, к чему это я? Решил рассказать вам одну поучительную историю, которая, возможно, поможет кому-то не совершать таких же ошибок. Дело в том, что я сижу на блог-хостинге Агавы, который когда-то имел глупость оплатить на 2 года вперед (ладно, ладно… все когда-то начинали).

А у них этот тариф не предусматривает никаких операций с ФТП, то есть , самостоятельно загрузить  файл robots.txt совершенно невозможно (как я думал)!

В самом начале мой блог вообще не имел robots.txt. Черт его знает почему, но мне вдруг померещилось, что его отсутствие губительно влияет на мою посещаемость. Потом я уже узнал, что отсутствии этого файла приводит лишь к тому, что поисковики просто-напросто по умолчанию индекируют все страницы.

История одного занудства

Я начал тупить и просить Агаву загрузить составленный мной файл. Они долго отказывались (типа, «у вас не такой тарифный план»), но наконец, я их достал и файл был загружен.

На следующий день моя посещаемость прыгнула до 380 чел! «Круто», — подумал я и решил улучшить статистику. Тырю чей-то оптимизированный robots и прошу службу поддержки опять заменить файл.  Скрытно матерясь, они вновь выполняют мою просьбу. Елы-палы, зачем я это сделал, у меня самого не укладывается в голове!

Утром ко мне заглядывает… целых 40 человек. Через день 20. Затем начинают сыпаться страницы из индекса. Я в панике, жизнь не мила, блог хочется взорвать к чертовой матери! В-общем, я вновь сажусь за составление письма и вкладываю очередной файл robots.

Догадываюсь, что там обо мне подумали спецы из службы техподдержки. Но, видимо, они уже настолько охренели от моей занудливости, что присылают следующий ответ:

Добрый день.
Вы можете самостоятельно заменить файл robots.txt на своем блоге. Для этого Вам необходимо установить плагин MyFTP, скачать его можно с такой-то страницы.

Видите, к каким хорошим результатам может привести ослиное упрямство… Парни из Агавы взяли, да и спалили тему.  Ведь этот плагин, который я выкладываю здесь, позволяет не только загрузить файл robots.txt, но и совершать вообще любые действия с файлами WP без использования FTP!

Посмотрим, что будет дальше и привели ли к каким-то результатам мои хитроумные манипуляции.

P.S. А в Агаву я отправил ответ: «Я Вас люблю!»