→ При разработке сайта лендинг в подарок! ЖМИ! ←
Апр
9

Robots+wordpress+воровство

Сегодня на повестке дня вопросы воровства контента. Как видите, на моем блоге практически каждая запись уникальна, поэтому мне хочется закрыть доступ всяким автоматическим «воровайкам» и прочей нечисти. К тому же все эти ворюги, кроме того, что воруют уникальный контент, ещё и нагружают сервер. Прямо как полипы, которые жизни не дают! Причем ладно, если бы сервер нагружался незначительно. У меня был момент, когда потребление оперативки одним блогом достигало 200(!) мегабайт. Про загрузку процессора вообще лучше промолчать!

Будем с этим что-то делать, а именно блокировать нахрен всю эту воровскую шушеру. На помощь нам придут роботы, а точнее — robots.txt.

В файлике, который я предлагаю вам скачать, содержатся директивы для всех известных воров контента. Качайте и устанавливайте! Скажем НЕТ воровству!

Прокомментировать

Рубрики

Наши услуги

В прямом эфире