Robots+wordpress+воровство

K_E_V_in    WordPress     pr, robots, wordpress, блог, бот, контент, робот, сервер, скачать, файл

Сегодня на повестке дня вопросы воровства контента. Как видите, на моем блоге практически каждая запись уникальна, поэтому мне хочется закрыть доступ всяким автоматическим “воровайкам” и прочей нечисти. К тому же все эти ворюги, кроме того, что воруют уникальный контент, ещё и нагружают сервер. Прямо как полипы, которые жизни не дают! Причем ладно, если бы сервер нагружался незначительно. У меня был момент, когда потребление оперативки одним блогом достигало 200(!) мегабайт. Про загрузку процессора вообще лучше промолчать!

Будем с этим что-то делать, а именно блокировать нахрен всю эту воровскую шушеру. На помощь нам придут роботы, а точнее – robots.txt.

В файлике, который я предлагаю вам скачать, содержатся директивы для всех известных воров контента. Качайте и устанавливайте! Скажем НЕТ воровству!

• Отличные стихи про любовь. Читаем и наслаждаемся
• Знаете ли вы, что домашние самоделки могут привнести очень много интересного в вашу жизнь?

Понравилась заметка? Поделись!