Остановите веб-спам на своих сайтах

Как веб-разработчик или сеошник, который постоянно мониторит статистику своих сайтов в интернете, Вы наверное замечали посещения на свой сайт из подозрительных доменов, таких как buttons-for-websites.com, semalt.semalt.com, best-seo-solution.com, buttons-for-your-website.com и аналогичных. А может и не замечали, особенно, если в статистике у Вас очень много доменов, с которых переходят или наоборот: эти домены в статистике у Вас значатся как фавориты. Естественно, Вы заинтригованы: кто и почему переходят на Ваш сайт с этих доменов и сами переходите на этот домен. Но Вас редиректит на какой-то сервис, типа анализа сайтов или виджетов кнопок социальных сетей. Собственно, в этом и вся суть подобного веб-спама - цель рекламирующегося получить трафик на свои веб-сайты с помощью массового распространения таких вот поддельных переходов на ваш сайт.

А ваши сайты подвержены веб-спаму?

Такой веб-спам приобретает поистине планетарные масштабы. Начавшись за бугром год или 2 назад, эта эпидемия уверенно захватывает русскоязычный сегмент. Я проанализировал 20 сайтов на разных серверах, разных тематик и разных возрастов, в 80% из них в логах статистики значились переходы с указанных спамных веб-сайтов. Более того, на ряде русскоязычных и забугорных форумах, где тусуются вебмастера, встречались темы, типа: что это такое и как с этим бороться? Получается, кто-то этим веб-спамом занялся всерьез и очень велика вероятность того, что "левые переходы" есть и на Ваш сайт! Атакуются практически все сайты, которые есть в выдаче поисковых систем, занимающие те или иные позиции... Более того, я замечал переходы и на сайты, получившие "красные карточки" (АГС) от поисковых систем, что может свидетельствовать о списках сайтов для спама не только из поиска, их могут заимствовать из различных каталогов, находить на других сайтах. Масштабы в сегодняшнем времени говорят, что атаки веб-спама постоянно расширяются и могут разрастись поистине до планетарных масштабов!

Почему надо с этим бороться?

Некоторые посчитают такой веб-спам бесполезным, особенно те, которые не очень следят за статистикой своего сайта и редко анализируют входящий трафик. Между тем, это негативное явление для Вашего сайта и с этим нужно бороться:

1. Спам-переходы фиксируются счетчиками аналитики как "реальные", но назвать их реальными трудно - у таких переходов 100% отказов и 00:00 времени пребывания на Вашем сайте.
2. Спам-переходы искажают общую сумарную картину Вашего трафика: переходы могут быть не единичными, на продолжении продолжительного времени, с самых экзотических стран и в большом количестве.
3. Наконец, это просто мусор! Точно такой же, как и накапливающийся в Вашем почтовом ящике спам от неизвестных отправителей. Только Вы пока не отправили его в папку СПАМ, а он продолжает атаковать Ваши сайты.

Проще говоря, убить веб-спам на своем сайте это значит - уменьшить число отказов и повысить число хитов/посетителей! Разве не эти показатели Вас интересует в статистике посещений своего сайта?

Как с этим бороться?

Первое, что приходит на ум - блокировать ip доменов, но дело в том, что нет строгого правила - переходы могут быть как с Бразилии, так и с Португалии! Как вариант, вычленить список топовых доменов и запретить им посещать Ваш сайт в .htaccess Чтобы заблокировать спам-переходы на Ваш сайт, в файл .htaccess (в корне Вашего сайта) если у Вас APACHE, пишем правило, которое заблокирует спам переходы по referrer:

<IfModule mod_rewrite.c>
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*simple-share-buttons\.com [NC]
RewriteRule (.*) http://www.simple-share-buttons.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buttons-for-your-website\.com [NC]
RewriteRule (.*) http://www.buttons-for-your-website.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*get-free-traffic-now\.com [NC]
RewriteRule (.*) http://www.get-free-traffic-now.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*sharebutton\.net [NC]
RewriteRule (.*) http://sharebutton.net [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*semalt\.com [NC]
RewriteRule (.*) http://www.semalt.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*best-seo-solution\.com [NC]
RewriteRule (.*) http://www.best-seo-solution.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*best-seo-offer\.com [NC]
RewriteRule (.*) http://www.best-seo-offer.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buttons-for-website\.com [NC]
RewriteRule (.*) http://www.buttons-for-website.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*buy-cheap-online\.info [NC]
RewriteRule (.*) http://www.buy-cheap-online.info [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*free-share-buttons\.com [NC]
RewriteRule (.*) http://www.free-share-buttons.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*free-share-button\.com [NC]
RewriteRule (.*) http://www.free-share-button.com [R=301,L]
RewriteCond %{HTTP_REFERER} ^http://([^.]+\.)*100dollars-seo\.com [NC]
RewriteRule (.*) http://100dollars-seo.com [R=301,L]
</IfModule>

Мы только что заблокировали следующие спам-домены, а также все их поддомены:

• simple-share-buttons.com
• buttons-for-your-website.com
• get-free-traffic-now.com
• sharebutton.net
• semalt.com
• best-seo-solution.com
• best-seo-offer.com
• buttons-for-website.com
• buy-cheap-online.info
• free-share-buttons.com
• free-share-button.com
• 100dollars-seo.com

Разумеется, список может быть не полным и потребуется со временем его модификация, но после этих манипуляций весь веб-спам с моих сайтов благополучно улетучился, статистика стала соответствовать реальному положению вещей, резко уменьшилось число отказов, возросло число хитов/посетителей...