SEO

Что такое реферальный спам?

bad bots scaled.jpg

Переходы через спам-запросы, также известные как реферальный спам (Referer Spam), — это одна из распространенных проблем, с которой сталкиваются владельцы сайтов при анализе данных в инструментах веб-аналитики, таких как Яндекс.Метрика и Google Analytics. Этот тип спама заключается в том, что бот или автоматизированная программа посещает ваш сайт, оставляя ложные реферальные ссылки или запросы, которые маскируются под органический трафик. Давайте разберем подробнее, что это такое, как это работает и как можно бороться с этой проблемой.

Что такое реферальный спам?

Реферальный спам (или спам реферера) — это вид спама, который направлен на то, чтобы искусственно сгенерировать трафик с определенного домена, делая вид, что посетители приходят на ваш сайт с конкретного внешнего источника (так называемого «реферера»). Цель этого — заставить вас и других пользователей (например, поисковые системы) обратить внимание на определенный сайт или увеличить его видимость.

Реферальный спам может выглядеть как вполне обычный переход с поисковой системы или сайта, но на самом деле его создают специально настроенные боты. Эти боты заполняют вашу статистику ложными данными, и это приводит к следующим проблемам:

  1. Искажение статистики посещаемости: Ваши показатели по числу посетителей, времени на сайте, источникам трафика и многим другим метрикам становятся некорректными.
  2. Неадекватная оценка поведения пользователей: Ваша аналитика показывает большое количество переходов с не связанных с вашей тематикой запросов, что затрудняет правильное понимание аудитории.
  3. Загрязнение данных: Неправильная информация может сильно затруднить анализ эффективности рекламных кампаний и SEO-оптимизации, а также принятие решений по улучшению сайта.

Почему это делается?

Спамеры используют эту тактику по нескольким причинам:

  1. Увеличение видимости сайта: Если их ссылки появляются в вашей статистике, владельцы сайтов или веб-мастеры могут обратить на них внимание и даже посетить эти сайты, создавая органический трафик для спамеров.
  2. SEO-обман: Некоторые злоумышленники пытаются создать искусственные ссылки на свой сайт, чтобы повысить его рейтинг в поисковых системах, полагаясь на то, что ссылки с реферального трафика могут считаться как часть линкбилдинга.
  3. Мошеннические клики: Есть также вероятность, что такие ссылки ведут на сайты с мошенническим или опасным контентом, чтобы пользователь, перешедший по ним, был вовлечен в более сложные схемы мошенничества.

Как это работает?

Реферальный спам осуществляется ботами, которые могут быть двух типов:

  1. Реальные боты, посещающие ваш сайт:
    • Они действительно заходят на ваш сайт, имитируя визит пользователя. Это приводит к увеличению числа посещений, но все эти визиты не являются реальными и не приводят к никакому взаимодействию с вашим контентом.
    • Они часто используют фальшивые рефереры, чтобы казаться переходами с популярных сайтов или из поисковых систем.
  2. Призрачный спам (Ghost Spam):
    • Это другой вид реферального спама, при котором бот даже не посещает ваш сайт физически. Вместо этого он посылает ложные данные напрямую в вашу систему веб-аналитики, используя идентификатор вашего счетчика. Этот метод более сложный, так как он загрязняет данные без реальных переходов.

реферальный спам боты

Как бороться с реферальным спамом?

Существует несколько эффективных методов борьбы с реферальным спамом в Яндекс.Метрике:

1. Настройка фильтров в Яндекс.Метрике

  • Один из наиболее эффективных способов борьбы с реферальным спамом — использование фильтров, чтобы исключить переходы с подозрительных сайтов.
  • Вы можете настроить фильтры, исключающие все визиты с определенных реферальных URL или доменов. Это уменьшит количество ложных данных в вашей аналитике.

2. Использование отчета «Источники — Рефералы»

  • Проанализируйте отчет по реферальным переходам в Яндекс.Метрике. Там можно увидеть все источники трафика, и, если обнаружите подозрительные ссылки, их можно добавить в фильтр для исключения.
  • Обратите внимание на такие характеристики, как высокий показатель отказов (более 90%) или крайне низкое время на сайте (менее нескольких секунд) — это явные признаки реферального спама.

3. Использование robots.txt для блокировки ботов

  • В файле robots.txt можно прописать команды, запрещающие индексировать ваш сайт ботам, не относящимся к полезным (например, таким как Googlebot или YandexBot). Это поможет ограничить доступ многих спам-ботов.
  • Например:
    makefile
    User-agent: *
    Disallow: /

    Это запретит всем неизвестным ботам доступ к вашему сайту.

4. Настройка фильтрации IP-адресов

  • Если вы замечаете, что спам-трафик исходит от определенных IP-адресов, можно добавить фильтр, исключающий все визиты с этих IP-адресов.

5. Использование .htaccess для блокировки спам-ботов

  • В случае, если вы используете сервер Apache, можно воспользоваться файлом .htaccess, чтобы заблокировать определенные домены и IP-адреса, откуда поступает спам-трафик.
  • Пример:
    css
    RewriteCond %{HTTP_REFERER} spammydomain.com [NC,OR]
    RewriteRule .* - [F]

    Это правило заблокирует доступ с указанного спам-домена.

6. Проверка правильности установки кода Метрики

  • Убедитесь, что код Яндекс.Метрики установлен только на ваших страницах и не используется на других сайтах. Некорректная установка может привести к случайному объединению данных с несколькими сайтами.

Рекомендации по регулярному мониторингу

  • Регулярный аудит данных аналитики: Периодически проверяйте источники трафика и ключевые показатели, чтобы своевременно обнаружить подозрительный трафик.
  • Анализ показателей отказов и времени на сайте: Высокий показатель отказов и низкое время на сайте являются индикаторами нежелательного трафика, который стоит фильтровать.
  • Обновление фильтров: Спамеры постоянно меняют тактики, поэтому важно регулярно обновлять списки фильтров и домены, которые нужно блокировать.

Заключение

Реферальный спам — это проблема, с которой сталкиваются многие владельцы сайтов, и она может значительно искажать аналитические данные. Правильная настройка фильтров, регулярный мониторинг реферального трафика и настройка доступа для ботов помогут вам минимизировать влияние реферального спама на статистику вашего сайта. Это позволит вам точнее оценивать поведение ваших пользователей и принимать более эффективные решения для улучшения сайта и его контента.