Виды бот-трафика
- Краулеры и превью ссылок. Поисковики и мессенджеры, которые открывают страницу, чтобы проиндексировать её или построить превью.
- Сканеры и мониторинг. Инструменты безопасности и проверки, которые автоматически запрашивают адреса.
- Парсеры и скрипты. Обычная автоматизация с подделанным или стандартным браузером.
- Headless-браузеры. Настоящие движки браузеров под управлением программы; по одному User-Agent их труднее заметить.
- Прокси и дата-центры. Иногда это живые люди, но часто стоит завести отдельное правило.
Чем он вреден
Если вы платите за клик, клики ботов — это расход без шансов на конверсию. Они занижают конверсию и ROI и добавляют шум в сплит-тест. Чем раньше они отсеяны, тем чище ваши цифры.
Как TDS.SO распознаёт ботов
Каждый клик проходит четыре этапа.
- Правила и списки. Ваши списки разрешённых и запрещённых и известные роботы.
- Проверки сети. Сигналы соединения, например адреса дата-центров и прокси.
- Отпечаток и поведение. Около 40 сигналов браузера и того, как он себя ведёт.
- Итоговый вердикт. Сигналы объединяются в оценку. С 0,5 посетителю показывается CAPTCHA, с 0,7 он считается ботом.
Уровней фильтра четыре, от 0 до 3. Они позволяют выбрать баланс между строгостью и риском задеть живого человека. Каждое решение записывается в лог кликов с причиной.
Что получает бот
В шаблоне вы выбираете действие для бота: отправить на заданный URL, показать лендинг или вернуть код ошибки. Клики ботов всё равно записываются, так что видно, какую долю они занимают. После каждой смены уровня сравнивайте сегменты Люди и Боты за равные периоды и меняйте уровень по одному шагу. Подробнее: фильтрация трафика и антибот.
Вопросы
Все боты вредны?
Нет. Поисковые краулеры и превью ссылок в мессенджерах — обычное дело, но в большинстве воронок на оффер им попадать не нужно.
Может ли фильтр заблокировать живого человека?
Да, любой фильтр может ошибиться. Риск снижают уровни и зона CAPTCHA между «скорее человек» и «бот». После смены уровня просматривайте сегмент ботов.
Проверяет ли TDS.SO домены на блокировки?
Проверяет по VK, Google, Яндексу и спискам мошенничества и присылает уведомление. Домены автоматически она не переключает.