Что такое блокировщик рекламы
Как устроена и работает блокировка рекламы
Как работает блокировщик рекламы? От чего зависит качество блокировки? Почему иногда он пропускает то, что должен заблокировать? Чем разные программы отличаются друг от друга?
Подобные вопросы часто интересуют пользователей, и понимание ответов на них может помочь выбрать и использовать блокировщик эффективнее.
Главное: адблокинг в двух словах
Самый простой и короткий ответ на вопрос будет звучать так: блокировщик не дает браузеру или приложению загружать нежелательные (рекламные) элементы их содержимого.
Чуть подробнее: блокировщик препятствует коммуникации между отображающей веб-страницу программой, например, браузером, и серверами, с которых загружаются рекламные элементы (баннеры, объявления, видео, поп-апы и так далее). Или другие элементы, которые он призван блокировать (например, счетчики статистики или кнопки соцсетей). Самые первые блокировщики имели в основе на другой принцип: они скрывали от глаз пользователя рекламные элементы, которые уже были загружены на страницу. Сейчас этот способ используется в некоторых программах как вспомогательный. А еще можно вспомнить браузерные расширения, которые скрывают с сайтов и соцсетей тексты на определенные тематики, ориентируясь по ключевому слову.
Первое и главное, что надо понимать: в основе блокировки рекламы в интернете лежит — пока что — не искусственный интеллект на самообучающихся нейросетях, а ручной труд, причем не только разработчиков, но и сообщества.
Фильтры и их создатели
Продукт этого ручного труда — фильтры, то есть, списки правил определения рекламы и отделения её от полезного контента. Автоматизировать распознавание рекламы сложно, помимо прочего, еще и потому, что даже у людей нет единого мнения насчет того, что является рекламой, а что нет. Например, вы заходите в интернет-магазин и видите в его шапке баннер «Акция! Купи сегодня два товара и получи третий бесплатно!» Магазин рекламирует самого себя и собственную акцию, есть ли смысл блокировать такое промо? Хочет ли аудитория видеть такие баннеры, или хочет скрыть их?
Другой пример: стоит ли добавлять правила, которые будут работать только для одного вебсайта? Возможно, это имеет смысл, если у сайта очень большая аудитория, нужно только решить, насколько именно большая, по какой посещаемости проходит граница.
В фильтре могут описываться разные аспекты, по которым он будет узнавать элемент: внешний вид, поведение, адрес ресурса, с которого элемент загружается. Всё, что можно описать на языке кода.
Критерии отделения рекламы от всего остального обычно определяются волевым решением основателя того или иного фильтра с учётом мнения сообщества, которое помогает его формировать, и прописываются в политике.
Самый популярный набор фильтров называется EasyList. Он не принадлежит какому-то конкретному блокировщику, но используется в большинстве популярных продуктов (в том числе в Adblock Plus, uBlock Origin, AdGuard).
В рамках EasyList и других фильтр-проектов существуют отдельные фильтры для разных языковых сегментов интернета и для разных типов элементов, которые пользователи хотят блокировать: «классическая» реклама (баннеры, поп-апы и т.д.), следящие элементы (счетчики, рекламные трекеры), кнопки социальных сетей на сайтах, контент, который не хочется показывать детям, и так далее. Таким образом, человек, который хочет убрать баннеры, но не имеет ничего против кнопок соцсетей, может не подключать все фильтры сразу.
Вообще блокировщикам не свойственно разрабатывать собственные фильтры — активно и полноценно этим занимается только AdGuard. Сейчас фильтры AdGuard пополняются и развиваются быстрее, чем EasyList. В этом процессе участвуют не только разработчики, но и сообщество. Это тоже открытый продукт, фильтры AdGuard подключают создатели и пользователи других блокировщиков.
Динамика обновления фильтров EasyList 
Динамика обновления фильтров Adguard
Еще одна особенность работы с фильтрами у AdGuard — анализ статистики их срабатывания. Эта статистика помогает выявить правила, которые не используются, убрать их из списков и тем самым ускорить работу фильтров.
Конвейер фильтрации: от пользователя до разработчика и обратно
Именно от того, насколько оперативно обновляются фильтров, зависит качество блокировщика. Заинтересованные в показе рекламы компании постоянно работают над обходом блокировки. Они меняют все уже попавшие в фильтры идентификаторы рекламных элементов или шифруют запросы страниц к серверам рекламы, чтобы блокировщик их не остановил. Эта деятельность требует столь же постоянных контрмер.
Обычные пользователи жалуются на рекламу, которую видят при включенном блокировщике. Для этого у всех программ есть удобные ссылки и кнопки, сделанные так, чтобы обратная связь не отнимала много времени и сил. Сигнал поступает к разработчикам фильтров, которые добавляют новые правила. Они же управляют фильтрами удаляют ставшие неактуальными правила, оптимизируют их с целью быстродействия, при необходимости заводят новые списки.
фрагмент правил из фильтра Adguard для русскоязычных сайтов. Посмотреть все фильтры Adguard можно в Базе знаний
Разработчики каждого блокировщика сами решают, какие использовать фильтры из общедоступных. Впрочем, не все фильтры полностью совместимы со всеми программами. Разработчики совершенствуют синтаксис (правила составления программного кода) для фильтров, чтобы они быстрее работали и требовали меньше ресурсов, в результате чего фильтры, созданные командой одного приложения, в другом работать хоть и будут, но не так хорошо, как в «родном».
Желание установить побольше разных фильтров, чтобы уж точно поубивать всю рекламу, может обернуться проблемами. В лучшем случае фильтры от неопытного или забросившего их развитие разработчика просто будут действовать с ошибками. В худшем — контроль над фильтрами перехватят хакеры. Они смогут менять правила отображения веб-страниц, полностью контролируя то, что увидит на своем мониторе посетитель определенного сайта. Открытая на работе на весь экран порнокартинка вместо поиска Яндекса – ещё не худший вариант такой ситуации.
Известен случай, когда фильтр RuAdList портил отображение поисковых результатов Яндекса. Забавно, что реклама в «сломанной» выдаче продолжала быть видна. А фильтр этот входил в “комплектацию” известнейших блокировщиков AdBlock и AdBlock Plus в версиях для Рунета.
некорректно отображающаяся контекстная реклама Яндекса
И, конечно, излишнее количество фильтров, особенно неидеально совместимых друг с другом, будет “тормозить” интернет, а то и всю работу устройства.
Чтобы защитить своих пользователей от случайных и намеренных сбоев в работе фильтрации, Adguard размещает все файлы сторонних фильтров на своих серверах и раздает их оттуда.
Но фильтры — это только сырьё. Ошибочным будет впечатление, что разработчики блокировщиков паразитируют на труде их создателей.
Чем занимаются разработчики блокировщиков и чем отличаются их продукты
Каждый блокировщик рекламы имеет собственные стратегии и технологии интерпретации и применения правил, прописанных в фильтрах. Простой пример: если блокировщику уже несколько лет не попадались элементы, соответствующий одному из правил фильтров в его коллекции, что надо делать? Отключить фильтр как устаревший, решив, что веб-разработчики перестали использовать в конструкции страниц такие элементы? Ведь чем меньше правил, тем меньше приложение «весит» и тем быстрее работает! Или не отключать, на тот случай, если элемент всё-таки попадётся на каком-нибудь сайте, а то и вовсе заново войдет в моду?
Подобные решения разработчики принимают не только на основе анализа статистики срабатывания фильтров, как в AdGuard, но и на основе собственной экспертизы, понимания устройства интернета и тенденций его развития.
Работа с фильтрами подразумевает, помимо собственноручного составления и пополнения фильтров, и координацию активности сообщества, и обработку обратной связи от пользователей, и сбор и анализ статистики применения фильтров, и контроль за эффективностью сторонних фильтров, и анализ всей индустрии интернет-рекламы для понимания того, куда движутся технологии и с какой рекламой придется иметь дело в ближайшем будущем.
Разработчикам каждой программы приходится по-своему решать общие вопросы её функционирования, например:
Компания-разработчик занимается поддержкой пользователей, помогает им освоиться с программой и оперативно решать возникающие проблемы.
Наконец, помимо собственно блокировки рекламы у программы могут быть дополнительные задачи. Например, защита детей от нежелательного контента, защита пользователя от мошенничества и других преступлений в интернете.
Блокировщики мобильные, системные, браузерные: в чем разница?
На разных платформах блокировщики работают с учетом особенностей этих платформ и предоставляемых ими возможностей.
Браузерные расширения
Это маленькие программы, которые работают внутри браузера и устанавливаются из его магазина приложений. Наиболее простой продукт для разработки. В том числе потому, что расширения для разных браузеров фактически являются одной и той же программой, адаптированной под каждый из браузеров.
Для пользователей их главное достоинство обычно состоит в бесплатности. Основной недостаток, на первый взгляд, в том, что в каждый из используемых браузеров надо будет отдельно устанавливать расширение. Но на самом деле это не главный минус.
расширения-блокировщики в магазине браузера Chrome
Главный минус в том, что, существуя внутри браузера, блокировщик вынужден подчиняться законам его экосистемы. Эти законы блокировщикам не слишком благоволят, потому что у популярных браузеров есть своё мнение о том, как должна работать реклама.
Например, Google Chrome и популярный в России Яндекс.Браузер принадлежат компаниям, для которых реклама в интернете является основным источником дохода. Они не препятствуют существованию расширений-блокировщиков, но влияют на их работу.
Яндекс даже даёт API (набор программных инструментов для создания приложений под конкретную платформу) блокировки контента для создания контентных фильтров для своего мобильного браузера. Но эти фильтры не будут блокировать то, что показывают рекламные сервисы самого Яндекса.
У свежей версии Content Blocking API десктопной и мобильной версий браузера Safari есть ограничение в 50000 правил для фильтрации. Это довольно жёсткое ограничение, и пока кроме AdGuard никто из блокировщиков не смог сделать программу на базе нового API. Все традиционно популярные блокировщики используют старое, у которого много функциональных ограничений, оно медленнее работает, не позволяет контролировать некоторые типы запросов, отправляемых страницами. AdGuard вписывается в ограничение по правилам, отбирая их на основе статистики использования и оптимизируя размер фильтров.
В браузерах Chrome и Firefox расширения не имеют возможности контролировать запросы к рекламным сервисам, осуществляемые по протоколу WebRTC. То есть, часть запросов страниц на загрузку рекламы выполняется, и реклама блокируется не вся. До недавнего времени аналогичная проблема была с запросами по протоколу WebSocket. Известный порносайт Pornhub обходил блокировщики рекламы именно открывая альтернативный websocket-канал для показа баннеров, если видел у посетителя адблокер.
Когда Google запустил экспериментальный протокол QUIC для работы собственных сервисов в браузерах на основе Google Chromium, пользователи начали сообщать о появлении рекламы: блокировщики не могут контролировать запросы через этот протокол. Проблема существует до сих пор.
Расширения-блокировщики для мобильных браузеров — это отдельная история, но не очень захватывающая. Chrome разработки таких расширений не позволяет. Firefox позволяет. Про Яндекс.Браузер мы уже говорили, API блокировки контента предоставляет еще браузер Samsung Internet. Adblock Plus запустила собственное приложение-браузер с блокировкой рекламы, но он сделан на основе Firefox.
Мобильные приложения
Блокировка рекламы в приложениях возможна только на сетевом уровне. Это значит, что блокировщику нужно создать собственное приложение, которое будет фильтром для интернет-трафика, идущего ко всем остальным приложениям. Оно удаляет рекламу из этого потока данных, и уже «очищенная» информация отображается в приложениях.
Без ложной скромности можно назвать Adguard лучшим (и единственным крупным) продуктом в нише блокировщиков рекламы на Android-устройствах. Сравнимо по известности приложение AdAway, но оно использует принципиально иную техническую стратегию блокировки.
AdAway редактирует файл hosts на устройстве. В этом файле записаны соответствия между url-адресами ресурсов и именами серверов, на которых эти ресурсы находятся. Если отредактировать соответствия между доменами и серверами для рекламных сервисов, запросы к этим доменам не смогут выполняться, и реклама не будет показываться.
Пример файла hosts на android-смартфоне
Этот способ хорош простотой реализации, но имеет существенные недостатки, о них мы подробно писали в блоге. Вкратце — он не позволяет заблокировать всё, что надо, и блокирует что не надо. Например, если вы не хотите видеть объявления рекламной сети Facebook (а к этой сети подключены сотни приложений), вы не сможете пользоваться и самим Facebook.
Adguard же пропускает через себя и фильтрует весь сетевой трафик. Еще у него есть режим DNS-блокировщика, в котором он работает аналогично AdAway. При всех недостатках это сверхэкономный режим работы, не задействующий ресурсы устройства.
Программы для ПК и ноутбуков
Выше мы писали об ограничениях, которым подвержены браузерные расширения для блокировки рекламы. Если установить блокировщик как компьютерную программу, эти ограничения будут неактуальны. Программа осуществляет системную блокировку (system-wide ad blocking), фильтруя весь идущий на компьютер трафик. Результат аналогичен мобильному блокировщику, хотя механизм реализации немного иной. Такая программа, конечно, гораздо сложнее в разработке, чем браузерные расширения.
DNS-фильтрация
DNS — это «система доменных имён», domain names system. Поэтому антирекламная фильтрация DNS работает аналогично редактированию файла hosts, описанному выше, с теми же недостатками и ограничениями. Adguard использует этот подход еще и в приложении под iOS, так как эта система дает меньше возможностей работы с трафиком. Подробнее с возможностями Adguard DNS можно познакомиться в Базе знаний.
Зато этот способ уникален своей кросс-платформенностью. Он обеспечит антирекламу для всех устройств, подключенных к интернету, в том числе к “интернету вещей”. Для Smart-TV, холодильников и любых других устройств “умного дома” можно организовать не только антирекламу, но и фильтрацию исходящего трафика, то есть, ограничить маркетинговую слежку.
Об особенностях фильтрации рекламы именно Adguard вы можете почитать в нашей базе знаний. Если у вас остались вопросы, пожалуйста, выкладывайте их в комментариях, постараемся дать всю дополнительную информацию.
Как заблокировать рекламу в Google Chrome, FireFox и других браузерах
Содержание
Содержание
Реклама в Интернете процветает, с каждым годом ее становится все больше. Многочисленные навязчивые объявления приносят дискомфорт пользователям, потребляя излишний трафик, отвлекая внимание и мешая просмотру контента. Практически у каждого человека рано или поздно возникает желание избавиться от них навсегда. Для этого существуют расширения, функции браузеров и альтернативные решения. Избавиться от проблемы помогают специальные плагины с блокировкой рекламы, реже — VPN/DNS-сервисы ( 
Как работают блокировщики рекламы
Отсеять рекламные блоки от полезного контента — непростое мероприятие, но вполне осуществимое усилиями энтузиастов и отдельных компаний. Для этого используют фильтры, на основе правил. Как это выглядит на примере расширения (Extension), показано на схеме:
Расширения могут блокировать как алгоритмическую, так и спонсорскую рекламу. VPN/DNS-сервисы работают проще, блокируя запросы на известные рекламные серверы. Со спонсорскими блоками этот вариант не работает.
Как блокировщики различают рекламу? Для этого существуют списки правил, целью которых является блокировка любого нежелательного содержимого на странице. Самым обширным из этих списков является EasyList. Вебмастера изучают блокировщики рекламы, ведь от этого зависит их доход, и стараются замаскировать рекламные блоки, чтобы обойти ограничения, а рекламодатели создают новые рекламные сервера. Энтузиасты сообщества снова заносят все это в списки. На текущий момент в базе набралось более 70 тысяч правил.
Какие списки используются в блокировщиках рекламы, и каково их назначение.
К плюсам блокировщиков рекламы можно отнести:
Реализовать плагины с блокировкой рекламы для мобильных устройств сложнее, поэтому чаще встречаются готовые браузеры со встроенным блокировщиком или отдельные приложения.
Какая реклама не блокируется
Стандартные способы избавляют не от всей рекламы. Во-первых, на крупных площадках может использоваться собственная реклама, например, платная подписка, акции, скидки и другие предложения. В этом случае могут помочь собственные фильтры.
На сайте может использоваться антиблокировщик рекламы, который, обнаружив плагины или приложения категории AdBlock, попросит отключить защиту, подменит внешнюю рекламу внутренней, попытается заблокировать доступ к контенту или замаскирует рекламный контент. В борьбу с ними могут вступить блокировщики антиблокировщиков рекламы. В общем, битва энтузиастов и рекламодателей в самом разгаре.
Еще одна категория рекламы, с которой довольно сложно бороться, — нативная реклама. Это могут быть спонсорские блоки (блокируются), но статьи или видео со скрытой рекламой скрыть просто невозможно. В качестве примера можно привести платные обзоры. Некоторые компании заходят дальше и создают действительно креативные вирусные ролики.
Также здесь будет уместно вспомнить про «надежных букмекеров», реклама которых отзывается болью в сердцах многих любителей сериалов. Истошные вопли героев рекламы вряд ли можно назвать приятными, особенно, когда громкость вставки намного выше громкости сериала, и слова персонажей просто не слышно.
Увы, блокировщики тут не помогут, ведь реклама «вшита» в само видео. Там, где вставка записана в начале серии, можно просто отключить звук и перемотать на нужное место. В таких случаях можно отключить автовоспроизведение, а о том, как это сделать говорилось в этой статье. Еще один вариант — скачать серию, и используя видеоредакторы, отредактировать фрагмент. Это долго и сложно — не у всех хватает терпения. Альтернатива — перейти на платные сервисы, и забыть о букмекерах, как о страшном сне.
А можно ли заблокировать рекламу в видео, например, на Ютубе? Как правило, это отдельные вставки в начале ролика. С ними без труда справляются блокировщики для YouTube, которые пользуются таким же спросом, как и расширения для сайтов. В популярных дополнениях блокировщики рекламы для сайта и Ютуба идут в комплекте.
Война рекламодателей с разработчиками блокировщиков
Первый блокировщик появился еще в 1980-х годах, и был разработан специально для сервиса Prodigy. К 2010 году появились практически все популярные сейчас решения, но востребованы они стали уже в 2015 году, когда Apple внедрила функцию блокировки рекламы. Всего за год количество пользователей, установивших расширения или приложения, выросло на 70% и продолжает стремительный рост.
Самый популярный браузер Хром принадлежит Google, львиная доля доходов которой поступает от рекламы. Сейчас, когда продукт находится на пике популярности, корпорация собирается ограничить блокировщики рекламы, мотивируя это снижением производительности, угрозами конфиденциальности и другими причинами.
Речь идет о Manifest v3, который анонсирован еще в 2018 году и в будущем будет внедрен в браузер. Интеграция изменений затянулась, во многом благодаря шумихе, которую подняли разработчики блокировщиков рекламы. Если коротко, то Manifest v3 ограничит количество фильтров. Изначально было объявлено о 5000 правил. Этого не хватит даже для региональных списков, не говоря уже об их совмещении. Сейчас Google обещает расширить поддержку до 100-150 тысяч позиций, но это еще ничего не означает.
В защиту разработчиков браузеров и поисковых систем нужно сказать, что алгоритмы отсеивания сайтов с нежелательным контентом постоянно совершенствуются. Поисковики занижают рейтинг площадок с обилием рекламы, а в браузерах, включая Chrome и его аналоги, вводятся новые алгоритмы блокировки нежелательного содержимого. Собственно, так и появились внутренние блокировщики.
Новые алгоритмы блокировки разрешают отображение рекламы из белого списка. Кстати, такая же функция есть и в Adblock Plus, где по умолчанию должны отображаться объявления от доверенных источников.
Примечательно, что Google и Adblock Plus сотрудничают. Чтобы попасть в белый список рекламодателей, нужно заплатить комиссию и соответствовать требованиям. Кстати, создателем списка Acceptable Ads является AdBlock Plus.
Еще один интересный момент: Manifest v3 уже реализован в Safari от Apple. Список правил Safari имеет ограничение в 50 КБ. Для сравнения, список EasyList «весит» 70 КБ.
Обзор популярных плагинов блокировки рекламы
Учитывая популярность этой категории, в магазинах браузеров можно встретить огромное количество решений. Чтобы перейти в интернет-магазин Chrome, перейдите по этой ссылке, а чтобы открыть Дополнения для Firefox, перейдите по этой ссылке. Рассмотрим самых популярных из них, и заодно проверим функциональность в деле.
Adblock Plus
Считается самым популярным расширением для борьбы с надоедливой рекламой. Пользователь может настроить работу блокировщика под себя.
Используемые списки для фильтрации представлены на скриншоте ниже
Что блокирует при базовой настройке:
Разработчики также обещают дополнительную защиту от вредоносных элементов на сайтах, а также существенное ускорение скорости загрузки.
При тестировании с базовой настройкой не замечено ни одно рекламное объявление. Пример — ролик с Ютуба. Для сравнения представлен скриншот экрана со включенным и отключенным блокировщиком.
Для настройки работы дополнения нужно нажать значок расширения, выбрать шестеренку в появившемся окне, а дальше выбрать нужное. На скриншоте ниже приведен пример того, как отключить отслеживание и доверенную рекламу.
AdBlock
Несмотря на схожее название, это разные продукты от разных разработчиков. В магазине Chrome он так и называется «AdBlock», а для браузера Mozilla предложен «AdBlock for Firefox».
Количество автоматически подгружаемых списков по умолчанию больше:
Исходя из этого, можно сказать, что функциональность блокировщика выше. На деле оказалось, что это не так. Во-первых, реклама Яндекс.Директ все-таки периодически пробивалась, а автовоспроизведение видео на сайте не отключалось. Также появлялись всплывающие окна с предложением подписаться на рассылку. В Ютубе все работает отлично.
Не помогла даже активация всех доступных фильтров в настройке расширения.
AdGuard Антибаннер
Расширение от Adguard Software Ltd. По заявлению разработчиков, эффективно справляется с любыми видами рекламы. Отдельное преимущество удобный современный интерфейс и многообразие настройки.
С функциями блокировки справляется на отлично. Не отключает автовоспроизведение видео на страницах, за исключением рекламы.
Разработчики также предлагают приложения для ПК, iOS и Android.
uBlock Origin
Один из ярых борцов с внедрением Manifest v3. Преимущество uBlock Origin — гибкость настройки и огромный потенциал.
Для удобства пользователя в меню расширения предложена быстрая настройка работы расширения, которая в развернутом виде выглядит так:
Отключив все лишнее, можно заметить, как с сайта исчезла вся реклама и даже прикрепленное видео.
Таким образом у пользователя есть выбор того, что нужно заблокировать на сайте. Функциональность решения оценят продвинутые пользователи.
Ghostery
Блокировщик интересен интеллектуальными функциями блокировки. В бесплатной версии расширения сразу после установки хорошо блокирует рекламу на страницах, не мешая автовоспроизведению и отображению блоков с соцсетей. Поигравшись с настройкой, можно заблокировать и это.
Как видим на примере скриншота, хорошо справляется со своими задачами после внесения корректировок.
И напоследок, небольшой лайфхак. Если блокировщик неожиданно начал пропускать рекламу — удалите его, перезапустите браузер, и заново установите расширение. Во многих случаях это решает проблему.