Dns для блокировки рекламы через роутер

DNS-серверы AdGuard являются одним из способов защиты пользователей от рекламы, трекинга и фишинга. Эти серверы обладают многими преимуществами, благодаря которым они являются одними из наиболее надежных.

1. Как выбрать DNS-сервер AdGuard
2. Как отключить рекламу через DNS-сервер AdGuard
3. Как выбрать наилучший DNS-сервер
4. Что такое AdGuard DNS COM
5. Полезные советы и выводы

Как выбрать DNS-сервер AdGuard

Вы можете выбрать один из трех режимов DNS-серверов AdGuard, которые предоставляются для различных целей:

• Режим «По умолчанию»: DNS-серверы 94.140.14.14 или 94.140.15.15 используются для защиты от рекламы, трекинга и фишинга.
• Режим «Семейный»: DNS-серверы 94.140.14.15 или 94.140.15.16 используются для защиты от рекламы, трекинга и фишинга, а также для блокировки взрослых сайтов и безопасного поиска.
• Режим «Без фильтрации»: DNS-серверы 94.140.14.140 или 94.140.14.141 используются без особых ограничений.

Как отключить рекламу через DNS-сервер AdGuard

Чтобы отключить рекламу через DNS-сервер AdGuard, выполните следующие шаги:

1. Перейдите в раздел «Сеть» и выберите «Настройки».
2. Выберите свою сеть и нажмите «Изменить настройки».
3. Прокрутите вниз и выберите «Настройки DNS».
4. Укажите DNS-серверы 94.140.14.14 или 94.140.15.15 (режим «По умолчанию») или 94.140.14.15 или 94.140.15.16 (режим «Семейный»).

Как выбрать наилучший DNS-сервер

Если вы ищете наилучший DNS-сервер, следует обратить внимание на следующие варианты:

• OpenDNS (208.67.222.222 и 208.67.220.220)
• Публичный Google DNS (8.8.8.8 и 8.8.4.4)
• Level3DNS (4.2.2.1 и 4.2.2.2)
• DNSCrypt
• Comodo Secure DNS (8.26.56.26 и 8.20.247.20)

Что такое AdGuard DNS COM

AdGuard DNS COM является бесплатным сервисом доменных имён, который предназначен для блокировки рекламы, защиты личных данных, обеспечения безопасного поиска в браузере и ограждения детей от взрослых материалов. Интернет-фильтр обеспечивает минимальную защиту от рекламы, трекинга и фишинга.

Полезные советы и выводы

• DNS-серверы AdGuard позволяют избавиться от рекламы, трекинга и фишинга.
• Для использования DNS-серверов AdGuard необходимо настроить свою сеть.
• При выборе DNS-сервера следует обращать внимание на скорость и надежность.
• AdGuard DNS COM — это бесплатный сервис для блокировки рекламы, защиты личных данных и обеспечения безопасного поиска в браузере.
• Выбор наиболее подходящего DNS-сервера поможет повысить безопасность и эффективность использования интернета.

Общие сведения

Настройка службы DNS

Для включения сервиса необходимо перейти в меню Сервисы — Службы DNS — включить службу DNS Proxy, а также Включить фильтрацию DNS.

После включения службы статус «Отключено» изменится на «Работает«. Сам сервис фильтрации при запуске изменит свой статус на «Запускается«, что говорит о том, что маршрутизатор подготавливает списки для фильтрации контент рекламы. На загрузку списков может потребоваться несколько минут(зависит от вашего тарифного плана). После того как списки загружены сервис изменит свой статус на «Работает«.

Период обновления списков фильтрации составляет 24 часа. 

На этом конфигурация фильтра нежелательной рекламы заканчивается. Теперь, если сравнить результаты до включения сервиса и после, то можем увидеть следующий результат:

Слева — страничка, которая попала под блокировку, справа — страничка без блокировки рекламы. Стоит обратить внимание на то, что реклама блокируется и на ресурсах с онлайн кинотеатрами.

Настройка исключений блокировки рекламы

Не исключены случаи когда под блокировку попадают доверенные ресурсы, и чтобы повторно получить доступ к доверенному ресурсу, нужно добавить разрешающее правило в разделе Исключения блокировки рекламы

Принудительная блокировка нежелательной рекламы

Блокировка производится по тому же принципу что и исключения из блокировки, но на этот раз в качестве действия необходимо «Блокировать», а не «Разрешить».

Например: если мы хотим заблокировать доступ к сайту e1.ru или Яндекс.Директ(an.yandex.ru) со своей рекламой, то достаточно добавить два правила: 

После внесения правил, страницы находящиеся под блокировкой для пользователей открываться не будут.

Три кита интернетной рекламы

1) рекламодатели : компании, фирмы, частные предприниматели … => (торговля).
2) агрегаторы/распространители : google, yandex, mail.ru, проворливые посредники, собственная реклама.
3) пользователи : я, вы … мы.

Разговор с контент менеджером :
— как вы относитесь к тому, что ваши браузеры пестрят рекламой, и что вы с этим делаете?!
— отключаем, потому что надоела.
— но вы же сами неустанно покупаете места, и проталкиваете рекламу!
— да, а что делать?! так надо .

Двуличие? Нет. Но нервную систему беречь следует !)
Сделать мир чище можно не только покупая меньше пластиковой упаковки, …

==============================

Для браузеров на компьютерах можно установить дополнение «AdBlock Plus«.
А вот с мобильными телефонами сложнее всё. Поэтому можно часть рекламы блокировать на самом роутере.

==============================

«Задача» :
1) наладить фильтр рекламы на роутере, который будет действовать на все компьютеры / телефоны / планшеты подключенные к нему по сети(шнурок) или WiFi.

«Действия и комментарии» :

1) Запоминаем IP-адрес СВОЕГО роутера : чаще это 192.168.0.1 / 192.168.1.1 / 192.168.100.1 и т.д.

2) Оборудование :
2.1) Роутер MT-PON-AT-4 (белтелеком) : IP-адрес 192.168.67.1
2.2) Роутер HG8245H-256M : IP-адрес 192.168.100.1
3) Список :

==============================

2.1) Роутер MT-PON-AT-4 (белтелеком) :
2.1.1) Внешний вид :

2.1.2) Вход на веб-интерфейс роутера : через браузер заходим

2.1.3) Создаем фильтр : добавляем в список DNS-имена агрегаторов/распространителей , сопоставляя их с IP-адресом своего роутера.
Так мы делаем их ложными.

==============================

2.2) Роутер HG8245H-256M :
2.2.1) Внешний вид :

2.2.2) Вход на веб-интерфейс роутера : через браузер заходим

2.2.3) Создаем фильтр : добавляем в список DNS-имена агрегаторов/распространителей , сопоставляя их с IP-адресом своего роутера.
Так мы делаем их ложными.

==============================

3) Список :
Браузеры компьютеров / телефонов будут пробовать скачивать рекламные-скрипты, но после наших операций они будут искать их на самом роутере, а не в интернете … и не находить .
т.е. рекламы не будет.

(!! в каждом адресе удалить пробелы, ставились чтоб форум не воспринимал как ссылки !!)

Время на прочтение
6 мин

Количество просмотров 137K

Данная статья является логическим завершением небольшой дискуссии с тов. vvzvlad, которая развернулась под топиком «Чистим домашний интернет от очень назойливой рекламы (Ad’s blocker для OpenWRT)», где автор с помощью wget, sed и cron на OpenWRT успешно сливает файлы рекламных хостов, парсит и подсовывает dns-серверу dnsmasq.

Переадресовывая клиента при запросе «рекламного» домена, например, на loopback (127.0.0.1 — 127.255.255.255), вместо котента рекламы клиент получит благодатное «ничего» (разумеется, при условии, что у нас не работает локальный веб-сервер который слушает локалхост). Механизм фильтрации довольно старый и не лишен недостатков. Например, нельзя указать маски хостов (*.ad-domain.tld) или «вырезать» рекламу, баннеры которой хостятся на запрашиваемых ресурсах. Но зато не привязан к какому-то либо протоколу и довольно прост в эксплуатации. Более того, если его использовать, например, на домашнем или офисном маршрутизаторе, который используется в качестве DNS сервера, реклама успешно порежется на всех гаджетах, где IP нашей железки прописан первым в качестве DNS сервера.

Но что если у нас вместо роутера с кастомной прошивкой используется… MikroTik (RouterOS), функционал которого накладывает некоторые ограничения? Под катом вы узнаете каким образом удалось успешно «сконвертировать» файл хостов в пригодный для него формат, как автоматизировать это дело и что для хабралюдей в качестве бонуса был создан небольшой сервис как раз для автоматизации этого процесса (маленький, абсолютно бесплатный и с открытыми исходниками).

Настраиваем MikroTik

Настройка самой железки вряд ли вызовет какие-либо трудности. Укажем IP маршрутизатора в качестве первого DNS сервера в DHCP — «IP» → «DHCP Server» → «Networks» → %default config%. Первым прописываем IP самого MikroTik-а, нажимаем «OK»:

DNS сервер работает «из коробки», и можно даже не менять его стоковые настройки:

Единственная интересная для нас кнопка — «Static» («Статические маршруты»), в которых мы должны прописать «рекламные» домены, указав куда такие запросы перенаправлять.

Конвертируем файл хостов

Файл хостов имеет формат:

# Any comments
127.0.0.1 localhost
127.0.0.1 domain-a.tld
127.0.0.1 domain-b.tld

Формат скрипта для MikroTik, использующий статические DNS маршруты:

# Any comments
/ip dns static
add address=127.0.0.1 name=localhost
add address=127.0.0.1 name=domain-a.tld
add address=127.0.0.1 name=domain-b.tld

Для получения актуальных списков первого и преобразования их во второй мы выполним простые команды в шелле на, например, десктопе (bash):

1. Скачиваем списки и аккуратно складываем их под именами ./hosts_list.1, ./hosts_list.2 и т.д.:

   $ src=('http://pgl.yoyo.org/adservers/serverlist.php?hostformat=hosts&showintro=0&mimetype=plaintext' 'https://adaway.org/hosts.txt'); i=0; for file in ${src[*]}; do i=$((i+1)); wget --no-check-certificate -O "./hosts_list.$i" "$file"; done;

2. Грепаем всё что начинается на ‘127.0.0.1 ‘, удаляем комменты, оставляем только имена доменов, убираем дубликаты, убираем пустые строки и оформляем каждый домен в виде команды для импорта:

   $ in="./hosts_list.*" && out="./adblock_dns.rsc" && host='127.0.0.1'; echo "/ip dns static" > $out && grep '127.0.0.1 ' $in | grep -v '^#' | cut -d' ' -f 2 | sort -u | grep . | sed "s/^/add address=$host name=/" >> $out && rm -f $in; wc -l $out;

   Да, надо бы использовать регулярку и вообще всё переделать, но самое главное — я передал тебе свою мысль, дальше дело за тобой

На выходе у нас получится файл adblock_dns.rsc, который не лишним будет дополнительно проверить на корректность содержимого.

Импортируем в MikroTik

Для того, чтобы импортировать полученный файл, мы цепляемся к маршрутизатору по ftp, заливаем adblock_dns.rsc, после чего цепляемся по ssh или открываем терминал, в котором выполняем:

1. Делаем резервную копию (полученный бэкап лучше сохранить у себя на машине):

   /system backup save

2. Если у тебя в таблице нет важных маршрутов, то можем грохнуть все имеющиеся записи:

   /ip dns static remove [/ip dns static find]

3. Импортируем загруженный файл:

   /import adblock_dns.rsc

4. Убираем за собой:

   /file remove adblock_dns.rsc

Теперь можешь (опционально) перезагрузить MikroTik, проверить корректность получения адресов DNS серверов по DHCP и попытаться открыть какой-либо ресурс, который ранее был наводнен рекламой — её должно стать ощутимо меньше.

Эмпирически доказано что при импортировании ~5500 записей Mikrotik hAP lite (650MHz @ RAM 32 Mb) встает почти колом при попытке в GUI открыть таблицу статических маршрутов. Перезагрузка помогает

Автоматизация

Один из простейших вариантов автоматизации — скрипт на баше, который по крону поддерживает в актуальном состоянии adblock_dns.rsc, находящийся в открытом доступе по, скажем, ftp. Его основа была уже описана выше, осталось только оформить его по твоему усмотрению (необходима отдельная машина).

Ещё один вариант — это использование MetaRouter на самом или соседнем MikroTik-е, на котором установлен тот же OpenWRT (избавляемся от необходимости в отдельной машине; этот вариант не расписан подробно за неимением достойного MikroTik-а под руками).

Второй скрипт (на MikroTik) забирает его (adblock_dns.rsc), делает бэкап и, если и файл скачался успешно, и бэкап сохранился успешно, его импортирует, предварительно (внимание) грохнув все имеющиеся маршруты:

:local hostScriptUrl "ftp://user:login@ftp_host:21/adblock_dns.rsc";

:local scriptName "adblock_dns.rsc";
:local backupFileName "before_stopad";
:local logPrefix "[StopAD]";

do {
 /tool fetch mode=ftp url=$hostScriptUrl dst-path=("./".$scriptName);
 :if ([:len [/file find name=$scriptName]] > 0) do={
   /system backup save name=$backupFileName;
   :delay 1s;
   :if ([:len [/file find name=($backupFileName.".backup")]] > 0) do={
     /ip dns static remove [/ip dns static find];
     /import file-name=$scriptName;
     /file remove $scriptName;
     :log info "$logPrefix AD block script imported, backup file (\"$backupFileName.backup\") created";
   } else={
     :log warning "$logPrefix Backup file not created, importing AD block script stopped";
   }
 } else={
   :log warning "$logPrefix Backup file not downloaded, script stopped";
 }
} on-error={
 :log warning "$logPrefix AD block script download FAILED";
};

Бонус для хабралюдей

А что делать, если у тебя дома/офисе/гараже стоит MikroTik и хочется или просто порезать рекламу, или автоматизировать обновление хостов, не поднимая никакие метароутеры и хосты с файлами по ftp, вот чтоб просто и без заморочек?
Правильно, нужно чтобы это поднял кто то за тебя. И в качестве бонуса — такая штука уже поднята.

Смысл заключается в следующем — тебе достаточно перейти на нужную страницу, указать свои настройки и получить URL, по которому будет доступен скрипт с указанными тобой настройками. Там же будет предоставлен и исходник готового скрипта для тебя. Возможности, которые реализованы на данный момент:

• Выбор из списка публичных файлов-хостов (спасибо AdAway для Android);
• Хочется указать свои источники? Без проблем! (можно, например, указать три публичных хост-файла и два своих, расположенных на том-же gist.github.com, получив таким образом довольное удобное средство управления статическими маршрутами на подопечных маршрутизаторах);
• Настраиваемый адрес (IP v4) перенаправления;
• Указание ограничения (лимита) количества записей в итоговом скрипте (для того чтоб «случайно» не положить «слабую» железку);
• Указание своих маршрутов (будут просто добавлены первыми в генерируемый скрипт);
• Возможность указания исключений — нужные домены никогда не будут «заблокированы»;
• Довольно удобная генерация готового скрипта для MikroTik;

Парсер написан на PHP (потребует php5-curl)

Приложение написано на golang, лицензия MIT, исходники доступны по ссылке mikrotik-hosts-parser. Сколько сервис проживет — не берусь загадывать, но надеюсь что достаточно долго. Стойкую к хабраэффекту площадку любезно предоставил тов. drakmail, за что спасибо ему и команде cgood.ru.

Ссылка: MikroTik DNS Stop AD

ВНИМАНИЕ! Если вы ранее пользовались скриптом по ссылке выше, и у вас внезапно он перестал работать — знайте, причина в его обновлении. Первым делом попробуйте всё там же просто взять его обновленную редакцию, после этого всё должно успешно заработать. Приношу свои извинения за возможные неудобства!

Диклеймер: 1. Команда cgood.ru не имеет отношения к сервису. 2. Не хорошо допускать кого-либо к исполнению кода на твоих маршрутизаторах. Поэтому призываю пользоваться им исключительно в ознакомительных целях. Если всё нравится, сделай форк, настрой под себя да пользуйся на здоровье. За возможные перебои в работе, хабраэффект или ошибки ответственности никто не несет. 3. Я приложу все усилия, чтобы всё работало «как надо» максимально продолжительное время, но нужно понимать степень ответственности.

При обнаружении ошибок в работе сервиса или опечаток в тексте — пожалуйста, сообщайте об этом в личку. Заранее спасибо!

Update!

Исходник скрипта переписан чуть более, чем полностью. Теперь это полноценное приложение на Lumen, и все-все исходники лежат в репозитории.
«stopad.generate.club» лег навсегда, к сожалению. Но не всё так плохо! Подняты 2 зеркала (одно от команды «cgood.ru»; довольно мощное), второе — на моей скромной VDS-ке. Та, что моя — правда, более чем скромная, юзайте её с осторожностью.

Update 2!

Приложение вновь переписано, но уже на golang. Колоссальный прирост производительности и «облегчение» веса приложения. Все детали — в репозитории.

Ссылочки:
Новый адрес (от команды cgood.ru): stopad.cgood.ru
Резервная площадка: stopad.hook.sh