Сложилось так, что в рамках рабочих и бытовых задач появился у меня заветный список ресурсов, которые приходится регулярно мониторить "руками": зашел на сайт, посмотрел изменилось ли что, закрыл.

Думаю, многие сталкивались с подобной рутиной и задумывались об автоматизации действий в браузере. Вот и я решил найти удобный, и желательно бесплатный инструмент, способный выполнить мои задачи:

• мониторинг новостей по ключевым словам

• проверка организаций в открытых реестрах

• мониторинг цен и скидок

• отслеживание авиабилетов

• мониторинг появления новых объявлений и вакансий, и т.п.

После тщательного поиска, мне удалось найти два бесплатных варианта: браузерное расширение с открытым исходным кодом и облачный сервис, где для небольшого числа проверок обещают вечный бесплатный план. Оба инструмента оказались весьма популярными, интуитивно понятными и удобными. Давайте посмотрим на них в деле.

Браузерное расширение

Чтобы мониторинг работал круглосуточно, не мешая мне пользоваться основным ПК, было решено установить расширение в браузере на отдельном виртуальном сервере (VPS).

Для комфортной работы был арендован VPS с 2 ядрами, 4GB RAM и операционной системой Ubuntu 24.04. По умолчанию сервер выдается с root доступом и без графического интерфейса, поэтому первым делом создадим нового пользователя (например myrobot) с надежным паролем и установим рабочий стол:

root@vps:~# adduser myrobot
root@vps:~# apt update && apt install ubuntu-desktop-minimal -y

Чтобы к рабочему столу виртуального сервера можно было подключиться удаленно, установим пакет XRDP:

root@vps:~# apt install xrdp -y

Теперь на наш сервер можно заходить используя штатное "Подключение к удаленному рабочему столу" в Windows, или же с помощью любого XRDP-клиента для Linux, например Remmina (в десктопном Ubuntu установлен по умолчанию).

Подключаемся, вводим имя пользователя и пароль:

Запускаем браузер FireFox и устанавливаем расширение Automa напрямую из каталога аддонов, или загрузив его с GitHub. То же самое можно сделать и для браузера Google Chrome, если вы предпочитаете его.

Работа с Automa предельно проста – все действия моделируются с помощью блоков действий, соединяемых стрелками. В качестве примера попробуем создать простого робота, который будет ежедневно мониторить мою карму на Habr и отправит сообщение в Telegram, когда она вырастет. Смотрим:

Весь процесс занял несколько минут, в спойлере ниже есть подробное описание действий в видео:

Преимущества Automa:

• бесплатное и удобное ПО с открытым исходным кодом

• используется свой чистый IP, что позволит избежать появления капч и срабатывания антиботов

• можно использовать не только для мониторинга, но и для эмуляции часто повторяющихся действий в браузере

• встроенный планировщик заданий, интеграция с сервисами Google, блок Javascript для вставки произвольного кода, и многое другое
   

Недостатки:

• для постоянного мониторинга требуется держать компьютер включенным. Это решается заказом недорогого виртуального сервера

• нужно немного времени, чтобы посмотреть как организована работа с хранением данных (переменные и таблицы) и "набить руку" с синтаксисом их написания. Для этого есть большая база знаний

• в данный момент замечена нестабильная работа режима записи действий (значок ⦿ в меню расширения). О баге уже сообщили разработчикам

Облачный сервис

Сервис, о котором пойдет речь, называется Browse AI. В рамках бесплатного тарифа попробуем настроить мониторинг кармы с его помощью:

В результате, при каком-либо (любом) изменении значения кармы, мы получим уведомление по электронной почте.

Преимущества:

• простой и понятный

• бесплатный для небольшого числа проверок

• интеграции с Google Sheets, Zapier, Webhooks и др.

• доступ через API
   

Недостатки:

• ограниченный функционал, в основном предназначенный для отслеживания изменений и извлечения данных

• созданные задачи запускаются на серверах Browse AI, сетевые адреса которых могут быть хорошо знакомы антироботам. У меня, например, возникла сложность с загрузкой сайта Skyscanner

Вывод

Хотя оба рассмотренных решения хороши, я отдаю предпочтение браузерному расширению, которое успешно решает все поставленные задачи. Что касается Browse AI, то даже в рассмотренном примере мониторинга кармы, у меня не вышло реализовать такую же логику ее проверки и отправки уведомлений в Telegram, как в Automa.