Obscura

Obscura — это headless-браузер на Rust, созданный специально для веб-скрапинга и автоматизации через AI-агентов. Он выполняет JavaScript через движок V8, поддерживает Chrome DevTools Protocol и работает как замена headless Chrome с Puppeteer и Playwright. При этом Obscura жрёт в разы меньше памяти (30 МБ против 200+ у Chrome), весит всего 70 МБ вместо 300+, загружает страницы за 85 миллисекунд вместо полсекунды и стартует мгновенно, без двухсекундной задержки.

Инструмент можно скачать готовым бинарником для Linux, macOS и Windows, запустить через Docker или собрать из исходников. Никаких зависимостей — ни Chrome, ни Node.js. Просто скачал, распаковал и запустил.

Obscura умеет извлекать данные со страниц через команду fetch: вытащить заголовок, все ссылки, отрендерить JavaScript и выгрузить HTML, дождаться полной загрузки динамического контента или ограничить время навигации для медленных сайтов. Можно выгружать бинарные данные вроде изображений или JSON, работать через HTTP- или SOCKS-прокси, сохранять результат в файл.

Для массового парсинга есть команда scrape, которая обрабатывает десятки URL параллельно с настраиваемой конкурентностью. Для автоматизации через код — CDP-сервер, к которому подключаются Puppeteer и Playwright. Можно логиниться через формы, отправлять POST-запросы, работать с куками и перенаправлениями.

Если собрать Obscura с флагом stealth, он включает антидетект: рандомизирует отпечатки браузера (GPU, canvas, audio, battery), маскирует внутренние свойства, подменяет navigator.webdriver на undefined и блокирует 3520 доменов трекеров и аналитики. Это делает его почти неотличимым от обычного Chrome для сайтов с защитой от ботов.

Движок поддерживает основные домены CDP: Target, Page, Runtime, DOM, Network, Fetch, Storage, Input. Можно перехватывать запросы на лету, модифицировать заголовки, управлять куками, эмулировать клики и ввод текста. Есть даже экспериментальный метод для конвертации DOM в Markdown.

Obscura распространяется под лицензией Apache-2.0, весь код открыт на GitHub. Автор обещает, что все функции останутся бесплатными, а платная облачная версия будет только для тех, кто не хочет разворачивать инфраструктуру самостоятельно.