MrScraper

MrScraper — API для веб-скрейпинга со встроенными прокси, headless-браузерами и ИИ. Он поможет вытащить чистые структурированные данные с сайтов для разового сбора и для регулярных конвейеров, без своей инфраструктуры. Сервис рассчитан на исследования данных, электронную коммерцию и анализ конкурентов: им пользуются компании от стартапов до крупного бизнеса, люди без программирования и разработчики.

На вход подаются URL и описание полей обычным языком или селекторами, на выходе получаются структурированные строки с экспортом в CSV и другие форматы, в том числе через API. Визуальный скрейпер и AI Mode помогут указать страницу, описать нужные данные словами и получить структуру без кода. Manual Mode даст точный контроль через собственные селекторы, а API и SDK пригодятся, когда сбор нужно автоматизировать. Каждый запрос к API проходит по токену из дашборда, в документации есть руководство по первому вызову.

ИИ-скрейпинг разберёт страницу, найдёт значимые данные и вернёт структуру из «грязной» вёрстки. Любую страницу можно превратить в API: ИИ сможет распознать макет и шаблоны и отдать структурированные данные. Javascript Scenario позволит кликать, прокручивать, ждать элементы и выполнять свой JavaScript, чтобы подгрузить динамический контент. Browser Agent работает как web unblocker для автоматического извлечения данных. Резидентные прокси с домашними IP ротируются сами, таргетинг идёт по странам, включать их можно для каждого скрейпера отдельно. Headless-браузер отрендерит страницы с JavaScript, повторный запуск доступен отдельно, а если селекторы разъедутся, AI Mode сможет заново определить поля. Одним вызовом API можно снять полный или частичный скриншот так, как страница выглядит в реальном браузере.

Скрейпер можно запускать по расписанию от раза в минуту до выбранных дней недели, результаты каждого запуска смогут уходить дальше автоматически, а история показывает итог каждой попытки. Готовые данные уйдут в вебхуки, SQL-базы, AWS S3, Zapier, n8n или на email. На Free, Pro и Enterprise набор функций один: обход блокировок, ручной скрейпинг и скрейпинг через API, готовые API для маркетплейсов, структурированное извлечение на основе ИИ, аналитика и мониторинг, запуск по расписанию, вебхуки и экспорт в CSV. Среди сценариев — сбор отзывов с рейтингом, текстом и датой для анализа тональности и сбор вакансий по названию, компании, месту и зарплате, фильтры в URL при этом сохраняются.

На Enterprise будут прямая помощь команды при настройке и в ежедневной работе, масштабируемая инфраструктура, приоритетная поддержка и обязательства по SLA. Корпоративный тариф также включает объём токенов под задачу, бесплатный пилот, объёмные цены и индивидуальные интеграции, цену называют на созвоне. Данные обрабатываются в зашифрованном виде, процессы соответствуют GDPR. Для первого запуска есть пошаговое руководство, можно запросить демонстрацию.

Scraper Free стоит $0 в месяц и включает 1 000 токенов каждый месяц, банковская карта не требуется. Scraper Pro стоит $199 в месяц и включает 200 000 токенов, доступ открывается сразу, отменить подписку можно в любой момент. На Free и Pro использование сверх лимита стоит $1 за 1 000 токенов. Токены списываются за объём извлечённых данных, в Manual Mode на предсказуемых больших запусках их уходит меньше. В каждый тариф, от Free до Enterprise, входит 10 ГБ трафика резидентных прокси, дальше трафик оплачивается отдельно, от $1,5 за ГБ. С Free на Pro можно перейти в настройках оплаты, для индивидуального тарифа нужно записаться на звонок.

Скрейп может не вернуть данные, если контент грузится через JavaScript, селекторы больше не совпадают или сайт блокирует запросы. В таких случаях в документации указаны рендеринг, повторное определение полей через AI Mode или подключение прокси. Целевые сайты могут распознавать автоматический трафик и ограничивать частоту запросов. Запуск по расписанию может не выполниться, если расписание выключено, баланс токенов исчерпан или страница больше не соответствует настройкам.