Автоматизация

Crawl4AI — веб-краулер и скрапер с открытым кодом (Apache 2.0), превращающий сайты в Markdown и структурированные данные, готовые для LLM. Запускается на собственном сервере через Docker, поддерживает MCP и предлагает облачный API.

Browse AI — no-code веб-скрапер и монитор сайтов, которого вы обучаете кликами. Предлагает более 250 готовых роботов и интеграции с Google Sheets, Airtable и Zapier.

BrowserAct — no-code платформа скрапинга на базе ИИ: вы описываете нужные данные, и она создаёт самовосстанавливающегося бота с управлением прокси и CAPTCHA. Экспортирует в CSV, JSON, API, Make, n8n и Zapier.

API-сервис веб-скрейпинга. Упрощает сбор данных, беря на себя ротацию прокси, рендеринг JavaScript и решение CAPTCHA.

Firecrawl — API веб-данных, превращающий сайты в чистый markdown и структурированные данные вроде JSON для ИИ. Через эндпоинты Search, Scrape, Crawl, Interact и Parse можно искать, обходить сайт целиком, взаимодействовать со страницами, требующими входа, и читать файлы PDF и DOCX. Сервис рассчитан на разработчиков RAG-конвейеров и ИИ-приложений; он с открытым исходным кодом, имеет SDK для Python, Node.js, Go и других языков, а также MCP-сервер. Бесплатный тариф без карты включает 1 000 кредитов в месяц.

Платформа облачной автоматизации браузера для ИИ-агентов. Управляйте headless-сессиями браузера и программно получайте данные из веба.

Apify — облачная платформа с готовыми инструментами «Actor» для веб-скрейпинга и автоматизации. Actor — это бессерверные программы, которые извлекают данные из интернета или автоматизируют действия в браузере. Apify предлагает тысячи готовых Actor, доступ по API, хранение данных, прокси-сервис и MCP-сервер для ИИ-агентов. Подходит разработчикам и компаниям, занимающимся исследованием рынка, сбором потенциальных клиентов и мониторингом соцсетей. Бесплатный тариф без банковской карты даёт ежемесячно обновляемый кредит на использование в 5 $; сверх этого действует оплата по факту использования.

Инструмент веб-краулинга и извлечения данных с ИИ. Автоматически собирает структурированные данные с сайтов.