Automatisierung

Crawl4AI ist ein Open-Source-Webcrawler und -Scraper (Apache 2.0), der Websites in LLM-taugliches Markdown und strukturierte Daten umwandelt. Er lässt sich per Docker selbst hosten, unterstützt MCP und bietet eine Cloud-API.

Browse AI ist ein No-Code-Web-Scraper und Website-Monitor, den du per Klick trainierst. Es gibt über 250 vorgefertigte Roboter sowie Integrationen mit Google Sheets, Airtable und Zapier.

BrowserAct ist eine KI-gestützte No-Code-Scraping-Plattform: Du beschreibst die benötigten Daten, und sie baut einen selbstheilenden Bot mit Proxy- und CAPTCHA-Handling. Der Export erfolgt als CSV, JSON, API, Make, n8n und Zapier.

Web-Scraping-API-Dienst. Erleichtert die Datenerfassung, indem er Proxy-Rotation, JavaScript-Rendering und CAPTCHA-Lösung übernimmt.

Firecrawl ist eine Web-Daten-API, die Websites in saubere, strukturierte Daten wie Markdown und JSON für KI umwandelt. Mit den Endpunkten Search, Scrape, Crawl, Interact und Parse kannst du suchen, ganze Websites crawlen, mit Seiten interagieren, die einen Login erfordern, und PDF- oder DOCX-Dateien auslesen. Es richtet sich an Entwickler, die RAG-Pipelines und KI-Anwendungen bauen; es ist Open Source und bietet SDKs für Python, Node.js, Go und mehr sowie einen MCP-Server. Im kostenlosen Tarif ohne Karte sind 1.000 Credits pro Monat enthalten.

Cloud-Browser-Automatisierung für KI-Agenten. Verwalte Headless-Browser-Sessions und rufe Webdaten programmatisch ab.

Apify ist eine Cloud-Plattform mit fertigen „Actor“-Tools für Web Scraping und Automatisierung. Actors sind serverlose Programme, die Daten aus dem Web abrufen oder Browseraktionen automatisieren. Apify bietet Tausende fertige Actors, API-Zugriff, Datenspeicherung, einen Proxy-Dienst und einen MCP-Server für KI-Agenten. Es eignet sich für Entwickler und Unternehmen, die Marktforschung betreiben, Leads sammeln und Social Media beobachten. Der kostenlose Tarif, für den keine Kreditkarte nötig ist, gibt jeden Monat ein erneuertes Nutzungsguthaben von 5 $; darüber hinaus gilt ein Pay-as-you-go-Modell.

KI-gestütztes Tool für Web-Crawling und Datenextraktion. Sammle strukturierte Daten automatisch von Websites.