firecrawl/firecrawl
Firecrawl
Firecrawl — API и открытый сервер для поиска, обхода сайтов и превращения веб-страниц в чистый Markdown или структурированные данные.
Open Source: #crawler
Проекты каталога, отмеченные тегом #crawler. Теги работают как отдельные посадочные страницы, чтобы похожие инструменты было проще находить и связывать между собой.
В подборке 5 проектов с суммарным рейтингом 370,540 звёзд на GitHub. Основные языки: Python, TypeScript, JavaScript.
Репозитории
Найдено: 5
unclecode/crawl4ai
Crawl4AI
Crawl4AI — Python-краулер и инструмент извлечения веб-данных, который готовит страницы для LLM, RAG и агентных сценариев.
D4Vinci/Scrapling
Scrapling
Scrapling — Python-фреймворк для извлечения данных с сайтов, запросов и полноценных обходчиков.
scrapy/scrapy
Scrapy
Scrapy — Python-фреймворк для веб-обходчиков и извлечения структурированных данных с сайтов.
NaiboWang/EasySpider
EasySpider
EasySpider — визуальный инструмент для браузерной автоматизации и сбора данных с веб-страниц.