firecrawl-agentAI-агент для сложных сайтов

firecrawl/cli

Firecrawl агент автономно навигирует по сложным многостраничным сайтам и извлекает структурированные данные JSON по заданной схеме.

Firecrawl агент автоматизация структурированные данные JSON AI скрапинг

Установка

npx -y skills add firecrawl/cli --skill firecrawl-agent --agent claude-code

Firecrawl Agent

AI-агент для автономного извлечения данных: навигирует по сложным сайтам и возвращает структурированный JSON. Используйте, когда нужны структурированные данные с сайтов — ценовые планы, списки продуктов, каталоги, любые данные в виде JSON со схемой. Работает 2–5 минут. Более мощный, чем простой скрапинг, для многостраничного структурированного извлечения.

Когда использовать

Нужны структурированные данные со сложных многостраничных сайтов
Ручной скрапинг потребовал бы навигации по многим страницам
Нужно, чтобы AI сам нашёл, где живут данные

Быстрый старт

# Извлечение структурированных данных
firecrawl agent "extract all pricing tiers" --wait -o .firecrawl/pricing.json

# С JSON-схемой для структурированного вывода
firecrawl agent "extract products" \
  --schema '{"type":"object","properties":{"name":{"type":"string"},"price":{"type":"number"}}}' \
  --wait -o .firecrawl/products.json

# Сфокусироваться на конкретных страницах
firecrawl agent "get feature list" --urls "<url>" --wait -o .firecrawl/features.json

Параметры

Параметр	Описание
`--urls <urls>`	Начальные URL для агента
`--model <model>`	Модель: spark-1-mini или spark-1-pro
`--schema <json>`	JSON-схема для структурированного вывода
`--schema-file <path>`	Путь к файлу JSON-схемы
`--max-credits <n>`	Лимит кредитов для этого запуска агента
`--wait`	Ждать завершения агента
`--pretty`	Красивый вывод JSON
`-o, --output <path>`	Путь к файлу вывода

Советы

Всегда используйте --wait для получения результатов inline. Без него возвращается job ID.
Используйте --schema для предсказуемого структурированного вывода — иначе агент возвращает произвольные данные.
Запуски агента потребляют больше кредитов, чем простые scrape. Используйте --max-credits для ограничения расходов.
Для простого однострочного извлечения предпочитайте scrape — быстрее и дешевле.