Firecrawl Agent

AI-агент для автономного извлечения данных: навигирует по сложным сайтам и возвращает структурированный JSON. Используйте, когда нужны структурированные данные с сайтов — ценовые планы, списки продуктов, каталоги, любые данные в виде JSON со схемой. Работает 2–5 минут. Более мощный, чем простой скрапинг, для многостраничного структурированного извлечения.

Когда использовать

• Нужны структурированные данные со сложных многостраничных сайтов
• Ручной скрапинг потребовал бы навигации по многим страницам
• Нужно, чтобы AI сам нашёл, где живут данные

Быстрый старт

# Извлечение структурированных данных
firecrawl agent "extract all pricing tiers" --wait -o .firecrawl/pricing.json

# С JSON-схемой для структурированного вывода
firecrawl agent "extract products" \
  --schema '{"type":"object","properties":{"name":{"type":"string"},"price":{"type":"number"}}}' \
  --wait -o .firecrawl/products.json

# Сфокусироваться на конкретных страницах
firecrawl agent "get feature list" --urls "<url>" --wait -o .firecrawl/features.json

Параметры

Советы

• Всегда используйте --wait для получения результатов inline. Без него возвращается job ID.
• Используйте --schema для предсказуемого структурированного вывода — иначе агент возвращает произвольные данные.
• Запуски агента потребляют больше кредитов, чем простые scrape. Используйте --max-credits для ограничения расходов.
• Для простого однострочного извлечения предпочитайте scrape — быстрее и дешевле.