Crawl4AI v0.4 Documentation

Crawl4AI 是一个开源的网络爬虫和刮取工具，专为与大型语言模型（LLM）协同工作而设计。它能够从网页中提取结构化数据，生成适合AI模型消费的格式（如Markdown），并提供灵活的配置选项来处理各种复杂的网页场景。