crawl4ai

一个开源的LLM友好的网络爬虫和抓取器，将网页内容转换为干净的Markdown格式，用于RAG、智能体等应用。