Firecrawl推出LLM.txt API，网站内容轻松转文本
Firecrawl近期推出了LLMs.txt生成器接口（Alpha版），用户只需提供网站URL，即可自动抓取内容并生成llms.txt和llms-full.txt两种格式的文本文件，适用于大语言模型训练。该功能支持异步处理和状态监控，可自定义爬取页面数量及是否生成完整文本，但限制处理公开页面且总数不超过5000个。
🔗 https://docs.firecrawl.dev/features/alpha/llmstxt
欢迎访问AI工具网 Ai138.com，我们致力于为AI专业人士和人工智能爱好者提供全面的AI工具和资源。在我们的平台上，您可以找到涵盖AI聊天、自然语言处理、图像与绘画处理、机器学习以及视频和音频制作等领域的顶尖工具。探索AI，深入了解AI技术如何赋能创新和效率提升，让我们一起步入AI技术的未来世界！
