AWS Machine Learning Blog· Daxeshkumar Patel·· 3 小时前AI 评分36
用 Crawl4AI 为 Amazon Bedrock Knowledge Bases 准备网页内容
Prepare web content for Amazon Bedrock Knowledge Bases with Crawl4AI
AI 导读
针对 Amazon Bedrock Knowledge Bases 中需要精细控制的网页来源,可用开源 Python 爬虫 Crawl4AI 做预处理:将每页正文提取为 Markdown 并生成元数据 sidecar 写入 Amazon S3,再由知识库的 S3 数据源完成摄取。
来源:AWS Machine Learning Blog · aws.amazon.com