跳到正文
原文
AGI Hunt· Extreme_Leg_6162·· 3 小时前AI 评分58

开源爬虫 Scrape01 发布:一句话生成提取器,提供礼貌与怪兽双模式

开源自修复爬虫 Scrape_01:一句话生成提取器,礼貌与猛爬双模式

AI 导读

Reddit 用户开源爬虫项目 Scrape01,输入 URL 和一句自然语言目标,Agent 会设计提取器、在真实页面上验证并输出有序 CSV。默认礼貌模式遵守 robots.txt、请求间隔 1 秒且不执行 JS,怪兽模式改用本地 Chrome/Edge 渲染、间隔约 150ms 并忽略 robots.txt(跳过的主机会记录日志)。

来源:AGI Hunt · agihunt.info