当前位置:当前位置: 首页 >
AI能干爬虫干的事吗?也就是搜集数据?
文章出处:网络 浏览次数:发表时间:2025-06-27 20:20:12
刚安装好 Gemini CLI,测试用 AI Agent 来写个爬虫试试。
我本来想写复杂一点,比如告诉 AI 列表页的 URL 构造,告诉 AI HTML 页面里的 DOM 构造,告诉 AI 我都需要哪些数据等等。
后来想,既然都智能体了,干脆让 AI 自主到底,所以用了最简单的 Prompt: 爬取完整的知识库 [链接],将结果保存在一个 txt 文档里。
AI 的第一步:访问链接,获取 HTML(由于不那么信任 AI,所以我选的单次同意执行): 第二步:安装需要的库(其实…。
同类文章排行
- 如何评价字节跳动开源的 HTTP 框架 Hertz ?
- Vim 有什么奇技淫巧?
- 西方人是怎么发现地球是圆的的?
- 请问有人能估计一下 go 相比 php 在不同用户量下能省多少钱吗?
- 为什么越来越多的国内男孩,要娶国外女孩?
- PHP现在真的已经过时了吗?
- 公务员单位为什么不用指纹打卡机并且严格考勤制度?
- 能够自己一个人创业的全栈web码农fullstack developer要会哪些技术?
- 你的亲戚提过什么过分的要求?
- NextJS的全栈能力现在如何了?
最新资讯文章
- PHP现在真的已经过时了吗?
- 为什么广西盛产鬼火少年?
- 你们跟网友面过基吗?翻车了吗?
- 作为一个服务器,node.js 是性能最高的吗?
- 如何对付遛狗不牵绳的人?
- 为啥 php 还有这么多人在用啊?
- 什么事情是你待在西安才知道的?
- 曼德拉是南非的罪人吗?
- 你健身是为了什么?
- 打下来全部的星链近地卫星好打么?
- 为什么中国的入境外国游客数量还不如日本?
- 以色列为什么突然敢打伊朗了?不怕被报复?
- 造一艘航母有多难?
- 为什么很多司机不办 ETC?
- 亚洲体坛最漂亮的十位女运动员都有谁?
- 各位都在用Docker跑些什么呢?
- 做客孩子临走时带走几只玩具,我的孩子抗拒并一直哭,要怎么开导?
- 如何看待日本小学校园餐只有一小块鸡肉?
- 异性同办公室久了会不会日久生情?
- 谷歌云服务宕机导致 OpenAI、Shopify 等服务中断,此次宕机的具体技术原因是什么?





