AI能干爬虫干的事吗?也就是搜集数据?

2025-06-28 00:00:16

刚安装好 Gemini CLI,测试用 AI Agent 来写个爬虫试试。

我本来想写复杂一点,比如告诉 AI 列表页的 URL 构造,告诉 AI HTML 页面里的 DOM 构造,告诉 AI 我都需要哪些数据等等。

后来想,既然都智能体了,干脆让 AI 自主到底,所以用了最简单的 Prompt: 爬取完整的知识库 [链接],将结果保存在一个 txt 文档里。

AI 的第一步:访问链接,获取 HTML(由于不那么信任 AI,所以我选的单次同意执行): 第二步:安装需要的库(其实…。

AI能干爬虫干的事吗?也就是搜集数据?
广告位810*200
相关阅读
长期不交物业费会怎么样?

长期不交物业费会怎么样?

物业会去法院告你 你去不去出庭都无所谓 因为法院会100%判...

2025-06-22
大一计算机新生怎么合理利用github?

大一计算机新生怎么合理利用github?

(要是当时我自己能够早些知道就好了 )所以我自己也讲给大家听...

2025-06-22
国产数据库有什么坑?

国产数据库有什么坑?

近日, Fauna DB在其***发布了一则公告, The ...

2025-06-22
为什么 Android 和 iOS 渲染架构不一样,各有什么优劣势?

为什么 Android 和 iOS 渲染架构不一样,各有什么优劣势?

其实我觉得这个不应该是描述里的 「 SurfaceFling...

2025-06-22
Node.js是谁发明的?

Node.js是谁发明的?

ryan dahl。 老哥在全国到处接Web项目的时候实在...

2025-06-22