AI能干爬虫干的事吗?也就是搜集数据?_云南省玉溪市华宁县洪钱摊贺电视节目合伙企业

  • 刘强东称「京东外卖很快就会出来一个跟美团完全不同的商业模式」,如何看待此回应?
  • 腾讯开源的 libco 号称千万级协程支持,那个共享栈模式原理是什么?
  • AI能干爬虫干的事吗?也就是搜集数据?_云南省玉溪市华宁县洪钱摊贺电视节目合伙企业

    诚信为本,市场在变,诚信永远不变...
    热门分类: 第一系列 | 第二系列 | ......>>更多
    公司动态 当前位置: 首页 > 新闻动态 > 公司动态

    AI能干爬虫干的事吗?也就是搜集数据?

    添加时间:2025-06-27 21:50:11

    刚安装好 Gemini CLI,测试用 AI Agent 来写个爬虫试试。

    我本来想写复杂一点,比如告诉 AI 列表页的 URL 构造,告诉 AI HTML 页面里的 DOM 构造,告诉 AI 我都需要哪些数据等等。

    后来想,既然都智能体了,干脆让 AI 自主到底,所以用了最简单的 Prompt: 爬取完整的知识库 [链接],将结果保存在一个 txt 文档里。

    AI 的第一步:访问链接,获取 HTML(由于不那么信任 AI,所以我选的单次同意执行): 第二步:安装需要的库(其实…。

    AI能干爬虫干的事吗?也就是搜集数据?