// 读文档和网页
crawleev3.18.2
Node/Python 网页爬取与浏览器自动化库
开源 维护中 给 AI 用
一段话结论
crawlee 是Node/Python 网页爬取与浏览器自动化库。
适合:想让自己的 agent(Claude Code、Codex、Cursor 等)读文档和网页的开发者。
要点:开源大库收录:Node/Python 网页爬取与浏览器自动化库
01怎么开始
- 1先读官方 README / 文档,确认运行环境和需要的权限。
- 2从官方包管理器安装:
npm install crawlee - 3在 AGENTS.md / CLAUDE.md 里写明这个工具和用法,agent 才知道什么时候调用。