crawlee-python - 爬虫和浏览器自动化库(32期 · 9,613 星)
《Github一周热点》第 32 期项目:crawlee-python - 爬虫和浏览器自动化库。Crawlee—A web scraping and browser automation library for Python to build reliable crawlers. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Parsel, BeautifulSoup, Playwright, and raw HTTP. Both headful and headless mode. With proxy rotation.
「Github一周热点32期」动画图解算法教程、用LLM写完整报告等5个项目
crawlee-python - 爬虫和浏览器自动化库
📺 出处:本文属「GitHub 一周热点」专栏第 32 期,UP 主:IT咖啡馆。
本期原视频已内嵌在正文上方,点击即可对照观看。
一句话是什么
crawlee-python - 爬虫和浏览器自动化库 —— Crawlee—A web scraping and browser automation library for Python to build reliable crawlers. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Parsel, BeautifulSoup, Playwright, and raw HTTP. Both headful and headless mode. With proxy rotation.
为什么火
| 指标 | 实测值 |
|---|---|
| ⭐ GitHub 星标 | 9,613(数据日期 2026-10-21,GitHub 官方 API 拉取) |
| 🧩 主语言 | Python |
| 📜 开源协议 | Apache-2.0 |
| 📦 仓库 | apify/crawlee-python |
9,613 星意味着它在同类项目里已经跑出了规模与关注度。开源协议 Apache-2.0,可自由商用与二次开发。
视频里怎么讲的(第 32 期)
第 32 期把它作为重点项目介绍。原视频:IT咖啡馆《Github一周热点32期》,BV 号 BV1Ry411i78n,正上方播放器可直接看。
怎么上手
# 克隆仓库
git clone https://github.com/apify/crawlee-python.git
cd crawlee-python
# 看看它是什么
cat README.md适合谁 / 不适合谁
适合:正在找 crawlee-python - 爬虫和浏览器自动化库 这类方案、且希望用开源版本自己掌控数据与部署的人;喜欢先读 README 判断能不能吃下的工程师。
不适合:需要开箱即用、零配置直接上生产的环境;不打算读文档、只想一键生成结果的用户。
项目地址 + 原视频链接
- 项目地址:https://github.com/apify/crawlee-python
- 原视频(第 32 期):https://www.bilibili.com/video/BV1Ry411i78n
本篇为「GitHub 一周热点」专栏第 32 期的项目卡片。专栏索引:GitHub 一周热点 · 逐期盘点