程序语言 / Python
Python爬虫库选型调研
NOTE 当准备写一个 Python 爬虫时, 真正需要先回答的问题不是「哪个库最强」, 而是: 目标页面是否静态? 是否需要登录和浏览器交互? 采集规模是否需要调度、重试和持久化? 最终要的是结构化字段, 还是网页正文? 0x00 背景 Python 爬虫生态里常见库很多, 但它们并不在同一个层级竞争: reques
TAG / P
pachong·1 篇笔记·网络数据采集与解析
NOTE 当准备写一个 Python 爬虫时, 真正需要先回答的问题不是「哪个库最强」, 而是: 目标页面是否静态? 是否需要登录和浏览器交互? 采集规模是否需要调度、重试和持久化? 最终要的是结构化字段, 还是网页正文? 0x00 背景 Python 爬虫生态里常见库很多, 但它们并不在同一个层级竞争: reques