全部标签
#Scrapy
2 篇 · 1 站
出现在硬件行情湖仓数据平台2
2026年4月两个源的脾气：编码、兜底页、分页回绕和 503 死循环ZOL 和 PConline 一个把规格写成营销长句、一个给结构化键值对；一个超页数返回 200 兜底页、一个直接回绕到首页推荐。记录终止判据、编码、选择器兼容和那次把整晚跑成空转的 503 退避死循环。工程笔记2026年3月爬虫也要有数据契约：price_status、schema_version 与原始页面留档采集层最划算的设计不是选择器写得多稳，而是把"这一行现在处于什么状态"显式写进字段里。记录 price_status / schema_version / parser_version / 行级页面级指纹的设计，以及为什么原始 HTML 必须留档。工程笔记