Published on2026年1月1日从 Scrapy 到自研：单人长期项目中的爬虫工程判断架构权衡工程判断长期维护爬虫工程技术选型对单人长期项目而言，工程问题往往不是“能不能做”，而是“能不能长期承受”。本文记录了我在使用 Scrapy 过程中逐步暴露的工程风险，以及最终选择自研爬虫框架、重新分配工程不确定性的判断过程。