lanyuanxiaoyao 47038475d4 refactor: 将 HTML 下载器拆分为子包结构 ...

将 scripts/readers/html/downloader.py (263行) 拆分为 downloader/ 子包，各下载器独立维护：

- 创建 downloader/ 子包，包含 __init__.py、common.py 和 4 个下载器模块
- common.py 集中管理公共配置（USER_AGENT、CHROME_ARGS 等）
- 各下载器统一接口 download(url: str) -> Tuple[Optional[str], Optional[str]]
- 在 __init__.py 定义 DOWNLOADERS 列表显式注册，参考 parser 模式
- 更新 html/__init__.py 导入语句，从 .downloader import download_html
- 添加完整的类型注解，提升代码可维护性

2026-03-09 01:13:42 +08:00

2.8 KiB

Raw Blame History

View Raw