使用Git Stash临时保存未完成的TensorFlow代码
2025/12/31 15:13:36
更多内容请见： 《爬虫和逆向教程》 - 专栏介绍和目录
文章目录
- 一、指纹验证反爬原理
- 1.1 什么是浏览器指纹（Browser Fingerprint）？
- 1.2 常见指纹采集维度
- 1.3 指纹验证核心思想
- 1.4 为什么要这样设计？
- 1.5 指纹反爬建议
- 二、用FastAPI 实现带指纹验证的新闻网站
- 2.1 后端：`main.py`
- 2.2 前端：`templates/index.html`
- 2.3 启动服务
- 三、Web端爬虫分析和完整破解代码
- 3.1 Web端爬虫分析
- 3.2 完整可执行爬虫代码（使用 Playwright）
- 3.3 运行方式和效果
一、指纹验证反爬原理
1.1 什么是浏览器指纹（Browser Fingerprint）？
浏览器指纹是指通过收集用户浏览器和设备的多种属性（如 User-Agent、屏幕分辨率、字体列表、Canvas 渲染、WebGL、时区、语言、插件等），生成一个唯一或高度可区分的标识符。即使用户清除 Cookie 或使用隐私模式，该指纹仍可能保持不变。
1.2 常见指纹采集维度
| 维度 | 说明 | 爬虫常见缺失 |
|---|---|---|
| User-Agent | 浏览器类型、版本、操作系统 | 可伪造，但常与其他字段不匹配 |
| Screen Resolution | 屏幕宽高、颜色深度 | 无 |
| Timezone | 时区（如Asia/Shanghai） | 无 |
| Language</ |