灵狐科技 python 招聘（工资待遇要求）

【岗位职责】
1.负责 Web 端及移动端数据的全流程采集（爬取、清洗、结构化、入库），可独立设计多源数据采集方案，应对复杂业务场景。
2.主导对抖音、小红书、微博、B站等头部自媒体平台的数据采集工作，攻克平台的反爬壁垒，确保数据稳定、高效流入。
3.深入分析Web端及App端的加密协议，负责JS逆向、参数签名破解、WebDriver检测绕过及客户端风控策略应对。
4.使用 FastAPI 构建稳定的数据采集与数据服务接口，与后端、产品团队进行高效联调。
5.负责采集数据的清洗、转换与入库，熟练使用 pandas 等工具处理非结构化数据；参与 Redis、PostgreSQL、MySQL 的结构设计与性能优化。
6.基于 Scrapy、PySpider 等框架进行二次开发，扩展中间件，参与分布式爬虫系统的设计与优化，搭建采集调度与监控告警体系。
7.熟练使用 Docker 进行服务容器化，通过 Compose 实现多服务编排，了解 K8s 者优先。
8.有 APP 逆向与协议分析经验者优先，有过复杂验证码识别处理者优先。

【任职要求】
1.熟练掌握 Python，具备良好的代码规范；深入理解 HTTP/HTTPS 协议，熟练使用抓包工具（Charles、Fiddler、Wireshark）。
2.必须具备抖音、小红书、微博、B站中至少两个平台的丰富采集经验，熟悉其接口特征、数据格式及常见风控策略。
3.精通 JS逆向，能独立完成加密参数的定位、扣取与逻辑还原。
4.熟悉 AST（抽象语法树） 技术，能进行代码混淆还原或插桩。
5.熟悉 JS Hook 技术，能够动态监控关键函数的调用。
6.掌握验证码识别、代理池动态调度、指纹浏览器等常见反爬绕过方案。
7.熟练使用 XPath、BeautifulSoup、正则表达式 提取数据，并能结合 pandas 进行复杂数据清洗与特征提取。
8.熟悉关系型与非关系型数据库的使用场景，能针对高吞吐写入场景进行表结构及索引优化。

加分项：
有 APP逆向与协议分析 经验，熟悉常见的验证码识别以及应对方案，指纹浏览器等常见反爬绕过。。