发现好公司 发现好客户
公司 工资 行业 专业 工作 百科 排行榜 找客户
工作 |
工作 公司 工资 专业

python爬虫工程师岗位职责

  • python爬虫工程师 岗位职责来自 合肥纳企科技有限公司

    򀀇
    职责描述:
    根据工作安排负责相关数据的自动化采集抽取及清洗工作
    参与分布式爬虫架构设计及研发
    负责分析数据需求,快速确定数据采集方案按时交付结果
    维护数据增量,保证数据质量
    熟悉python,scrapy等主流爬虫框架
    熟悉js逆向,熟悉html,css
    理解分布式
    常用数据库mongodb,redis等
    任职要求:
    1、本科学历 计算机专业
    2、2年以上工作经验
    3、项目经验丰富
    4、工作积极主动,乐于接受挑战
    福利待遇:
    1、每月15号发放薪资 高档写字楼,配备中央空调,冰箱,微波炉,茶水间等设备
    五险一金 不加班 法休
    2、不定期团建,省内外旅游,奶茶福利,节日礼品
    3、一经录,公司会提供完善的培训体系,让你尽快融入团队,帮助你更快有成绩
    4、合肥本地甲级写字楼,工作环境佳,楼下美食街,公交站,地铁口,直达各大商圈
    更新于 2026-11-12
  • Python爬虫工程师 岗位职责来自 成都净蓝科技有限公司

    򀀇
    岗位职责:
    1、负责设计和开发网络爬虫系统,完成关键信息的数据抽取、清洗、去重、分析等;
    2、负责爬虫相关技术的研究和实现工作,比如APP破解、小程序破解、分布式爬虫、验证码破解、JS逆向反爬机制的研究等等;
    3、负责公司爬虫的核心算法以及策略优化,熟悉采集系统的调度策略;
    4、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
    5、负责现有部分爬虫的完善、维护工作,实时监控爬虫的进度和警报反馈,提升爬虫系统稳定性、可扩展性;
    6、能独立解决实际开发过程碰到的各类问题。
    岗位要求:
    1、本科及以上学历,计算机相关专业;
    2、至少3年及以上爬虫经验;
    3、精通Python语言,具有扎实的计算机基础和编程能力,熟悉常见的算法与数据结构,具有优秀的逻辑思维能力;
    4、熟悉Mysql,redis,有过数据库调优和海量数据存储经验优先;
    5、熟悉常见的反爬机制,并对反爬具有一定的应对措施策略且有一定研究;
    6、熟悉APP逆向、JS逆向、验证码破解、图像识别等技术;
    7、熟悉常用网络协议、数据存储和数据处理技术;
    8、熟悉linux系统环境、命令,shell、python脚本编写;
    9、有电商网站、电商APP采集经验优先;
    10、有机票行业从业经验优先。
    更新于 2026-11-07
  • Python爬虫工程师 岗位职责来自 阳杰汽配

    򀀇
    职位描述:
    1、负责垂直网站数据采集工作;
    2、优化数据采集框架算法模型
    3、负责采集数据的清洗、整理、整合、转换等工作;
    4、编写程序辅助数据加工工程师进行数据自动化处理。
    职位要求:
    1、大学本科及以上学历,计算机及软件工程相关专业,3-5年以上实际工作经验;
    2、有编程基础,熟练使用python,精通Python下的多线程/多进程开发;
    3、熟练使用python Scrapy等常见爬虫框架;
    4、熟练使用SQL语句,存储过程,可进行SQL分析调优;
    5、熟悉数据清洗与整理的技术,有亿级数据量的加工处理经验;
    6、熟悉数据库的各项技术:性能调优、备份恢复、故障诊断等;
    更新于 2026-11-14
  • Python爬虫工程师 岗位职责来自 杭州金瑶科技有限公司

    򀀩
  • python爬虫工程师 岗位职责来自 上海瞬速信息技术有限公司郑州分公司

    򀀩
  • Python爬虫工程师 岗位职责来自 郑州酒火火电子商务有限公司

    򀀩
  • 初级python爬虫工程师 岗位职责来自 广州趣玛贸易有限公司

    򀀩
  • Python爬虫工程师 岗位职责来自 西安闪电逸动网络科技有限公司

    򀀩
  • Python爬虫工程师 岗位职责来自 长沙秒答科技有限公司

    򀀩
  • Python爬虫工程师 岗位职责来自 高阳通联

    򀀩
加载更多

招聘学历要求:本科最多

python爬虫工程师需要什么学历?大专占22.8%,本科占53.6%……想知道其他学历占比多少,请点击查看

按学历统计

说明:薪资一般与学历正相关,一般学历越高,工资越高。python爬虫工程师工资按学历统计,大专工资¥14.3K,想知道其他学历工资,请点击查看

招聘经验要求:3-5年最多

python爬虫工程师经验要求高吗?应届生占0.3%,1-3年占27.1%……想知道其他经验占比多少,请点击查看

按经验统计

说明:工作经验是影响工资水平的重要因素,一般经验越丰富工资越高。python爬虫工程师工资按经验统计,应届生工资¥3.8K,想知道其他经验工资,请点击查看

python爬虫工程师工资待遇怎么样

薪酬区间: 4.5-50K,其中60.7%的岗位拿¥6-15K/月,年薪¥7-18W

数据统计来自近一年 343 份样本,截至 2026-11-20

¥6-15K
60.7%的岗位拿
?
月平均工资
年薪统计

说明:python爬虫工程师一个月多少钱?数据统计依赖于各平台发布的公开薪酬,仅供参考。

专业要求

想做python爬虫工程师应该报什么专业?推荐
全国排名: 软件 / 大数据 /
教育培训综合
客服
由百度提供