爬虫后端开发工程师 25-50k·15薪
北京 3-5年 统招本科 招1人 8月12日更新
收藏
avator
谢先生 2天前在线 已认证
猎头顾问 · 青岛才聚瀚泽人力资源有限公司
简历处理快
聊一聊
职位介绍
职位描述 岗位职责 - 架构与调度建设:负责分布式爬虫调度系统架构迭代,设计高可用、低延迟的任务分发与资源调度机制,支撑大规模集群并发采集,突破调度性能瓶颈。 - 全链路性能调优:主导爬虫集群全链路性能优化,持续提升系统吞吐与并发处理能力,减少资源损耗与采集耗时。 - 服务稳定性治理:落地服务SLA体系,保障服务稳定,建设故障自愈与异常兜底能力。 - 可观测体系搭建:完善监控指标、日志、链路追踪体系,落地分级告警、降噪、异常聚合机制,实现故障快速定位与闭环。 - 工程效率建设:统一配置、发布、故障处理与研发迭代规范,推动流程标准化,降低运维与迭代成本,提升研发效率。 职位要求 任职要求 - 本科及以上学历,2年+后端开发/爬虫架构/高并发服务开发经验。 - 熟练 Python/Go 后端开发,熟悉分布式架构、消息队列、异步任务、并发模型。 - 具备高并发、高可用服务稳定性治理经验,懂限流、熔断、降级、重试、流量削峰。 - 熟悉可观测体系:Prometheus/Grafana/日志系统,能独立做指标建设、大盘优化、故障定位。 - 有大规模分布式爬虫后端、调度平台、采集集群优化经验优先。 加分项 - 熟悉 Scrapy/Scrapling/Playwright 集群运行机制。 - 熟悉 Redis、MQ 高级特性,能独立解决队列堆积、锁竞争、并发热点问题。 - 有大数据量、高吞吐、长任务服务架构优化经验。
其他信息
语言要求:不限
行业要求:人工智能

猎聘温馨提示:

1. 如您发现平台内招聘方存在以下违规行为的,请立即举报
  • · 扣押您的身份证件或者其他证件;
  • · 要求您提供担保人、担保金或者以其他名义向您收取财物( 如培训费、体检费、资料费、置装费、押金等);
  • · 强迫您入股或者向您集资;
  • · 以招聘名义牟取不正当利益;
  • · 发布虚假招聘广告信息;
  • · 工作时长违反劳动法规定;
  • · 存在其他损害您的合法权益的行为。
2. 如您应聘的岗位属于涉外劳务合作/海外岗位的,请务必核实招聘方对外劳务合作资质取得情况,同时注意自身资金安全,防范招聘欺诈。
3. 本平台招聘方不向求职者提供任何收费服务。
查看全部
更新时间:2026-08-14