Back to search
Web3 Linkedin · Posted 13d ago

中高级后端工程师(爬虫方向)

Shanghai

Linkedin
Continue to application Add your email once, then Caio opens the original posting.

Indexed description

岗位职责:

  • 使用 Rust 开发和维护异步爬虫及后端服务。
  • 负责公开或已授权数据源的爬虫适配与稳定性维护。
  • 处理分页、限流、重试、任务调度及数据完整性问题。
  • 维护 RabbitMQ、PostgreSQL、Redis,处理任务补跑和数据恢复。
  • 完成 Kubernetes 环境下的服务发布、回滚和线上排障。
  • 使用 AI 工具辅助开发、测试和文档整理。

任职要求:

  • 3 年以上后端开发经验,有实际 Rust 项目经验优先。
  • 熟悉 Rust 异步编程,有 Tokio 实际项目经验优先。
  • 有爬虫工程经验,熟悉 HTTP、分页、限流和任务调度。
  • 能使用 TypeScript / Node.js,了解 Playwright 等浏览器自动化工具。
  • 能够阅读和修改常见 Python 脚本。
  • 熟悉 Linux、Docker、Kubernetes,能够独立完成发布和故障排查。
  • 熟悉 PostgreSQL、Redis、RabbitMQ 中的至少两项。
  • 熟练使用 AI 编程工具,并具备代码验证、安全和文档意识。

加分项:

有大规模爬虫、Redis Cluster、TimescaleDB、pgvector、BM25或生产事故处理经验。

Free. 20 seconds. No password. See every match in this search.

Create a free Caio profile to unlock more results and save your role and location preferences.

Unlock free search
Want help applying to roles like this? Search Caio for free. If repetitive applications get heavy, Managed Job Search adds supervised execution for $99/month.
View Managed Job Search