爬虫后台工程师
工作职责:
- 负责分布式爬虫系统架构的设计和开发。
- 参与爬虫核心算法和策略优化,对采集任务进行调度优化。
- 负责对系统的性能监控和调优,确保系统的高可用性和稳定性。
任职要求:
- 211院校全日制本科及以上学历。
- 三年以上后端开发经验,能力突出者可放宽要求。
- 熟悉Linux系统,掌握golang/python/nodejs一种或多种语言,掌握异步编程、多线程/多进程同步等技术。
- 熟悉web抓取的技术原理,熟悉常用的爬虫框架和组件。
- 熟悉Mysql、Redis、ES、Kafka等,有大数据开发经验优先。
- 有通用爬虫设计经验者优先。
- 有反反爬经验者优先。
如您对该职位感兴趣,请将简历与求职信发送至 shandahr@shanda.com。我们也欢迎来自招聘机构的推荐。