爬虫工程师 招聘类别:社会招聘 工作性质:全职 薪资范围:面议 工作地点:海淀区 职位类型:研发类 岗位职责 负责开发分布式网络爬虫系统,进行多平台信息的抓取和分析; 把握网络爬虫核心技术研究方向,研究优化算法,提升爬虫系统的稳定性、可扩展性; 负责公司数据仓库平台的 ETL 分析、设计、开发工作 任职要求 全日制本科及以上学历,计算机相关专业,2年以上爬虫相关经验; 熟悉 Linux 平台开发,精通 Java 编程;熟悉分布式系统、多线程; 熟悉MySQL、Redis、Kafka、ES、Spark; 深度参与至少一个“分布式爬虫...