产教融合研究院 产教融合大数据云平台

Python工程师

面议 | 不限

专业不限 | 招聘1人 | 全国 | 中富通集团股份有限公司

来源:内蒙古自治区高校学生就业创业服务中心


职位职责:

python爬虫工程师1、设计、开发分布式网络爬虫系统,进行多平台信息的抓取和分析工作:2、优化数据库结构,确保数据的有效性、严谨性、高性能;3、参与爬虫核心算法和策略优化,熟悉采集系统的调度策略;提升平台的抓取效率;4、实时监控爬虫的进度和警报反馈,并处理爬虫异常;5、分析爬虫系统瓶颈设计实现相应策略和算法,提升爬虫的抓取效率和质量。持续进行算法和策略优化,提升爬虫的抓取效率和质量6、参与业务蓝图设计、业务需求、系统设计、代码规范等评审工作;