2.高级爬虫开发工程师
工作职责:
参与爬虫架构设计和研发
参与爬虫核心算法和策略优化研究
技能要求:
3年以上Linux环境下C/C++开发经验, 熟练使用一门以上脚本语言(PHP/PYTHON/PERL等)
熟悉多线程、多进程、网络通信编程相关知识
2年以上大规模网页爬虫开发经验, 熟悉JS，ajax，网页消重
能够总结分析不同网站，网页的结构特点及规律
有分布式爬虫架构经验优先
有新闻/垂直领域爬虫开发经验优先
PS：需要排序，自然语言处理和抓取方向的，HC不限

声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。