网页搜索数据工程师（J106465）

岗位职责

• 参与团队海量数据分布式爬虫采集系统的建设
• 和团队一起攻克高性能、高并发、高可用性等各种不同技术场景下的技术挑战
• 根据整体技术方案完成高质量的开发、自测及项目文档编写
• 攻克特定场景下的抓取难题

任职要求

• 计算机软件或相关专业本科以上学历
• 熟悉网络协议（如HTTP、HTTPS）、Web抓取技术，浏览器渲染原理等
• 熟练掌握编程语言：C/C++/Python
• 有实际的爬虫开发经验，熟悉Chrome浏览器架构、渲染机制及自动化控制技术，深入理解CDP协议，具备基于CDP的浏览器自动化、网络请求拦截、页面调试及动态内容采集能力。
• 有网络安全意识，了解多种破解反爬策略，具备APP、Web逆向分析能力以及识别和规避风控风险的能力;
• 优秀的分析问题和解决问题的能力，对解决具有挑战性问题充满激情
• 思路清晰，具备良好的沟通能力和理解能力，工作积极主动，具有强烈的责任心，良好的团队合作精神