爬虫浏览器内核工程师
Company Mihoyo
Focus Tech · Backend
Location 上海
Published January 7, 2026
岗位职责
- 负责亿级日量级分布式爬虫系统底层架构研发与迭代优化,聚焦大模型训练场景下全网公开数据抓取需求,主导Web引擎核心模块研发、定制化改造与深度性能调优,支撑爬虫业务稳定高效运行。
- 深耕Chromium浏览器内核底层原理,负责浏览器内核二次开发、定制化重构与性能优化工作,攻克DOM解析、动态渲染、JS引擎执行、网络请求调度、内存管理、多线程渲染等底层技术难题,提升爬虫工具的兼容性、稳定性与抓取效率。
- 主导浏览器内核攻防与爬虫业务基础设施及体系建设,持续提升爬虫任务整体抓取成功率。
- 搭建全链路爬虫数据埋点与性能监控体系,对浏览器内核渲染性能、资源消耗、请求成功率、风控拦截率等核心指标进行常态化监控、数据分析与问题复盘,输出可落地的内核优化、攻防迭代、架构升级方案,持续降低系统损耗、提升爬取稳定性。
任职要求
- 具备成熟的Chromium浏览器内核二次开发、内核定制、内核性能优化实战经验,深入理解Web引擎完整工作原理,精通网页渲染流程、JS执行机制、浏览器网络请求架构、DOM/BOM底层逻辑,熟悉浏览器内核源码调试与问题攻坚。
- 具备丰富的浏览器内核攻防实战经验,深入掌握全网主流风控机制。
- 拥有日均亿级大规模爬虫系统研发与落地经验,精通分布式爬虫架构设计与高并发调度逻辑,具备海量数据、高并发、多节点集群爬取场景的性能优化、故障排查、稳定性保障实战能力。