资深数据仓库工程师（知识库与知识图谱方向）

岗位职责

岗位详情

工作职责

1. 负责知识平台数据仓库的整体规划与建设，完善数据分层、主题域模型、公共维度和指标体系。
2. 设计并实现多源数据接入、清洗、转换、加工、调度和增量同步流程，处理结构化、半结构化及非结构化数据。
3. 建设面向知识库的数据处理链路，将文档及外部信息加工为可检索、可关联、可追溯的知识数据。
4. 参与知识图谱建设，负责人员、团队、产品、服务、接口、流程、指标等实体及其关系数据的抽取、归并、更新和质量校验。
5. 设计结构化数据、全文检索、向量检索和图谱数据之间的同步与协同机制，支持数据重建、历史回补和故障恢复。
6. 建立数据质量管理体系，覆盖完整性、准确性、一致性、及时性、唯一性和权限安全等维度。
7. 优化知识库的数据模型、内容加工、检索索引和数据服务，持续提升知识召回质量、数据时效性和系统稳定性。
8. 参与知识数据的权限与安全设计，确保不同用户只能发现和使用其有权访问的内容。
9. 沉淀数据字典、数据口径、数据血缘、生命周期和运维规范，推动数据资产治理。
10. 与产品、后端、算法和应用团队协作，将业务需求转化为可复用、可演进的数据能力，并指导团队成员解决复杂问题。

工作要求

1. 计算机、软件工程、数学、统计或相关专业本科及以上学历，5 年以上数据仓库或数据平台开发经验。
2. 熟悉数据仓库建设方法，能够独立完成主题域划分、维度建模、事实数据设计和指标体系建设。
3. 精通 SQL，熟悉 Python、Java、Scala 或 TypeScript 中至少一种开发语言。
4. 具备丰富的数据集成、批处理、实时或准实时数据链路建设经验，熟悉任务调度、补数、幂等和失败恢复。
5. 熟悉一种或多种关系型数据库、分析型数据库或大数据存储引擎。
6. 熟悉消息队列、缓存或异步任务处理机制，理解数据同步和事件驱动架构。
7. 具备数据质量、数据治理、数据血缘、监控告警和性能优化经验。
8. 能够处理复杂的多源数据和非结构化内容，具备较强的数据抽象、方案设计和问题定位能力。
9. 具备良好的跨团队沟通和项目推进能力，能够推动数据方案落地。
10. 具备数据安全意识，理解数据权限、脱敏和审计等基本要求。

优先条件

1. 有企业知识库、智能搜索、推荐、智能问答或大模型应用的数据建设经验。
2. 有知识图谱、实体识别、关系抽取、实体消歧或图数据建模经验。
3. 使用过全文检索、向量检索或图数据库等相关技术。
4. 有文档、网页、代码或其他非结构化内容解析、加工和索引经验。
5. 熟悉文本向量化、混合检索、结果排序等知识库相关技术。
6. 有企业组织架构、权限体系、数据脱敏或审计平台建设经验。
7. 有数据平台从 0 到 1 建设，或大规模数据迁移、历史回补经验。