岗位描述
团队介绍:数据平台是字节跳动数据中台部门,为公司多业务线(包括抖音、电商、直播和生活服务等)提供一站式大数据解决方案,涵盖数据的生产、清洗、传输、建模、分析等全流程链路,提供数据开发、实验评估、画像标签、增强分析等多元场景解决能力。同时,数据平台部门也致力于把字节跳动积累沉淀的数据中台解决方案做商业化输出,让更多行业能够应用我们的产品能力构建自己的数据中台。在火山引擎上,我们提供了营销增长套件,数据中台等相关产品解决方案,为泛互联网、金融、汽车、新零售等行业提供了行业解决方案。 1、负责知识引擎底层平台与核心框架的设计研发,建设统一的知识处理、存储、索引与检索能力,为上层RAG、Agent及行业应用提供稳定、可扩展的基础服务; 2、负责知识处理执行引擎建设,涵盖数据接入、解析、切分、知识抽取及索引更新等环节,完善任务编排、异步调度、并发控制、状态管理与失败恢复机制,支撑大规模知识处理; 3、参与存储与检索引擎架构设计,建设统一的数据模型、引擎接口及插件扩展机制,支持向量、全文、结构化及图等不同检索能力的接入与组合,优化查询执行效率与数据一致性; 4、参与Agent运行时与工具执行基础设施建设,完善执行生命周期、上下文与状态持久化、事件流、取消与恢复、资源隔离等机制,支撑长任务及复杂工作流的可靠执行; 5、建设企业级平台基础能力,包括多租户隔离、细粒度权限、资源配额、流量控制与可观测性,保障系统在高并发、大数据量和复杂部署环境下的稳定性与可运维性; 6、持续开展核心链路的性能分析、容量规划与架构优化,沉淀可复用的框架和组件,提升系统吞吐、扩展能力及研发交付效率。