智元机器人
多模态知识工程师
多模态知识工程师
发布于 1 天前普通员工/个人贡献者
深圳市 / 上海市
中级经验
全职员工
仅现场办公
本科
研究与开发 (研发)
Clip
Faiss
Rag
向量数据库
多模态
知识图谱
记忆机制
Neo4J
AI 估算 · 25k–45k
B轮AI创业公司，多模态知识工程属于前沿方向，薪资竞争力强，结合深圳上海市场行情估算。
职位详情
关于这个职位
该职位主要负责为智能机器人构建多模态知识体系，包括知识图谱、记忆机制和检索推理，以支撑Agent的持续交互与行为规划
你将与多模态感知和语言模型团队协作，推动人形机器人的智能化发展
适合对知识工程、RAG技术有深入理解，并对AI前沿应用充满热情的研发人员
最低要求
本科及以上学历，计算机、人工智能、电子、数学等相关专业
出色的问题分析和解决能力，自主探索新解决方案的能力强
关注生成式 AI 和多模态交互技术，对推动人形机器人智能化有热情
熟悉知识图谱构建、RAG检索增强生成（Retriever-Augmented Generation）机制
了解多模态知识表示方法，如CLIP-based embedding、Triplet模型等
工作职责
构建面向Agent交互场景的多模态知识表达体系，包括图谱结构、知识embedding、记忆机制等
设计知识表示、更新、检索和推理机制，支撑语言、图像、动作等模态的统一知识融合
提供长期记忆、用户画像、场景背景知识服务，支持Agent持续对话与行为规划
与多模态感知与语言模型协同，增强人设一致性和个性调度能力
优先资格
熟悉FAISS、Milvus、Neo4j等知识索引/图数据库工具
有面向对话系统或Agent的记忆/知识调度系统设计经验者
在HCI、HRI、RSS、CVPR、ECCV、ICCV、NeurIPS、ICLR、SIGGRAPH或SIGGRAPH Asia等顶级会议/期刊上发表论文者
具有优秀的代码能力和竞赛精神，ACM/ICPC、RoboMaster等比赛获奖者
AI 洞察
优缺点分析
优点
- 前沿技术领域，知识图谱+多模态+Agent，技术壁垒高
- 人形机器人赛道备受关注，公司处于B轮高速发展阶段，成长空间大
- 与顶尖团队合作，有机会接触CVPR、NeurIPS等顶级研究
- 多模态知识融合尚处于探索阶段，技术难度较大
- 需要同时掌握多种技术栈（知识工程、深度学习、数据库）
- 适合对AI前沿技术有强烈热情、喜欢解决复杂问题、愿意在创业环境中快速成长的工程师
缺点 / 挑战
- 创业公司节奏快，可能面临高强度工作和快速迭代压力
角色解读
- 从知识工程师成长为多模态AI系统架构师，主导知识体系设计
- 向机器人自主决策方向深入，结合具身智能成为算法专家
- 在AI创业公司快速成长，可晋升为技术负责人或算法团队Leader
- 构建和维护多模态知识图谱，整合文本、图像、动作等多种模态信息
- 设计知识检索与推理机制，确保Agent能高效获取和利用知识
- 开发长期记忆和用户画像模块，支持个性化交互和持续学习
- 与多模态感知和语言模型团队协作，优化人设一致性和行为规划
- 扎实的知识图谱和RAG技术基础，熟悉向量数据库和图数据库
- 掌握多模态表示学习，如CLIP、Triplet等模型
- 熟练使用Python和至少一种深度学习框架
- 具备问题分析和独立探索新解决方案的能力
申请策略
- 在面试中展示对机器人智能化的热情和思考，准备个人技术博客或项目Demo
- 提前了解智元机器人的产品和技术方向，在面试中提出建设性意见
- 突出知识图谱和RAG相关项目经验，最好有实际落地案例
- 展示多模态学习成果，如使用CLIP进行跨模态检索的项目
- 强调代码能力，如ACM获奖或开源贡献
- 如有论文发表，列出顶级会议/期刊名称
- 深入学习FAISS、Milvus、Neo4j等工具的使用和优化
- 了解对话系统和Agent架构，尝试搭建简单的记忆/知识调度系统
面试指南
- 项目描述采用STAR法则：背景、任务、行动、结果
- 技术问题从基础概念出发，结合实际经验，最后总结优化方向
- 开放性问题展现知识广度和独立思考，可引用相关论文或业界实践
- 请介绍一个你构建的知识图谱项目，包括设计思路和难点
- RAG中检索和生成的结合方式有哪些？如何优化检索质量？
- 多模态知识表示如何建模不同模态之间的 semantic gap？
- 你如何设计一个Agent的长期记忆机制？
- 谈谈你对人形机器人智能化的看法及我们在该领域面临的挑战
职位点评
70
综合评分
前沿技术导向、较高发展潜力，但现场办公且工作节奏可能较快。
更适合这类人
最适合追求技术成长和前沿创新、愿意为行业使命投入精力、不介意创业节奏的求职者。
表现最好
成长发展
相对薄弱
工作生活
薪资福利65
成长发展90
工作生活40
使命价值85
薪资福利
65中等
B轮AI公司通常提供有竞争力的薪资和期权，但未明确具体福利，稳定性低于成熟企业。
薪资信号面议 (25K-45K/月)
成长发展
90较高
职位涉及多模态、知识图谱、Agent等前沿技术，公司注重研究能力，成长空间大。
技术前沿前沿/新兴技术
技术栈知识图谱、RAG、多模态、CLIP、FAISS、Milvus、Neo4j、Agent、记忆机制
业务类型profit_center
工作生活
40较低
创业公司通常要求现场办公，深圳上海压力较大，JD未提及弹性工作或WLB。
工作模式仅现场办公
办公地点科技园/产业园
加班情况未提及（无法判断）
使命价值
85较高
推动人形机器人智能化具有较高社会价值和使命感，行业处于高速增长期。
行业发展高速增长赛道
社会影响正向社会影响力较高
使命信号对推动人形机器人智能化有热情
创新程度开拓性创新（行业首创）
Watch Jobs