淘天集团面试题更新 2026-08-05

场景题:客户输入一个软件或网页界面截图,如何通过RAG的方式帮助用户了解界面的每一个组件作用?

淘天集团人工智能互联网/IT问题拆解系统设计技术选型RAG

考察说明

考察基于截图的多模态RAG系统设计与落地能力

回答思路

  1. 说明截图预处理与组件识别(OCR/目标检测/UI解析)流程
  2. 覆盖文本块切分、向量化与多模态嵌入的选型
  3. 阐述检索增强生成中查询构造与上下文融合思路
  4. 讨论组件间空间关系如何纳入检索与回答
  5. 考虑候选组件覆盖不全时的兜底与置信度提示
本题已收录答题指导

本题附完整参考答案与评分标准

登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。