多模态 · 训练数据、评测与服务¶
覆盖多模态模型训练数据的收集与对齐工程,以及投产前需要专门验证的评测污染、图像/生成内容特有的安全风险与推理服务架构问题。
章节¶
模块内关系¶
flowchart LR
D[多模态训练数据与对齐] --> E[多模态评测、安全与推理服务]
第九章讨论数据如何提供或遗漏训练信号,第十章讨论能力、风险与服务成本如何验证。它们不是训练完成后才补做的收尾:数据划分、去污染、权限和资源预算需要在数据采集与系统设计时确定。
关键区分包括:相似度不等于配对正确率,发布日期不等于无污染,内容凭证不等于事实真实,媒体特征缓存不等于任意上下文 KV 复用。通用框架见 LLM · 多模态模型。
返回 多模态相关知识点。