Nomic官方模型卡介绍v2 MoE文本嵌入模型,支持多语言检索及768至256维的表示,最大输入长度为512 tokens。本文不重复榜单优胜宣传,实际效果需用业务查询验证。
分段不要在关键关系中间截断
模拟产品说明检索,规格与适用型号应尽量放在同一片段。过长输入可能被截断,过短又会丢失上下文。先检查分段能否保留完整含义,再比较不同维度的结果。
维度比较要使用同一套查询
准备跨语言、缩写和近义表达的查询,人工标注应该找回的材料。分别记录正确材料排位、无关结果与索引占用,不能只比较文件大小。不同参数生成的向量不应随意混用。
索引也需要可回退版本
更换模型或维度时,可以建立新索引并用同样本比较,保留旧索引与配置便于回退。中文行业术语仍需单独测试。本文是检索方案分析,未测量实际准确率或成本下降幅度。
延伸阅读:AI模型。