长文档问答并非只有把全部文字送入模型一种方式。LensVLM-9B的官方介绍提出先查看压缩后的页面图像,再按问题选择需要展开的页面。这是一项9B视觉语言模型的研究方案。对关注资料检索的创业者,它提供了另一种观察“先找证据、再读细节”的方法,但应用之前必须先核对许可。
页面图像与原始内容要保持对应
官方代码示例包含读取指定页内容的工具,并提供从文本生成页面图像的流程。理解这类方法时,应注意页面编号属于怎样的资料组织方式:重新排版、合并文档或加入附录后,同一个编号可能指向不同内容。
在研究性比较中,可以固定一份允许使用的资料,保存原文、渲染版本和页面对应表,再记录模型选择了哪些页。若回答内容正确但页码指向无关材料,仍然不适合据此制作可追溯报告。输入准备也是评估的一部分,不能只比较最后那句话。
选择证据与回答问题分别检查
代码仓库提供页面选择和回答评估的路径。本站建议将“有没有找到必要页面”和“有没有正确使用页面内容”分开记录。比如答案需要正文与附录共同支持,只读其中一处可能遗漏限定条件,即便文字表达很流畅,也应标为证据不完整。
还可加入资料没有答案的样本,观察流程是否仍强行选择某页给出肯定结论。研究记录同时保留展开次数、结果出处与人工判定;压缩更强或读取更少,都不能直接等同于业务质量更好。
模型权重与代码的许可分开看
模型采用Apple Machine Learning Research Model License,代码采用单独的Apple Sample Code License。模型许可原文写明:“Research Purposes” does not include any commercial exploitation, product development or use in any commercial product or service.
这意味着阅读研究资料与把该权重用于产品开发、收费服务,不能混为一谈。请通过来源入口查看完整许可,不把模型可下载、代码可获取或第三方提供演示理解为商业使用已获允许。本文没有提供商用部署方案,也未复现其评测。延伸阅读:代码与模型权重许可为什么要分开检查。