Jev模型助力Elasticsearch电商搜索重排序,性能提升显著
TypeSafe AI推出的Jev模型作为Elasticsearch的重排序器,在电商搜索场景中表现出色。通过将Elasticsearch的检索结果与Jev的结构化判断结合,nDCG@10指标从0.9...
近日,Elasticsearch生态迎来一项重要进展:TypeSafe AI开发的Jev模型被成功应用于电商搜索的重排序任务,显著提升了搜索结果的相关性。这项技术突破不仅展示了Elasticsearch在混合搜索场景中的强大能力,也为AI驱动的搜索优化提供了新的解决方案。
在实际测试中,Jev模型与Elasticsearch的结合取得了令人瞩目的效果。通过对250个Amazon Shopping Queries进行评估,采用Jev进行重排序后,前10个结果的归一化折扣累积收益(nDCG@10)从0.9351提升至0.9565,精确匹配率(Exact MRR)也从0.9201提升到0.9616。这一提升主要得益于Jev能够对每个查询-商品组合进行精准的结构化判断,并由小型确定性策略将其转换为最终排序。
Jev模型的独特之处在于其执行结构化决策的能力,而非生成自然语言文本。例如,它可以判断某个商品片段是否回答了用户的问题,或者在多个意图选项中进行选择。这种特性使得Jev在保持高速响应的同时,成本也极具竞争力——每百万输入token仅需$0.042,输出免费。这使其成为解决大型语言模型(LLM)在搜索场景中速度慢、成本高的理想替代方案。
在开源社区,Jev模型的应用也在不断扩展。哈佛华人研究员开发的RSI-Jev项目,通过AI驱动的自我改进流程,让模型能够自动提出改进方案、执行实验并评估结果。该项目已从v1.0迭代至v3.0,累计进行了204个实验分支,最新版本在记忆重排序任务中将R@1指标从0.192提升至0.308。
与此同时,诺基亚和腾讯混元联合开源的AnyJev项目,则解决了Jev模型在概率校准方面的问题。通过消除选项顺序对结果的影响,AnyJev使任意LLM都能快速转化为可靠的Jev风格决策模型。该项目开源仅5天就获得了861颗星,显示出业界对其价值的高度认可。
这些创新不仅推动了Elasticsearch在电商搜索领域的应用,也为AI模型在搜索场景中的落地提供了更多可能性。随着Jev及其衍生项目的不断发展,未来电商搜索体验有望实现质的飞跃。
