本期编译精选。
适应性指令-Retriever动态地决定何时需要额外的搜索步骤,目的是提高答题质量而不会推动企业AI成本。
功劳:rarrorro/ Shutterstock
Databricks于星期三引入了Adaptive Instructionted-Retriever,这是一种新的检索模式,旨在通过采取更多步骤进行复杂的查询来改进企业AI搜索,同时及早停止比较简单的查询,以帮助客户平衡回答质量,耐用性和成本。
新的模型建立在Databricks早先指示-Retriever-1背后的研究上,但在处理复杂查询时采取了不同的做法。
虽然Instructed-Retriever-1采用平行,单步搜索,并结合企业数据计划和自定义指令来改进检索,但适应性地Instructed-Retriever可以在需要额外证据收集时将平行检索与相继,多步搜索结合起来。
这种区分很重要,因为将多步骤搜索应用到每个查询中,可以增加延迟性和检索所需的计算资源,同时将每个查询限制在单一的搜索步骤中,会伤害复杂多跳问题的结果。
该公司说,适应性指令-Retriever旨在只在有可能提高检索质量时再采取更多步骤,允许它在更简单的请求下提前返回。
为了实现这一能力,Databricks利用合成企业检索环境和一种代理数据合成过程对模型进行了培训,重新利用了Instructed-Retriever-1的培训数据,同时增加了合成多跳问题,旨在从多个搜索步骤中受益。
随后它利用在线强化学习来培训模型,以权衡检索质量的潜在改善与额外搜索步骤的成本,奖励高性能的搜索轨迹,同时惩罚没有产生相应收益的步骤。
(原文共 7 张图片,此处展示前 3 张,更多图片请前往原文查看)
(编译自 InfoWorld;原文



本文系本站对该英文资讯的编译与转述,非全文翻译;版权归原作者所有。
每天 5 分钟,看懂世界在发生什么
订阅「牛金金天天译站」,每日精选海外科技/AI/文化资讯编译送到你邮箱。非经营性、无广告、可随时退订。
评论