阿里开源_零搜索_:AI自学检索能力,训练成本砍掉88%
5月9日消息,阿里巴巴集团研究人员近日开发出创新方法,可显著降低人工智能信息检索训练的成本与复杂性,有望彻底摆脱对昂贵商业搜索引擎API的依赖。
这项技术名为“零搜索”(ZeroSearch),通过模拟训练的方式使大语言模型(LLM)形成高级搜索能力,全程无需调用真实搜索引擎。这项创新不仅有助于企业节省大量API费用,还赋予开发者更多的控制力,以优化人工智能系统在信息检索方面的学习过程。
研究团队在近日发表于arXiv的论文中指出:“强化学习训练需要频繁推演策略,可能涉及数十万次请求,导致巨额API开销并严重制约扩展性。为应对这些挑战,我们提出了‘零搜索’框架,一种无需依赖真实搜索引擎的强化学习方案,能够有效培养LLM的检索能力。”
"零搜索"如何实现无需搜索引擎的AI训练?
“零搜索”技术所解决的是一个困扰行业已久的核心问题:开发具备自主信息检索能力的人工智能助手时,通常面临两大挑战:一是训练过程中由搜索引擎返回的文档质量不可控,二是数十万次调用谷歌等商业搜索引擎API所带来的高昂费用。
阿里巴巴的解决方案从轻量级的监督微调入手,先将LLM转化为一个检索模块,使其能够根据查询生成相关和不相关的文档。在强化学习训练过程中,研究人员采用了一种名为curriculum-based rollout strategy的方法,逐步降低生成文档的质量,以提升模型的辨别能力。
研究人员解释道:“我们的关键发现是,LLM在大规模预训练中已积累了丰富的世界知识,且具备在给定查询条件下生成相关文档的能力。与真实搜索引擎相比,模拟生成的内容在文本风格上存在差异,但在信息相关性方面却能相媲美。”
低成本实现超越谷歌的性能
在涵盖七个问答数据集的综合实验中,“零搜索”技术训练出的模型不仅表现与真实搜索引擎训练的模型相当,甚至在多个任务中实现超越。尤其值得一提的是,7B参数的检索模块已可达到谷歌搜索的性能水平,而14B参数的模型则在多个指标上超越了谷歌。
成本节约同样显著。据研究团队测算,使用SerpAPI调用谷歌搜索处理约6.4万次查询,成本约为586.70美元;而在四块A100 GPU上运行14B参数的模拟LLM,仅需70.80美元,节省幅度高达88%。研究人员指出:“这一结果表明,在强化学习设置中,用训练有素的LLM替代真实搜索引擎是完全可行的。”
将对AI发展产生深远影响
“零搜索”标志着人工智能系统训练方法的一次重大突破与转型。它表明,人工智能系统可以在无需依赖外部工具(如搜索引擎)的前提下,不断提升自身的信息检索能力。
这项技术对于AI行业的意义尤为重大。长期以来,训练先进人工智能系统往往依赖于由大型科技公司掌控的商业搜索API,训练成本居高不下。而“零搜索”打破了这一格局,让人工智能可以通过模拟实现自主搜索,从而摆脱对外部搜索服务的依赖。
对于预算有限的小型人工智能公司和初创企业而言,这无疑是一个利好消息。API成本的高门槛一直是开发复杂智能助手的一大障碍。“零搜索”在通过将成本削减近90%的同时,也为更多企业打开了进入先进人工智能领域的大门。
此外,使用模拟搜索还能为开发者提供更高的可控性。真实搜索引擎返回的内容质量参差不齐,难以精确控制训练数据。而在模拟环境下,开发者可以定制训练语料,系统性地塑造模型的学习路径。
“零搜索”技术已被验证可适用于多种模型家族,包括Qwen-2.5和LLaMA-3.2,并支持基础版本与指令调优版本。研究团队已将相关代码、数据集和预训练模型开源发布于GitHub和Hugging Face,供业内研究人员和企业使用与测试。
随着大语言模型不断演进,像“零搜索”这样的技术预示着,未来人工智能系统将更多依赖自我模拟来发展复杂的能力,而非依靠外部服务。这不仅可能重塑人工智能开发的经济模式,还将降低整个行业对大型平台的依赖。
颇具讽刺性的是,在教会人工智能如何不依赖搜索引擎进行搜索的过程中,阿里巴巴或许创造了一项使搜索引擎在人工智能训练中变得可有可无的技术。随着这些系统变得愈加自给自足,未来的技术生态或将在短短几年内发生翻天覆地的变化。(小小)
麻豆一二三区AV精品传媒软件
18禁朱迪同人无遮挡动漫漫画
91无码㊙️在线无码观看
宁柔柔脱了裤子叫唐三桶小说
烈火雄心成版
学生㊙️片黄在线观看游戏
❌❌❌3D原神同人
男人互摸jiji㊙️r18
naimi奶咪的饺子皮
国产91精品无码麻豆更新时间
男模裸J照无遮挡🔞前列腺
动漫美女被❌到爽🔞流APP
成人免费A片电视第一次
女仆扒开腿秘让人桶爽换脸
最刺激婬乱少妇小说系列男男
黄油羞涩~e❌游戏vr眼镜
涩请性潢片免费
憋尿夹震蛋尿失禁车
玩弄小伙少年生殖视频
chinese打屁股国产实践2
张津瑜被打开双腿灌满白浆视频
女fnee性Zozc交小
!脱👙让学生摸🐻
蒂法3D同人18❌AV黄漫网站
男性下部图片真人
小🐔🐔伸进🈲🔞🔞作文
亚洲㊙️密入口导航涩涩屋
免费❤成人黄动漫入口网站
特大黑人巨交吊性XXXXmcon
厨房里强摁做开腿呻吟漫画软件
斩神红樱被C到高潮小说
啊⋯学长⋯好硬⋯拔出来⋯飞机杯
往屁股眼灌水到失禁喷水
美女全身裸体㊙️吊绑
原神❌乳涩涩动漫3d视频
大黑人交乄视频
揉我奶头啊嗯高潮大夫
二次元裸身❌❌免费视频
蜜臀视频AV视频一区尤物
女学生婬荡呻吟扒开腿视频
少司缘被C哭着爬走又被拉回来
美女裸体挤奶免费网站
嫩草含羞草18禁❤️免费
女女女女女女女女HD高清播放
新版洞房奇谭2
千仞雪被❌调教奶头
变性后有勃起感
男人私㊙️Gay网站打光屁股
猎奇重口h黄在线观看
成人🔞免费视频在线看一个小时
奇优电影手机版爱心
男同与动人物ZOZ0
花火撕开内衣👙️吸奶头的动漫
小豆豆怎么自慰最爽
cailiuo社区最新地址一二
同人爆乳18禁🔞
雷电将军胸口露出奶头无遮挡
疯狂❌自慰爽网站免费
17c丨九色丨国产熟女
护士献身取精A片无码
免费❤成人黄漫APP2024
老牛嫩草一区二区三区的区别
男仆撑开🍑让人玩弄动漫网站
动漫美女被❌出水漫画软件
巨乳美女抖胸吃奶头
动漫美女尿口㊙️无遮挡
末成年小男生GayXXX免费视频
虐菊➕虐乳➕捆绑
女人裸体黄网站
扒掉乳罩㊙️虐胸打胸吸奶动漫
男生裸体㊙️洗澡视频
♥免费版崩铁本子♥网站
狗头外网免费观看
动漫扒开美女衣服❌狂揉❌
被表妹调教成她的足奴小说
穿越火线同人Cg本
kendalljenner裸体无码
免费网站看sm调教打屁股视频
anime18动漫tube无码
少妇被爽到高潮喷水久久夜色直播
奶思动漫
网友评论 查看所有评论>>