本栏推荐

相关阅读

快讯信息

您现在的位置是:主页 > 品牌 > 百度 >

李彦宏内部会议内容曝光:揭示大模型的三大误区,并强调禁止排名竞争。

发布时间:2024年09月11日 15:32:08 百度 人已围观

简介百度创始人李彦宏在内部讲话中指出,外界对大模型存在诸多误解,特别是在竞争和开源模型效率方面。他提到三个主要的认知误区,强调澄清这些误解对于行业发展至关重要。此讲话...

新标360快讯9月11日报道,百度的创始人李彦宏近期的一次内部讲话被披露,提到外界对大模型存在许多误解。

在讲话中,李彦宏指出了外界对大模型的三大认知误区,涉及大模型竞争、开源模型的效率及智能体发展等热门话题。

关于大模型间的差异,李彦宏提到,部分自媒体的夸大宣传,以及新模型发布时的市场推广,让人们误以为模型之间的能力差距较小,这实际上是错误的。

李彦宏强调:“衡量文心大模型真正能力的标准在于,是否能在具体应用场景中满足用户需求,带来价值的提升,这才是我们真正关心的。”同时他表示,“我们不鼓励技术人员去争夺排行榜。”

不仅是模型间存在明显的差别,大模型的发展潜力依然很高,距离理想状态还有很长的路要走,因此模型还需不断地快速迭代、更新和升级,持续投入多年。

以下是内部讲话的具体内容

问:有人认为大模型之间的能力差别已经不再明显?

李彦宏:对此我表示不同意。我觉得外界对大模型存在许多误解。每当新模型推出时,厂商都倾向于宣称其优越性,通过与GPT-4对比,利用测试集或排行榜自我标榜,这未必能真正反映出这些新模型与OpenAI的顶尖模型之间的实际差距。

模型之间的差异是多维的,首先在能力上,无论是理解、生成、逻辑推理还是记忆等基本能力都有不同程度的差异;其次是在成本方面,获取这些能力或解答问题所需的成本有多高?

一些模型可能推理速度较慢,虽然它们最终达到了相似的效果,但在体验上仍旧无法与最优秀的模型相提并论。此外,测试集的过拟合也是一大问题,很多想证明自己能力的模型会进行排名,为了迎合测评而调整技巧。尽管可能在榜单上看似接近但在实际应用中依然存在显著差距。

媒体的宣传与新模型发布时的市场驱动力,容易让人们产生模型间能力差距不大的误解。实际上,这并非事实。在实际使用中,我不允许我们的技术团队去追求排行榜,真正评价文心大模型的标准是它在可用场景中能否满足用户的需求及创造价值的能力,这是我们所关注的。

我们需要认识到,一方面模型之间的能力差距仍然显著,另一方面大模型的发展天花板也很高,目前所达到的与目标状态还有很大差距,因此模型必须继续快速地迭代和更新。

即使今天看似差距不大,经过一年的时间再来评估差距是否拉大。能够持续投入多年以满足用户需求的公司,能够真正取得成功。不同模型之间的差异不会越来越小,而是可能会越来越大,只是一些企业尚未意识到真实的需求,依赖于测试集的数据或许会导致误判。

Tags: 李彦宏  大模型