澎湃Logo
下载客户端

登录

  • +1

周鸿祎撺了十五家大模型公司,说要组一个“复仇者联盟”干灭霸?

2024-08-02 17:56
来源:澎湃新闻·澎湃号·湃客
字号

原创 数字生命卡兹克 数字生命卡兹克

本来以为AI搜索这玩意短期内已经没啥可卷的。

直到今天在ISC大会上,看到了这个架构。

给我干懵了。

用一句话说,就是根据用户不同问题,来调用不同的模型进行回答。

因为至今为止,没有一个非常全面的大模型,能说自己在所有任务上都是最顶尖的,我们在日常使用中,有无数奇奇怪怪的场景。

有写论文,有翻译,有诗歌,有写代码,有阅读理解,有学习,有任务拆解,太多太多太多了。

强如GPT4o,也不是什么都牛逼的,比如你让他写作看看,不知道被Claude锤到哪里去了,还有偏国风的诗词理解和生成,也是纯弟弟。

而市面上这么多模型,其实每个模型都有自己最强的部分的,比如就说学科和做题上,好未来的大模型往那一放,谁敢说比他牛逼?

所以单个模型,都有短板,但是你要是把一群大模型放一起,针对特定的任务,解决特定的问题。

这特娘的就是个水桶级别的妥妥的复仇者联盟。

钢铁侠就是字节豆包,绿巨人就是腾讯混元,鹰眼就是月之暗面,黑寡妇就是好未来。

至于美队是谁,那只有一个选择。

那就是360。

至于为啥,原因很简单,因为这个架构,就是360牵头做的。

管理能力和撺局能力,才是美队的核心,你就说现在的大模型公司,谁还比老周有号召力吧。

至于灭霸,那必然是那个GPT4o了。

再把这个复仇者联盟跟GPT4o对比一下。

我只能说,牛。我自己打不过你,但是我喊所有兄弟一起上,你就是灭霸也得给我在地上躺板板。

360把这玩意,称为CoE混合模型。

我大概拆了一下这架构的报告,做法真的有点意思。

他们先从360AI搜索的真实问题里,找了几千万条用户的真实数据,分成了4000类,然后对这十五家模型一顿测试。

注意,是4000个分类,不是40个,是4000个。

国际通用的评测集,一般也就是10个左右。

比如Claude3.5的,就是8个。

他们干了4000种意图分类,比如知识问答、数值比较等等,还有100种技能分类,比如翻译、分析啥的,还有1000多种领域分类,比如生活、学术、医疗等等。

然后花了2个月的时间,用这么多种分类,对十五个大模型,进行了疯狂的量化测试。

测试的结果,就形成了十五个大模型的QA的问答对数据集,再让十五个大模型和GPT、Claude,还有人工,一起给这些问答对数据集来打分。

最终决出,每个分类下,最强的大模型。

太狠了,就是可惜没看到这十五个模型,在每种分类上,效果怎么样。

因为毕竟是360牵头的合作,要是暴露某个大模型在某个领域倒数第一,那可能对那家公司口碑影响也挺大的,所以所以除了对照组GPT4o,360把其他的模型名字都隐去了,只用代号替代。

用这种超级海量的数据测试,测完以后,就知道,用户的哪个问题,应该属于什么分类,应该用什么模型来回答,效果才最好。

所以,形成了一个巨大的闭环。

根据用户的问题,先做意图识别,看看属于什么任务,然后用解决这个任务最好的模型,加上一些已经预制好的Agent,来解决用户的问题。

这尼玛,就是一个全自动的复仇者联盟,真的。

你灭霸要跟我拼财力,钢铁侠上,拼力量,绿巨人上,拼精准,鹰眼上,拼颜值,那自然是我寡姐上了。

你要是想强行55开,不好意思,我这还有个美队。

真的有点东西,很有趣。

在发完这套架构之后,我另一个没想到的是,他们直接把这玩意,扔到了360AI搜索上。

嗯,现在已经可以用了。

这速度跟快手学的。

网址:https://www.sou.com/

现在你能体验到的360AI搜索,已经是被复仇联盟加持完的水桶AI搜索了。

我随手试了一下,有很大的不同了。

比如说现在巴黎奥运会,我让他写一篇巴黎奥运会开幕式的评论文章,他不是跟以前的AI搜索一样,搜完了拿了一堆资料直接写。

而是先识别我的意图,发现是个写作需求,然后用一个复杂的写作Agent接管了,步骤巨多巨长。

而最终的效果,确实不错。

我又试了一下一个很坑爹的问题:

“四川省省会和安徽省省会哪个人数更多”

这个问题你可以随便拿去问别的AI搜索,一问一个不吱声= =

360AI搜索,答得还是很好的。

再试一个问答+翻译任务:

“天上仙人月里栽,无端飘逐海风来。可能种作千寻树,岁看高花烂漫开。是谁的诗?怎么翻译成英文”

然后我又用另一个AI翻译了一个版本。

反正看着,差距还是挺大的,主要我又不太懂英文,于是,我就把这两个翻译,都扔给了ChatGPT这个灭霸。

让他看看他觉得哪个最好。

这个复仇者联盟,有点猛。

不过360AI搜索有个缺点,就是对小白非常的友好,但是你没法自己去特定的选用哪个模型回答,比如我就是叛逆,我就是喜欢Kimi和豆包,这两玩意都想在一个里面去用。

于是这个复仇者联盟又做了一个AI助手。

网址在此:https://bot.360.com/

你能在里面,一站式地用几乎所有的国产大模型。。。

真的,这个复仇者联盟,真的坐实了。

现在再回头看看CoE这个架构,其实我们能非常的清楚的认知到,这玩意,过于朴素,过于有价值。

但是难点,就是有一个人,有一个美队,能把这群人聚集在一起,一起做资源,一起做渠道,一起把大模型这件事,普惠下去。

而现在,老周和360站出来了。

说我就是那个美队。

那我们,要不要一起干点事?

于是。

Avengers Assemble!!!

原标题:《周鸿祎撺了十五家大模型公司,说要组一个「复仇者联盟」干灭霸?》

阅读原文

    本文为澎湃号作者或机构在澎湃新闻上传并发布,仅代表该作者或机构观点,不代表澎湃新闻的观点或立场,澎湃新闻仅提供信息发布平台。申请澎湃号请用电脑访问http://renzheng.thepaper.cn。

    +1
    收藏
    我要举报

            扫码下载澎湃新闻客户端

            沪ICP备14003370号

            沪公网安备31010602000299号

            互联网新闻信息服务许可证:31120170006

            增值电信业务经营许可证:沪B2-2017116

            © 2014-2024 上海东方报业有限公司

            反馈