-
AI大模型应用的留存率不乐观?
今天中文AI圈子里传这么一张图,有信息说,国产AI大模型的留存率不容乐观。 这倒不是好笑,只是普通用户其实感觉不到AI大模型带给他们的价值罢了。 另外,工具型产品的留存率都不会太漂亮,和社交类产品不能比。 当然现在AI行业也确实有用广告刷流量,用流量忽悠投资的做法,俗称烧钱。 从某些角度 ...
-
超越跑分,我们该如何评价AI大模型的智商?
随着越来越多的模型性能接近GPT-4,几个主要的评测手段都已经无法进行有效区分。 1, MMLU,分数均80+分,已缺乏区分度。 2, MT-Bench,裁判员是GPT-4,能力不足以分辨模型之间的能力差别。 3, Arena Elo:主要是普通对话类任务,让Elo分数受到和人类对齐程度的极大 ...
-
AI大模型的未来是开源还是闭源?
IT互联网领域容易发生马太效应赢家通吃,后来者往往会试图复制当年linux或者Android的道路,通过开源的方式寻求新的发展路径和开拓新的市场潜力。 OpenAI的强势让Meta的LLAMA和阿里的qwen等都选择了开源。 然而李彦宏认为开源没戏。 以下是李彦宏的几个核心论断。 1 ...