谁才是真正懂大模型的背后?开源 > 闭源?
前言

先说我个人的一个判断:李彦宏说差距在缩小,但可能永远追不上。这事儿吧,没那么绝对。
在科技的江湖里,每一次技术革新的风吹草动,都能掀起一场论战。今年4月16号,百度CEO李彦宏在AI开发者大会上抛出一句“开源模型会越来越落后”,这话音刚落,AI圈里可就炸了锅。李彦宏的底气来自百度的文心4.0模型,他声称这款模型在效果、响应速度和推理成本等方面,都比开源模型更胜一筹。但开源社区的大佬们,比如猎豹移动董事长兼CEO、猎户星空董事长傅盛,似乎并不买账。他们认为开源的力量集百家之长,“开源模型终将超越闭源模型”。
那么,开源模型到底能不能干翻闭源模型?咱们从以下5个方面来掰扯掰扯。
01 创新速度,开源 > 闭源
开源模型,凭借其开放的特性,构建了一个广阔的协作网络。这种开放性不仅促进了知识的共享,还加速了技术的迭代。社区成员——包括研究者、开发者和爱好者——都能参与到模型的改进中,提出新点子,实现快速的创新循环。这种集体智慧的汇聚,让开源模型能够迅速适应新的挑战和需求,不断进化以满足多样化的应用场景。反观闭源模型,长期来看,它的创新速度会受到限制,因为它的发展依赖于单一实体的研发能力和资源分配,而这些资源终究是有限的。所以,在迭代和创新这个维度上,开源模型确实更强。
02 技术发展,开源 < 闭源
闭源模型则代表了一种更集中的创新模式。通常由单一公司或团队控制,这让他们能集中资源和专业知识,在特定领域实现技术突破。闭源模型的这种集中化特点,使其在短期内能快速推进技术发展,尤其是在那些需要大量资金和资源投入的前沿领域。所以,在技术突破这个赛道上,闭源模型要强于开源模型。
03 数据的多维度,开源 < 闭源
数据获取:
数据规模:
数据预处理和清洗:
数据多样性:
数据隐私和合规性:
综上,在数据驱动的AI领域,闭源模型得益于商业公司的数据资源,能集中管理大量、高质量的数据,且在数据预处理和清洗上更为专业和标准化,这有助于训练出泛化能力强的模型。但闭源模型在数据多样性上不占优势。从数据的多维度来分析,闭源模型总体上还是强于开源模型。
04 通用性即泛化能力,开源 < 闭源
聊到通用性,闭源模型背后通常都是大公司,他们能集中大量资源进行研发,从而在模型的泛化能力上取得优势。闭源模型也经过精心设计,能在多种不同的任务和场景中表现出不错的性能,就像个“全能战士”。
05 专业性即创新能力,开源 > 闭源
当聚焦到特定专业领域时,开源模型展现出了其独特的开放性。尤其是在那些快速发展、需要快速迭代的领域,比如自然语言处理、计算机视觉等,开源模型能迅速吸收和整合最新的研究成果,推动技术飞速发展。
另外,开源模型在专业领域的另一个优势是高度的可定制性。用户能根据自己的具体需求对模型进行调整和优化,使其更贴合特定应用场景。这种灵活性是闭源模型难以比拟的。值得注意的是,一些代表开源的初创公司在特定领域展现出了非常高的创新能力。这些公司通常由领域内的专家领导,他们凭借对特定技术的深刻理解和敏锐的市场洞察,能快速响应市场变化,推出创新的解决方案。这种创新能力,在某些情况下甚至超过了资源更丰富的闭源模型。
最后,评估模型性能的权威平台是“大模型竞技场”(LLM Arena),它借鉴了国际象棋界广泛使用的ELO评分系统。其评分机制基于一个简单而直观的原则:用户向参与评分的匿名模型(比如ChatGPT、Claude、Llama等)提出问题,然后根据回答质量进行投票,选择他们认为更佳的答案。依据用户投票的结果,表现更优的模型获得相应积分,最终排名取决于它们累积积分的多少。LLM Arena通过这种方法,汇集了50万用户的投票反馈,为大模型的性能提供了一个客观、民主的评估。从绝对排名来看,闭源模型仍然遥遥领先开源模型。
大模型排行榜 图源:LLM Arena
在这5个方面的比较中,开源模型和闭源模型各有所长,到底谁更厉害,主要取决于你的应用场景。如果非要选一个,从综合实力来看,闭源模型在当前阶段确实占据上风,因为大模型的能力非常取决于高质量的数据,而高质量的数据,恰恰是闭源派背后那些大公司所拥有的。
未来已来,将至已至!
-
- 关于宇宙的好的网名有哪些
- 角色扮演 | 1
- 网名