斯坦福科学家仅用600美元就克隆了OpenAI的ChatGPT
2023-03-21 10:54:36 来源:TechWeb 阅读量:19712
如果说复制了一个OpenAI的ChatGPT的成本仅需600美元你会不会感到意外呢?事实上,斯坦福的科学家们真的做到了。
上周,斯坦福大学基础模型研究中心上周宣布,其研究人员使用 OpenAI 的 GPT API 对 Meta 的 LLaMA7B 大型语言模型 进行了“微调”,而且价格非常便宜。
结果就是斯坦福大学研究人员用600美元的成本,复制了OpenAI的GPT-3模型,并给自己的模型起了一个有趣的名字:Alpaca。他们利用了开放AI提供的预训练数据集和一些开源代码,只用了两个月就完成了复制。他们还在网上发布了自己的模型和代码,供其他人使用和改进。
这些科学家在其惊人简单的预算明细中表示,根据研究人员使用专有模型训练Alpaca所花费的时间,他们在 OpenAI 的 API 上投入“不到500美元”,在 LLaMA 上投入“不到100美元”。
虽然GPT-3是一个非常昂贵和复杂的模型,但是它并不是不可复制或独一无二的。复制品Alpaca模型虽然比GPT-3小很多,但是在一些任务上表现得很好,甚至超过了GPT-3。尽管如此,Alpaca确实也有“语言模型的几种常见缺陷,包括幻觉、毒性和刻板印象”。
这也可以当作一个典型的例子,证明了 OpenAI 这样的软件可能是容易复制的。
作者:叶子琪
作者:周嘉宝尽管上半年本土疫情的反复让零售市场承压,但中国这片消费热土仍被所有人寄予厚望。7月25日,第二届中国国际消费品博览会在海南海口拉开帷幕。时代财经发现,上半年零售市场的低迷情绪并没有蔓延至这场规格颇高的展会中。作为此次展会主战场,...
作者:子墨
兔年第一个工作日,刷屏的除了有“开工大吉”,还有政府派发的“大红包”。1月28日,全省高质量发展大会在广州召开。紧随其后,当天下午,广州召开全市高质量发展大会。会上,广州市商务局局长洪谦透露一个重磅信息——广州将2023年定为“消费提振年”...
作者:张璠
摘要:正如电商概念的完善和发展经历了一个过程一样,新零售的发展同样要经历一个从萌芽到成熟的过程。从这个逻辑来看,当前出现的无人货架困境是新零售概念发展成熟的过程当中必然要经历的一个阶段。图片来源:视觉中国从某种程度上来讲,无人货架打了新零售...
作者:苏婉蓉
中新经纬客户端3月13日电(贺陈慧)积极探索并购机会的华润啤酒,正在加快对啤酒高端市场的布局。3月9日,因传华润啤酒欲收购喜力中国业务,华润啤酒发布价格和成交量异常波动的公告,公告中提到,公司及公司控股股东经常探索和进行有关潜在交易的商业和...