Stability AI宣布发布StableLM开源语言模型,标志着一个新的AI技术时代的开始。该模型基于庞大的数据集和创新训练方法,将为研究和商业应用带来更多可能性。
AI技术的新起点:Stability AI发布StableLM
在AI技术领域,一场革命性的变革正在发生。Stability AI在今天宣布推出其全新的开源语言模型,StableLM。这一重大举措引发了人们对未来AI技术主导者的疑问和期待。
StableLM:全新里程碑
StableLM标志着AI技术的新起点。这个开源语言模型的Alpha版本拥有30亿和70亿参数的两个版本,而更多参数达到650亿的版本即将推出。开发者可以根据CC BY-SA-4.0许可协议的规定自由地查看、使用和适应这些模型,无论是用于商业应用还是研究领域。
AI领域的关键角色
回顾2022年,Stability AI推动了Stable Diffusion的发布,这是一款颠覆性的图像模型,代表了AI技术的透明、开放和可扩展。通过StableLM模型套件的推出,Stability AI继续致力于使AI技术成为全球共享的资源。这些模型具备生成文本和代码的能力,将为各种领域的应用程序提供强大支持。它们向我们展示了即使是小型而高效的模型,在经过适当培训后也能够实现高性能。
数据集的巨大贡献
StableLM的训练基于一个全新的实验性数据集,该数据集比之前的版本大三倍,包含1500亿个内容标记。尽管模型规模相对较小,仅有30到70亿参数(与GPT-3的1750亿参数相比),但这个数据集的丰富性使得StableLM在对话和编码任务方面表现出了令人瞩目的高性能。
研究者的利器
此外,Stability AI还发布了一系列经过微调的研究模型。最初,这些模型将使用五个最近的开源数据集进行微调,用于对话代理,包括Alpaca、GPT4All、Dolly、ShareGPT和HH。这些经过微调的模型仅供研究使用,并遵循非商业CC BY-NC-SA 4.0许可协议,与斯坦福的Alpaca许可证一致。
未来的AI格局
Stability AI的StableLM模型现已在GitHub存储库中提供,未来将发布完整的技术报告。Stability AI期待与开发者和研究人员合作,共同推动StableLM套件的发展。Stability AI表示将启动众包的RLHF计划,并与Open Assistant等社区合作,创建面向AI助手的开源数据集。
扫描以下二维码加群
告诉管理员您遇到的问题
我们会第一时间为您挑选优质教程和帮您解决问题