StabilityAI推出开源大语言模型StableLM,叫板ChatGPT

新知榜官方账号

2023-10-08 03:26:26

StabilityAI推出开源大语言模型StableLM,叫板ChatGPT

StabilityAI于4月19日推出了开源大语言模型StableLM,挑战ChatGPT。据StabilityAI官网介绍,StableLM的Alpha版本中拥有30亿和70亿参数,后续还将推出150亿至650亿参数的版本。与StableDiffusion类似,开发者可以在遵守协议的情况下,将这个模型用于商业或研究活动。

StableLM的参数规模和训练数据

StableLM建立在非营利性研究中心EleutherAI的开源模型基础上,训练数据集合ThePile包含了PubMed、StackExchange和维基百科等网站的文本样本,规模是ThePile的三倍,包含1.5万亿个内容标记。据StabilityAI表示,尽管StableLM的参数规模只有30亿至70亿,但性能非常好。

StableLM与其他大语言模型的比较

StableLM的发布引发了对大语言模型开源的争议。StabilityAI的CEOEmadMostaque认为,LLM不应在大公司内部进行训练,社区系统的开放性也至关重要,需要更多监督,巨头控制流量算法的游戏规则——是对人们的操纵。然而,有网友称,StabilityAI并没有在公告上说明StableLM当前的局限性。该模型是否存在与其他模型一样倾向于编造事实?是否会经常答非所问?该模型基于ThePile训练,而ThePile数据集内存在大量不雅用语,因此对话过程可能会让用户不适。

StabilityAI的营收困境

StabilityAI或许正面临营收困境。据媒体报道,StabilityAI正在以惊人的速度烧钱,但却没有明确的盈利途径。此外,其竞争对手Midjourney已经成为互联网上事实上的图像生成模型的领跑者,甚至一定程度上击败了OpenAI的DALL-E。StabilityAI现在正在寻找新的高管人才,希望他能在恶劣的条件下给公司带来收入,以解决当前“疯狂烧钱、营收可怜”的窘况。

本页网址:https://www.xinzhibang.net/article_detail-15904.html

寻求报道,请 点击这里 微信扫码咨询

关键词

StabilityAI 开源 大语言模型 StableLM ChatGPT StableDiffusion

分享至微信: 微信扫码阅读

相关工具

相关文章