近日,Meta AI 实验室高调宣布,将开放自己的语言大模型 OPT,毫无保留地贡献出所有代码。然而,Meta表示,会把不同参数规模的训练模型以及“OPT如何建造和训练”的详细信息分发给研究人员。不夸张地说,在人工智能圈,这算得上是一个里程碑事件。这个被称为OPT的大规模语言模型,自建立以来,各项参数与能力便精准对标OpenAI 的GPT3,甚至连缺点都是。简而言之,这是一种利用巨量网络文本与书籍进行训练,可以将单词和短语串在一起组成精彩文本的深度学习算法模型。
暂无讨论,说说你的看法吧
近日,Meta AI 实验室高调宣布,将开放自己的语言大模型 OPT,毫无保留地贡献出所有代码。然而,Meta表示,会把不同参数规模的训练模型以及“OPT如何建造和训练”的详细信息分发给研究人员。不夸张地说,在人工智能圈,这算得上是一个里程碑事件。这个被称为OPT的大规模语言模型,自建立以来,各项参数与能力便精准对标OpenAI 的GPT3,甚至连缺点都是。简而言之,这是一种利用巨量网络文本与书籍进行训练,可以将单词和短语串在一起组成精彩文本的深度学习算法模型。
之前