Meta复刻GPT-3“背刺”OpenAI,完整模型权重及训练代码全公开( 三 )


PercyLiang认为更高层次的开放同时也会带来更多风险 。
也许是时候制定相关的社区规范了?
OneMoreThingMeta这次论文的的共同一作有三人 , 其中SusanZhang加入Meta之前正是来自OpenAI 。
Meta复刻GPT-3“背刺”OpenAI,完整模型权重及训练代码全公开
文章图片
不过在OpenAI期间她并没有负责GPT-3的开发 , 而是参与了玩Dota的OpenAIFive强化学习项目 , 以及多模态大模型的研究 。
项目地址:
https://github.com/facebookresearch/metaseq/tree/main/projects/OPT论文地址:
https://arxiv.org/abs/2205.01068参考链接:
[1]https://ai.facebook.com/blog/democratizing-access-to-large-scale-language-models-with-opt-175b/[2]https://www.technologyreview.com/2022/05/03/1051691/meta-ai-large-language-model-gpt3-ethics-huggingface-transparency/[3]https://twitter.com/MetaAI/status/1521489996145958914—完—
Meta复刻GPT-3“背刺”OpenAI,完整模型权重及训练代码全公开】量子位QbitAI·头条号签约