本科论文
ChatGPT火遍全球时,背后的技术大牛也浮出水面。在最近的一份调查显示,真正在ChatGPT项目中做出贡献只有87人,而这些人里有9位是华人,其中三位都毕业于清华大学。 文|黄幸怡 编|游勇 01 ChatGPT里的清华元素 OpenAI旗下大语言模型ChatGPT的成功让人眼前一亮,更让外界意想不到的是,这个产品不是出自拥有数千名人工智能团队的谷歌或者Facebook,而是仅成立8年只有三百多人的OpenAI。 来自全球各地的顶尖人才为OpenAI和ChatGPT的成功奠定了基础。今年1月,OpenAI创始人及CEO奥特曼透露公司员工人数为375人 ,与谷歌和脸书等科技巨头从事人工智能工作的数千名员工相比,这是一个很小的数字。“我知道我不应该吹嘘OpenAI,我们要感谢我们所有的外包公司为训练模型提供了必不可少的数据。” 而真正在ChatGPT项目中做出贡献的人员,据OpenAI官网显示,共有87人。ChatGPT只是OpenAI其中的一个项目,比如OpenAI之前发布的文本生成图像的大模型DALL-E,两个半月注册人数突破100万,也在人工智能领域备受关注。 在最近一份由智谱研究联合AMiner发布的《ChatGPT团队背景研究报告》中,这群人的显著特征被归纳为了“年纪很轻”、“背景豪华”、“聚焦技术”、“积累深厚”、“崇尚创业”和“华人抢眼”几个方面。 智谱研究发布的报告显示,该团队平均年龄为32岁,“90后”是主力军。作为全球人工智能顶尖研发团队,其成员绝大多数拥有名校学历,但也并非“清一色”研究生学历,而是本、硕、博人数相对均衡。同时,其成员大多具有全球知名企业工作经历,其中,从谷歌跳槽而来的有10人,是为其贡献最多人才的外部企业(ChatGPT基于的也是谷歌提出的Transformer模型)。作为应届生直接加入ChatGPT 团队的也有11人,但不论是来自其他企业,还是作为应届生加入的人员,背景都相当“豪华”。 而在技术上,该团队共有包括OpenAI 联合创始人Wojciech Zaremba在内的5人入选了今年“AI 2000 全球人工智能学者”名单。该名单由AMiner 每年推出,评选出全球人工智能 20个细分领域前 100 名最具影响力学者。这意味着,在 ChatGPT 不足百人的团队中,就有 5 人属于全球人工智能各领域顶尖学者,技术积累深厚。 此外,最值得一提的是,华人成为了该团队中一支重要的科技创新力量,共9人,占团队总人数的比例超10%。华人学者欧阳龙更是参与了与 ChatGPT 相关的 7 大技术项目中的 4 大项目的研发,是InstructGPT 论文的第一作者,也是RLHF 论文的第二作者。“可见他是这两个关键技术项目的核心人员。”智谱研究分析称。 在华人团队中,有5人本科就读于中国内地高校,其中3人(翁家翌、赵盛佳、袁启明)均来自于清华大学,并各有1人本科毕业于华中科技大学、北京大学/香港大学。不过,这5人后续均在海外高校继续深造。 其中,翁家翌是ChatGPT团队里最年轻的研发工程师之一。他于2020年从清华大学计算机系本科毕业,进入卡内基梅隆大学攻读硕士学位。在清华期间,翁家翌曾加入清华大学人工智能研究院基础理论研究中心主任朱军领导的TSAIL实验室,并在大三暑假加入加拿大图灵奖获得者 Yoshua Bengio 的实验室,深入开展RL和NLP的研究。其更是一度以本科生身份,成为基于 PyTorch 的强化学习算法库 Tianshou(天授)的第一作者。 清华大学也以3名成员的数量,与卡内基梅隆大学一起,并列ChatGPT团队毕业院校的第7名。排在他们之前的分别是斯坦福大学(14 人)、加州大学伯克利分校(10 人)、麻省理工学院(7 人)、剑桥大学(5...