胡绳丽 胡绳丽(Shengli Hu)2022 年加入 OpenAI,她硕士毕业于复旦大学、博士毕业于康奈尔大学。她的研究兴趣在于社会科学、计算语言学、计算机视觉和语音的跨学科研究。胡绳丽曾在自然语言处理、计算机视觉、语音和应用统计方面的顶级会议和期刊上发表过多篇论文,包括 CVPR、ACL、EMNLP、ECCV 等等,并获得过最佳论文奖...
Retrieval Augmented Generation (RAG):使用检索增强生成(RAG)可以显著提高金融情绪识别任务的性能(Zhang等人,2023)。为了更好地促进工具使用,以及从复杂数据中提取文本,论文部署了一个基于BGE(Xiao等人,2023)模型的RAG系统,这是当前文档检索领域的SoTA级embedding模型,RAG系统可以提高模型的知识推理准确率。论文使用30k个...
自2012年作为D类人才引进海南大学以来,累计发表论文260余篇,SCI收录120余次,ESI高被引11篇,引用统计超过4300次。面向多行业、多领域设计了241件(含15件PCT发明专利)系列化中国国家及国际发明专利,已获授权第1发明人中国国家发明专利及国际发明专利共85件。2020年获吴文俊人工智能技术发明三等奖;2021年作为程序委员会...
如下图所示,对于提交给Nature的论文,大约三分之一(30.85%)的GPT-4意见与人类审稿人意见重合。 在ICLR论文中,超过三分之一(39.23%)的GPT-4意见与人类审稿人意见重合。 LLM与人类审稿人,偏重略有不同 以下是对同一篇ICLR论文的LLM评论和人类评论,可以看出,LLM的眼光很毒辣,评论很一针见血。 比如与先前研究的对...
整体来看,在Nature论文中,GPT-4有57.55%的意见与至少一位人类评审员一致;在ICLR中,这个数字则高达77.18%。 再进一步仔细比较GPT-4与每一位评审员的意见之后,团队又发现: GPT-4在Nature论文上和人类评审员的重叠率下降为30.85%,在ICLR上降为39.23%。
对于大家都在用讨论LeetCode正确率仅有20%,论文作者Yi Zhang对此进行了反驳。 另外,还让GPT-4将上表中LeetCode的准确率数据可视化为图表,结果如图所示。 GPT-4 不仅可以完成普通的编程工作,还能胜任复杂的 3D 游戏开发。 研究者让GPT-4用JavaScript在HTML中编写3D游戏,GPT-4在零样本的情况下生成了一个满足所有要...
微软刷屏论文"AGI的火花"的第一作者Sébastien Bubeck, 就在论文发布到arxiv的三个小时前,做了一个校园演讲"First Contact",讲述了微软研究院团队对GPT-4的的早期研究成果。 这个演讲的完整视频最近在Sébastien Bubeck的YouTube上发布出来, 其中最高赞的评论说: ...
虽然GPT出现了小小的错误,但是我们还是“原谅”它,继续求证其它文章。但是遗憾的是RNN方法中Zhang等人提出的A deep learning approach to event-related potential detection in brain–computer interface systems在很多网页中没搜索到相关信息,当再次询问GPT的时候,其给出了原始答案相悖的信息,比如发行时间等。
如果GPT-4 使用了 CLIP 做图像编码,据 OpenAI 论文公布,目前最大的图像编码器是扩大了 64 倍的残差网络,那么 GPT-4 的图像编码大概有 16 亿。当然,我们无法排除 GPT-4 采用了其它图像编码结构,例如同样是利用 Transformer 的 KOSMOS-1 [12] 就是一个不错的选择,那么图像部分的参数量如何就只能等更多相关内...
非常感谢我们 Worldline Labs 同事对 ChatGPT 和 OpenAI 服务的见解和永无止境的讨论;特别是 Liyun He Guelton,Guillaume Coter,Luxin Zhang 和 Patrik De Boe。同样非常感谢 Worldline 的开发者倡导团队从一开始就提供的支持和鼓励;特别是 Jean-Francois James 和 Fanilo Andrianasolo。