NLP NLP社区调查问卷结果公布 30 将在未来 寒冬 年内来临

NLP NLP社区调查问卷结果公布 30 将在未来 寒冬 年内来临

来自纽约大学,华盛顿大学和约翰斯·霍普金斯大学的研究者们发布了NLP社区调查问卷的结果,问卷中收集了 480 位业界活跃的 NLP 研究员们对于 AI 领域自然语言处理中几个问题的想法。问卷中也包括了一些元问题,是关于对其他研究人员的看法。

问卷的目标是表现 NLP 社区中观念的真实分布情况,以及——研究人员对其他研究人员观念的看法。问卷的调查范围是在过去三年中在 NLP 领域至少发表过 2 篇论文的研究人员。问卷中的问题涵盖了 NLP 研究的六个大类,也包括了通用人工智能(Artificial General Intelligence AGI)和社会焦点问题。团队选择了社区中经常讨论的问题,也有引发公众分歧的课题。

问卷调查中的问题涵盖了以下类别的内容:

除了详述他们是否同意某一个问题,受访者需要预测其他受访人同意这个问题的概率。收集这些元回复的目的是帮助研究人员理解社会学理念,因为错误的社会学理念会“减缓沟通以及导致精力的浪费“

关于拓展 AI 模型在 NLP 问题解决中扮演的角色的问题,在 NLP 研究人员实际的想法和他们认为的社区信念之间出现了“惊人的不匹配”。问卷的受访人群估计,接近 50%的研究人员同意,规模化能够解决 “几乎所有“ 问题,以及不到 40%的研究人员觉得解决重要问题需要的是语言学理论和专家设计。 然而,在一个高亮部分结果的Twitter 讨论中,主要作者 Julian Michael 指出:

在 Hacker News关于当前AI技术的局限性的讨论中,AI 作者和研究员Gwern Branwen引用了 NLP 问卷的结果,并且为规模化辩护:

虽然调查论文已经包括了图表和数据摘要,但是调查问卷的网站表示,用于探索结论的基于web的面板“即将推出”。

原文链接:

University Researchers Publish Results of NLP Community Metasurvey

声明:本文来自用户分享和网络收集,仅供学习与参考,测试请备份。