文章 2023-05-16 来自:开发者社区

2021年ML和NLP学术统计:谷歌断层第一,强化学习大牛Sergey Levine位居榜首

这有一份关于 2021 年 ML 和 NLP 出版物的统计数据,并以可视化的方式进行展现,例如最高产的作者、机构、主题等。2021 年是自然语言处理(NLP)和机器学习(ML)非常高产的一年,现在是时候统计一下去年 NLP 和 ML 领域的论文了。来自剑桥大学机器学习和自然语言处理的研究员 MAREK REI 总结分析了 2021 年经典论文,并归纳了 2021 年 ML 和 NLP 出版物的统....

2021年ML和NLP学术统计:谷歌断层第一,强化学习大牛Sergey Levine位居榜首
文章 2023-05-16 来自:开发者社区

NLP预训练范式大一统,不再纠结下游任务类型,谷歌这个新框架刷新50个SOTA

在这篇论文中,来自谷歌的研究者提出了一种统一各种预训练范式的预训练策略,这种策略不受模型架构以及下游任务类型影响,在 50 项 NLP 任务中实现了 SOTA 结果。当前,NLP 研究人员和从业者有大量的预训练模型可以选择。在回答应该使用什么模型的问题时,答案通常取决于需要完成什么任务。这个问题并不容易回答,因为涉及许多更细节的问题,例如使用什么样的架构?span corruption 还是语言....

NLP预训练范式大一统,不再纠结下游任务类型,谷歌这个新框架刷新50个SOTA
文章 2023-05-10 来自:开发者社区

不要think step by step!谷歌最新自然语言推理算法LAMBADA:「反向链推理」才是答案

 新智元报道  编辑:LRS【新智元导读】谷歌发布全新反向推理算法LAMBADA,无惧搜索空间爆炸!自动推理绝对算是自然语言处理领域的一大难题,模型需要根据给定的前提和知识推导出有效且正确的结论。尽管近年来NLP领域借着大规模预训练语言模型在各种「自然语言理解」如阅读理解和问答等任务中取得了极高的性能,但这些模型在逻辑推理方面的性能仍然十分滞后。去年5月「思维链」(Chain....

不要think step by step!谷歌最新自然语言推理算法LAMBADA:「反向链推理」才是答案
文章 2022-01-09 来自:开发者社区

谷歌NLP新模型「大鸟」突破BERT限制,稀疏注意力机制更省内存

谷歌最近又推出了一个重磅的稀疏注意力模型:Big Bird。 之前各种刷榜的BERT和它的各种衍生版本RoBERTa等,都是构建在Transformer基础上。 这些模型的核心竞争力就是全注意力机制,但这种机制会产生序列长度的二次依赖,如果输入的token过长,会撑爆内存,而长文本摘要等任务中,BERT的512token,就显得有点捉襟见肘。  二次依赖限制了BER....

谷歌NLP新模型「大鸟」突破BERT限制,稀疏注意力机制更省内存
文章 2022-01-07 来自:开发者社区

超强大自动NLP工具!谷歌推出AutoML自然语言预训练模型

今年早些时候,谷歌发布了AutoML自然语言(AutoML Natural Language),这是其Cloud AutoML机器学习平台向自然语言处理领域的扩展。经过数月的beta测试,谷歌近日宣布面向全球用户推出AutoML Natural Language的通用版本,支持分类、情绪分析和实体提取等任务,以及支持各种文件格式,包括扫描的pdf文件。AutoML自然语言利用机器学习来揭示电子邮....

超强大自动NLP工具!谷歌推出AutoML自然语言预训练模型
文章 2021-11-26 来自:开发者社区

机器理解成绩超越谷歌等巨头,Maluuba如何迅速成为最受关注的NLP公司

加拿大滑铁卢大学(University of Waterloo)以计算机学科闻名,2011 年 8 月 18 日,学校在读研究生 Kaheer Suleman 发明了一款智能程序,取名 Maluuba 。同年,他与几位同学创立了 Maluuba 公司,他们最初的想法是做一款智能语音旅行工具,用户可以通过语音搜寻航班。2012 年 2 月,Maluuba 从三星风投获得 200 万美元种子轮投资。....

机器理解成绩超越谷歌等巨头,Maluuba如何迅速成为最受关注的NLP公司
文章 2021-11-26 来自:开发者社区

谷歌开源最精确自然语言解析器SyntaxNet的深度解读:一次关键进步以及一个重要工具

如果你对 Siri 说,设置闹钟:早上五点,她可以办到。但是,如果问她哪种处方止疼片对胃部刺激最小,她就束手无策了,因为你说的句子很复杂。Siri 还远未实现计算机科学家所说的「自然语言理解」。这并不是说虚拟助理将永远这样。科技巨头、创业公司、大学的研究人员正在想办法让计算机理解自然语言。多亏深度神经网络,这方面的技术正变得越来越好。谷歌、脸书和微软以及其他公司,已经使用深度神经网络来识别图片中....

谷歌开源最精确自然语言解析器SyntaxNet的深度解读:一次关键进步以及一个重要工具
文章 2021-11-16 来自:开发者社区

谷歌开放自然语言理解软件源代码: 这项技术让电脑理解自然语言

从今天开始,谷歌给外界软件开发人员开放了自然语言算法, 并发布帮助开发者构建基于语言的应用和服务的工具,助力开发比经常产生误解聊天机器人更好的应用。一个今天发布的工具,叫做 SyntaxNet,在有语境和常用注释的情况下,可以学会理解单词和短语的意思。这个工具使用了原先由谷歌发布叫 TensorFlow 的深学习框架。它是一个使用 TensorFlow 迄今构建的最复杂的部件。谷歌还发布了预先训....

谷歌开放自然语言理解软件源代码: 这项技术让电脑理解自然语言
文章 2019-08-26 来自:开发者社区

独家 | 谷歌发布NLP最先进预训练模型:开源BERT

作者:Jacob Devlin and Ming-Wei Chang, Research Scientists, Google AI Language 翻译:佟海宁 校对:吴金笛 文章来源:微信公众号 数据派THU 本文约2000字,建议阅读9分钟。 本文为你介绍谷歌最新发布的自然语言预训练模型BERT。 简介 自然语言处理(NLP)面临的众多挑战之一是训练数据的短缺。由于NLP是一个具有许多.....

文章 2019-06-20 来自:开发者社区

谷歌更强 NLP 模型 XLNet 开源:20 项任务全面碾压 BERT!

雷锋网(公众号:雷锋网) AI 科技评论按:去年 11 月份,谷歌研究团队在 GitHub 上发布了万众期待的 BERT,它不仅在 11 项 NLP 测试中刷新了最高成绩,甚至还表现出全面超越人类的惊人结果。但 BERT 带来的震撼还未平息,今日又一个令众多 NLPer 兴奋的消息发布: CMU 与谷歌大脑提出的全新 XLNet 在 20 个任务上超过了 BERT 的表现,并在 18 个任务上取....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

自然语言处理