GPT-2 第9页

图解OpenAI的秘密武器GPT-2：可视化Transformer语言模型

其中OpenAI训练的GPT-2模型就展示出了惊艳的能力，它能够撰写出连贯而富有激情的论文，比当下其他所有的语言模型写的都好。

BigDataDigest·2019-08-14 14:19

五行代码玩转GPT-2，新加坡高中生开源轻量级GPT-2“客户端”

鱼羊发自凹非寺量子位报道|公众号QbitAIOpenAI会讲故事的文本生成模型GPT-2，现在有了更易用的封装版本。轻松上手，轻量级，速度快。这就是这只名叫gpt2-client的包装器的突出特性。

QbitAl·2019-08-12 12:37

OpenAI的GPT-2:用Python构建世界上最先进的文本生成器的简单指南

是的，你没听错，这是一个在OpenAI的GPT-2框架上训练的自然语言处理

磐创 AI·2019-08-05 22:07

AI 补代码神器诞生，百度网盘克星诞生，Google 取消中国搜索引擎项目！ | 开发者周刊...

补代码工具问世（下附链接）https://github.com/zxqfl/TabNine一位来自加拿大的大四学霸，开发了一款”DeepTabNine“（Github）代码补全工具，TabNine是基于GPT

CSDN资讯·2019-07-21 13:00

CSDN周刊：AI补代码神器问世，百度网盘克星诞生，Google 已经取消中国搜索引擎项目！

CSDN官方博客·2019-07-19 15:39

杀手级AI补代码工具问世，支持23种语言及5种主流编辑器，程序员沸腾了

GPT-2，一个来自OpenAI的逆天语言模型，现在能用来补全代码了。一位来自加拿大的大四学霸，开发了一款”DeepTabNine“代码补全工具，实现了这一大胆的想法。

程序员之家v·2019-07-16 15:39

追溯XLNet的前世今生：从Transformer到XLNet

前言正当GPT-2还拿着15亿参数的模型吊着人们的胃口时，XLNet带着开源

AI科技大本营·2019-07-14 19:54

XLNet: Generalized Autoregressive Pretraining for Language Understanding 阅读笔记前言

今年6月底CMU和谷歌新提出了一个预训练模型，在效果和算力上都远远超过18年年底发表的BERT预训练和模型，也优于今年年初提出的GPT-2预训练模型。

Roy-Better·2019-07-01 16:51

又见算力碾压--解读最强自然语言处理模型XLnet

之前自然语言处理分为两大门派一个是以GPT,GPT-2为代表自回归（AR)另一个是以BERT为代表的自编码（AD)，接下来分别对这两种模型，以

beyondma·2019-06-23 21:55

如何用 Python 和 BERT 做多标签（multi-label）文本分类？

BERT是去年以来非常流行的语言模型（包括ELMO,Ulmfit,BERT,Ernie,GPT-2等）的一种，长期霸榜，非常

nkwshuyi·2019-05-21 09:26

如何用 Python 和 BERT 做多标签（multi-label）文本分类？

BERT是去年以来非常流行的语言模型（包括ELMO,Ulmfit,BERT,Ernie,GPT-2等）的一种，长期霸榜，非常

王树义·2019-05-21 06:31

GPT-2，吓坏创造者的「深度造假写手」

简评：今年二月份刷屏的GPT-2着实厉害，那个生成续写故事的例子更是效果好到吓人一跳，它到底有多厉害，本文略微讲讲。更详细的信息可参考文末OpenAI的博客链接。你能从下面这两段文字里品味出什么区别？

极光推送·2019-05-15 00:00

GPT-2解读（论文 + TensorFlow实现）

GPT-2是对GPT的一个升级，并且更着重于将思路放在为何pretrain是有用的上面，认为LM本身是一个Multi-taskLearner，并且大力用ZSL实验来佐证这个思路。

MagicBubble·2019-04-24 17:54

GPT解读（论文 + TensorFlow实现）

GPT这篇论文，我还是在GPT-2出来了之后，被它能续写《红楼梦》这一事件而震惊，所以才统一看了一下这两篇论文。这俩都是OpenAI出的，也是用pretrain+fintune的套路进行处理。

MagicBubble·2019-04-24 16:31

要更有钱、更烧钱，OpenAI 重组，加速融资之路

AI组织，他们雇佣了许多一流的研究和开发人员，在机器学习理论和深度学习应用方面多有诸多成果，我们曾经报道过的许多强化学习连续控制成果、5v5DOTAAI「OpenAIFive」、自动生成人类水准文本的GPT

算法与数学之美·2019-04-08 20:00

NLP领域的预训练模型(Transformer、BERT、GPT-2等)

英文原文链接：https://www.analyticsvidhya.com/blog/2019/03/pretrained-models-get-started-nlp/1介绍如今，自然语言处理（NaturalLanguageProcessing，NLP）应用已经变得无处不在。我似乎总是不经意间发现一些网站和应用程序，以这样的或那样的形式利用了自然语言处理技术。简而言之，现在就是涉足自然语言处理

NLP_victor·2019-04-02 20:00

GPT-2 论文翻译

GPT-2论文翻译基本是机器翻译，也进行了基本的人工矫正，凑活看吧原论文：《LanguageModelsareUnsupervisedMultitaskLearners》原论文地址：https://d4mucfpksywv.cloudfront.net

tomeasure·2019-04-01 18:31

8个优秀的预训练模型，帮助您开始使用自然语言处理（NLP）

SZ laoluo·2019-03-28 09:52

BERT、GPT-2这些顶尖工具到底该怎么用到我的模型里?

转自：http://www.dataguru.cn/article-14544-1.html近期的NLP方向，ELMO、GPT、BERT、Transformer-XL、GPT-2，各种预训练语言模型层出不穷

芮芮杰·2019-03-22 19:39

从Seq2Seq，Attention，Transformer到ELMo，BERT，GPT-2（二）

五、ELMo论文《Deepcontextualizedwordrepresentations》认为，高质量的词表征应该包含丰富的句法和语义信息，并且能够对多义词进行建模（传统的词向量如word2vec是上下文无关的）。ELMo分为两个阶段：在大型语料库上预训练一个深度双向语言模型biLM，然后将LM各层作为新特征补充到下游任务中。这个LM是预训练过的双向耦合coupledLSTM，词向量是其内部状

liuy9803·2019-03-11 17:54

OpenAI GPT-2语言模型是非监督多任务学习器 Language Models are Unsupervised Multitask Learners

paperhttps://d4mucfpksywv.cloudfront.net/better-language-models/language-models.pdf个人翻译，并不权威语言模型是非监督多任务学习器摘要自然语言处理任务，比如问答，机器翻译，阅读理解和摘要，通常是通过在具体任务数据集上的监督学习方法处理的。我们证明语言模型开始学习这些任务没有任何显示的监督,当训练在一个新的数百万网页组

DarrenXf·2019-03-09 18:22

OpenAI GPT-2语言模型是非监督多任务学习器 Language Models are Unsupervised Multitask Learners

paperhttps://d4mucfpksywv.cloudfront.net/better-language-models/language-models.pdf个人翻译，并不权威语言模型是非监督多任务学习器摘要自然语言处理任务，比如问答，机器翻译，阅读理解和摘要，通常是通过在具体任务数据集上的监督学习方法处理的。我们证明语言模型开始学习这些任务没有任何显示的监督,当训练在一个新的数百万网页组

DarrenXf·2019-03-09 18:22

自然语言处理的bert, GPT, GPT-2, transformer, ELMo, attention机制都是些何方神圣？？？

2018年是NLP领域巨变的一年，这个好像我们都知道，但是究竟是哪里剧变了，哪里突破了？经常听大佬们若无其事地抛出一些高级的概念，你却插不上嘴，隐隐约约知道有这么个东西，刚要开口：噢！你说bert啊，我知道，就是一个预训练模型，然后，然后。。。然后就没有然后了，若是在面试场上，你三秒钟就结束了考官的提问，那尴尬的考官估计只能以你太快的理由拒绝给你发offer。好的，闲话少说，我们来总结一下这么些高

Jamie_Wu·2019-03-07 22:41

[转载] 科学家开发的新AI因过于危险而不敢发布

位于旧金山的非盈利性研究组织OpenAI表示他们开发的这款“像变色龙一样的”预言预测系统GPT-2将来只会以缩减版的形式限量发售，因为“担忧关于这项技术的恶意应用软件

GM浏览器·2019-03-07 19:14

从Seq2Seq，Attention，Transformer到ELMo，BERT，GPT-2（一）

一图了解从Seq2Seq，Attention，Transformer到ELMo，BERT，GPT-2的发展过程。

liuy9803·2019-03-01 12:46

GPT2.0 Language Models are Unsupervised Multitask Learners 论文解读

个人对论文的理解最近GPT-2的关注度很高，其效果极其惊人，官方甚至表示因为其效果太差怕被用来做坏事并未开源，粉丝认为openAI恶意炒作，有人甚至吐槽它应该改名叫closedAI。

爱编程真是太好了·2019-02-22 17:34

Open AI新一代语言模型GPT-2不需特定领域数据

OpenAI最近发布新一代的大型语言模型GPT-2，该模型有15亿个参数，利用了800万页的网页数据作为训练数据，以预测所有输入文字的下一个字作为训练目标，而也因为数据集的多样性，让模型不需要针对特定的任务进行训练

SBFPLAY561·2019-02-15 15:45

推荐频道

GPT-2

图解OpenAI的秘密武器GPT-2：可视化Transformer语言模型

五行代码玩转GPT-2，新加坡高中生开源轻量级GPT-2“客户端”

OpenAI的GPT-2:用Python构建世界上最先进的文本生成器的简单指南

AI 补代码神器诞生，百度网盘克星诞生，Google 取消中国搜索引擎项目！ | 开发者周刊...

CSDN周刊：AI补代码神器问世，百度网盘克星诞生，Google 已经取消中国搜索引擎项目！

杀手级AI补代码工具问世，支持23种语言及5种主流编辑器，程序员沸腾了

追溯XLNet的前世今生：从Transformer到XLNet

XLNet: Generalized Autoregressive Pretraining for Language Understanding 阅读笔记前言

又见算力碾压--解读最强自然语言处理模型XLnet

如何用 Python 和 BERT 做多标签（multi-label）文本分类？

如何用 Python 和 BERT 做多标签（multi-label）文本分类？

GPT-2，吓坏创造者的「深度造假写手」

GPT-2解读（论文 + TensorFlow实现）

GPT解读（论文 + TensorFlow实现）

要更有钱、更烧钱，OpenAI 重组，加速融资之路

NLP领域的预训练模型(Transformer、BERT、GPT-2等)

GPT-2 论文翻译

8个优秀的预训练模型，帮助您开始使用自然语言处理（NLP）

BERT、GPT-2这些顶尖工具到底该怎么用到我的模型里?

从Seq2Seq，Attention，Transformer到ELMo，BERT，GPT-2（二）

OpenAI GPT-2语言模型是非监督多任务学习器 Language Models are Unsupervised Multitask Learners

OpenAI GPT-2语言模型是非监督多任务学习器 Language Models are Unsupervised Multitask Learners

自然语言处理的bert, GPT, GPT-2, transformer, ELMo, attention机制都是些何方神圣？？？

[转载] 科学家开发的新AI因过于危险而不敢发布

从Seq2Seq，Attention，Transformer到ELMo，BERT，GPT-2（一）

GPT2.0 Language Models are Unsupervised Multitask Learners 论文解读

Open AI新一代语言模型GPT-2不需特定领域数据