语料

自然语言处理(八)：预训练BERT

BERT的目标是通过在大规模文本语料上进行自监督学习来学习通用的语言表示。在
青云遮夜雨·2023-09-06 17:15

自然语言处理(七)：来自Transformers的双向编码器表示（BERT）

BERT的目标是通过在大规模文本语料上进行自监督学习来学习通用的语言表示。在
青云遮夜雨·2023-09-06 17:10

TextRNN实现文本分类

思路给出的baseline为0.82(F1)，方法是将语料中所有字拆开训练成300D的word2vec后，每一句的处理采用将所有字的向量相加取平均的方法得到句向量（300D），然后使用一个全连接层进行训练
Leslie_Leung·2023-09-05 01:58

【小沐学NLP】Python使用NLTK库的入门教程

文章目录1、简介2、安装2.1安装nltk库2.2安装nltk语料库3、测试3.1分句分词3.2停用词过滤3.3词干提取3.4词形/词干还原3.5同义词与反义词3.6语义相关性3.7词性标注3.8命名实体识别
爱看书的小沐·2023-09-04 18:15

两个应用于金融领域的预训练模型FinBERT解读

两个应用于金融领域的FinBERT模型解读一、熵简科技FinBERT（中文）1.1网络架构2.2训练语料2.3.预训练方式2.3.1字词级别的预训练2.3.2任务级别的预训练2.4实验2.5总结二、FinBERT
诚诚程程成·2023-09-04 00:57

NLP：生成熟悉NLP开源工具，如NLTK、 HanLP等，并搜寻、下载和熟悉PKU、 CoreNLP, LTP MSR, AS CITYI 等语料库。

它提供了大量已经预处理好的文本数据和语料库，以及一些常用的文本处理算法和NLP工具。例如，NLTK提供了分词、词性标注、命名实体识别、情感分析等功能。
Solitary_孤影照惊鸿·2023-09-03 21:24

NLP知识要点总结

文本生成练习地址：https://github.com/FudanNLP/nlp-beginnerhttps://www.zhihu.com/question/324189960总结了NLP里的小方向并给出了任务语料以及最近的成果论文
小妖精Fsky·2023-09-03 03:05

ChatGPT和文心一言的优缺点比较

大规模训练：ChatGPT基于大规模语料库进行训练，并且采用了自监督学
BigData_001_Lz·2023-09-02 17:44

雅思备考复习不到一个月首考7.5建议

所以也是有蛮大原因是基础还不错啦）这些是我当时参考的一些复习资料，有需要的就各取所需吧~视频推荐：l听力何琼技巧班l阅读冯涛高分班/刘洪波看视频直接切入真题，做剑桥雅思官方真题，看真题解析分析总结经验：l王陆真题语料库听写单词
一口白·2023-09-02 00:04

代码生成综述

实际的代码模型也是有两条路径来实现，让训练好的NLPLLM模型经过code的训练，或者让codeLLM模型经过NLP语料的训练来实现代码生成模型。
远洋之帆·2023-09-01 09:31

大学生毕业设计论文题目大全_kaic

信达雅视角下国内护肤品产品信息的翻译策略研究听说法应用于宁江中学英语听力教学的行动研究目的论视角下亚马逊家居类产品页面翻译策略研究基于单片机的42步进电机闭环控制系统设计疫情防控下广州市从化区沙贝小学开展线上教学策略的研究功能对等视角下的雅诗兰黛广告翻译策略研究基于语料库的广东理工学院大三英语专业四级考试听力理解内容分析任务型教学法在英语教学中的积极作用
开心工作室_kaic·2023-09-01 04:56

ChatGPT是否可以进行情感交流？

由于ChatGPT是在巨大的互联网文本语料库上进行训练的，它可以为用户提供有关情感的信
心似浮云️·2023-09-01 02:30

英语假期开始

五天的语料库循环后进入精听，这个到时候还是要再找一些课来看看，又要费一番功夫，唉。说：我确实上了一阵子口语课，面对外国人也没啥紧张。但是确实也不意味着我对着一个问题侃侃而谈。
稚笔_·2023-08-31 18:25

ChatGPT进阶——如何辅助设计E-R图、流程图和时序图等

OpenAI新推出的一种人工智能技术驱动的自然语言处理工具，使用了Transformer神经网络架构，也是GPT-3.5架构，这是一种用于处理序列数据的模型，拥有语言理解和文本生成能力，尤其是它会通过连接大量的语料库来训练模型
山科智能信息处理实验室·2023-08-31 05:59

自然语言处理(六)：词的相似性和类比任务

实际上，在大型语料库上预先训练的词向量可以应用于下游的自然语言处理任务，为了直观地演示大型语料库中预训练词向量的语义，让我们将预训练词向量应用到词的相似性和类比任务中。
青云遮夜雨·2023-08-31 03:19

In-Context Retrieval-Augmented Language Models

相关工作3我们的框架4实验细节5具有现成检索器的上下文RALM的有效性6用面向LM的重新排序改进上下文RALM7用于开放域问答的上下文RALM8讨论摘要检索增强语言建模（RALM）方法在生成过程中对基础语料库中的相关文档设置语言模型
UnknownBody·2023-08-30 20:53

2 获得文本语料和词汇资源

from__future__importdivisionimportnltkfromnltk.probabilityimportFreqDistfromnltk.corpusimportbrown,inaugural,stopwords,swadesh,wordnetaswn,state_union,names,gutenberg#fromnltk.bookimport*4#print(state
shashaslife·2023-08-30 14:10

Transformer系列模型笔记

输入层包括上下出现单词的向量化表示；投影层是把输入层的向量累加求和后做映射；输出层(计算语料库中所有单词的概率，计算量大！)
抓个马尾女孩·2023-08-29 14:46

【整合一切08/8】：用变压器实现语言翻译

二、嵌入层嵌入层为语料库中的每个标记提供相应的矢量表示形式。这是每个序列必须通过的
无水先生·2023-08-29 14:46

7、Photorealistic Text-to-Image Diffusion Models with Deep Language Understanding

简介主页：https://imagen.research.google/文本提示图片生成已经有很多工作了，如DALLE系列、stablediffusion论文经过实验发现：在纯文本语料库上预训练的通用大型语言模型
C--G·2023-08-29 14:21

文本匹配模型实验报告-text2vec

为解决BERT原生句子表示这种“坍缩”现象，Su[21]提出了一种排序Loss的句向量表示模型——CoSENT，通过在目标领域的监督语料上Fine-tune，使模型生成的句子表示与下游任务的数据分
狮子座明仔·2023-08-29 02:51

Elasticsearch实战（二）：Springboot实现Elasticsearch自动汉字、拼音补全，Springboot实现自动拼写纠错

文章目录系列文章索引一、安装ik拼音分词器插件1、下载地址2、下载安装3、属性大全二、自定义语料库1、新增索引映射2、批量新增文档3、查询结果三、产品搜索与汉字、拼音自动补全1、概念2、java实现汉字自动补全
秃了也弱了。·2023-08-28 11:13

自然语言处理NLTK（一）：NLTK和语料库

对于文本的研究，对于语言主要是中文，英文的研究反而会少了很多，主要还是因为应用的问题，而现在对于海外的产品来说，英文的语言处理，会越来越显得重要，其实对英文语言处理资料会比中文的来得多，来得全，很多中文研究的方法是借鉴了英文处理的思想。NLTK是python中研究自然语言的非常优秀的第三方库，里面集中了非常多的自然语言处理方式的算法，不需要自己去编写算法，可以让我们更多的去关系应用本身。NLTK的
go2coding·2023-08-27 11:52

【NLP的python库(01/4) 】： NLTK

它还具有一组丰富的附加功能，例如内置语料库，NLP任务的不同模型以及与SciKitLearn和其他Python库的集成。本文是对NLTK的简要介绍。
无水先生·2023-08-27 11:51

BERT 模型微调实战：使用Transformers微调BERT模型实现问答和文本分类任务

BERT模型的核心是Transformer编码器，它可以在大规模语料库上进行无监督预训练，然后通过微调在各种NLP任务上进行微调。
技术狂潮AI·2023-08-27 08:24

如何让孩子赢在起跑线上

让孩子赢在起跑线上，源自于善于沟通的父母，一个语料丰富的早教语言环境对于婴儿的大脑发育至关重要。那如何帮父母构建一个良好的语言环境呢？
聪聪创业宝妈·2023-08-26 15:48

基于LDA模型的主题分析

先看下数据：1、建立词典、语料库fromgensimimportcorpora,models#主题挖掘，提取关键信息#建立词典，去重pos_dict=corpora.Dictionary([[i]foriinword_data_pos.word
桂花很香,旭很美·2023-08-26 14:53

Exploring Lottery Prompts for Pre-trained Language Models

作者先给出假设，对于分类问题，在有限的语料空间内总能找到一个prompt让这个问题分类正确，作者称之为lotteryprompt。
ShadyPi·2023-08-25 07:51

【seaweedfs】3、f4: Facebook’s Warm BLOB Storage System 分布式对象存储的冷热数据

论文地址Facebook的照片、视频和其他需要可靠存储和快速访问的二进制大型对象(BLOB)的语料库非常庞大，而且还在继续增长。
呆呆的猫·2023-08-25 05:56

[oneAPI] 基于BERT预训练模型的英文文本蕴含任务

[oneAPI]基于BERT预训练模型的英文文本蕴含任务Intel®DevCloudforoneAPI和Intel®OptimizationforPyTorch基于BERT预训练模型的英文文本蕴含任务语料介绍数据集构建模型训练结果参考资料比赛
星码·2023-08-23 09:39

[oneAPI] 基于BERT预训练模型的SQuAD问答任务

oneAPI]基于BERT预训练模型的SQuAD问答任务Intel®OptimizationforPyTorchandIntel®DevCloudforoneAPI基于BERT预训练模型的SQuAD问答任务语料介绍数据下载构建模型结果参考资料比赛
星码·2023-08-23 09:07

ChatGPT 教程--生成代码

chatGPT的核心技术是基于GPT（GenerativePre-trainedTransformer）模型，它是一种预训练语言模型，可以通过大规模的语料库进行训练，从而学习到语言的
炭烤毛蛋·2023-08-23 04:50

Adapting Language Models to Compress Contexts

使语言模型适应上下文压缩摘要1引言2相关工作3方法4实验5上下文学习6压缩检索语料库实现高效推理7结论不足摘要1引言2相关工作3方法4实验5上下文学习6压缩检索语料库实现高效推理7结论我们引入了一种训练策略
UnknownBody·2023-08-22 08:31

[oneAPI] 基于BERT预训练模型的命名体识别任务

[oneAPI]基于BERT预训练模型的命名体识别任务Intel®DevCloudforoneAPI和Intel®OptimizationforPyTorch基于BERT预训练模型的命名体识别任务语料介绍数据集构建使用示例命名体识别模型前向传播模型训练结果参考资料比赛
星码·2023-08-22 05:14

工作场景下英语学习：方法与路径 （课堂笔记）

现任上海交通大学外国语学院院长，上海交通大学中国形象研究中心主任，兼任第三届全国翻译专业学位研究生教育指导委员会委员、中国翻译协会翻译理论与翻译教学委员会副主任、全国语料库与跨文化研究论坛理事长、中国认知神经语言学研究会副会长等社会职务
ali子迁·2023-08-22 03:08

《人民日报》申论面试热点金句积累22 #20220830

参考语料骑行氛围日渐浓厚，背后有多种因素在共同支撑。作为代步工具的自行车本就有着庞大的用户群体。
47fed7735c2d·2023-08-20 09:45

BPE分词

以下是BPE分词算法的详细说明：数据预处理：BPE算法首先对输入的训练语料进行预处理，将每个词按字符切分为序列，加上特殊符号（如开始符号和结束符号）。
陈庆之的论衡·2023-08-18 09:14

Python如何把英文句子切分成单词列表

在语料库语言学中，为了得到词表，有时需要把英文切分成列表。这时就需要对字符串中的标点进行处理。本人经过探索发现了几种不错的方法，供大家参考使用。
PythonFun·2023-08-17 11:00

genism word2vec方法

文章目录概述使用示例模型的保存与使用训练参数详解（[原链接](https://blog.csdn.net/weixin_44852067/article/details/130221655)）语料库训练概述
琼06·2023-08-17 10:34

NLP——操作步骤讲义与实践链接

数据集与语料语料是NLP的生命之源，所有NLP问题都是从语料中学到数据分布的规律语料的分类：单语料，平行语料，复杂结构语料的例子：PennTreebank,DailyDialog,WMT-1x翻译数据集
Eva215665·2023-08-17 06:27

Paper Reading：《Zeno：An Interactive Framework for Behavioral Evaluation of Machine Learning》

一枚科研小白的论文的阅读笔记，主要是为了记录自己的学习过程，前期读论文很多时候还是停留在解决语言障碍的阶段…这篇文章也是极其粗浅的阅读文章目录一.论文简介二.常识、语料、术语积累1.术语2.生词3.表达积累三
临风而眠·2023-08-17 05:53

大语言模型LLM的一些点

LLM发展史GPT模型是一种自然语言处理模型，使用Transformer来预测下一个单词的概率分布，通过训练在大型文本语料库上学习到的语言模式来生成自然语言文本。
远洋号·2023-08-16 14:29

大语言模型LLM的一些点

LLM发展史GPT模型是一种自然语言处理模型，使用Transformer来预测下一个单词的概率分布，通过训练在大型文本语料库上学习到的语言模式来生成自然语言文本。
超人汪小建(seaboat)·2023-08-16 00:14

Word2Vec

我爱机器学习input：我X机器学习output：爱预测结果是根据语料来预测的。Skip-Gram：给
jenye_·2023-08-15 07:36

主题模型分析-【LDA】

主题模型能够自动将文本语料库编码为一组具有实质性意义的类别。这些类别称为主题。主题模型分析的典型代表就是本篇文章将要介绍的隐含迪利克雷分布，也就是LDA。
释怀°Believe·2023-08-14 14:12

Python自然语言处理：NLTK入门指南

中的应用3.为什么选择使用Python进行NLP二、NLTK介绍1.NLTK是什么2.NLTK的历史和现状3.NLTK的安装和配置4.NLTK的基本功能分词：词性标注：去除停用词：词干提取：词形归一化：三、语料库和数据预处理
格林希尔·2023-08-14 13:10

Transformer简版实战教程

准备需要准备的是翻译的语料集sentences以及模型参数src_vocab-输入词表，tgt_vocab目标词表，src_len和tgt_le
发呆的比目鱼·2023-08-14 11:12

ELMO模型

向量是在大规模语料通过bidirectionallanguagemodel学习到的。elmo模型在各
发呆的比目鱼·2023-08-14 11:42

【欢】原创课程之就地取材法

那么，从当下的时空中“就地取材”调取语料的方法，则像是主持人大赛中，选手白颖所说的那样：“一个个鲜活的语料，会像我们从早市上，买回来的一条扑腾扑腾着的活鱼，会像一捆小青菜，上面还有着露珠，你有一百种烹饪它的方法
余生皆欢·2023-08-13 23:53

已有公司将ChatGPT集成到客服中心以增强用户体验

该公司表示，他们通过使用ChatGPT收集与客户互动过程收集的“语料”能够更有针对性地提高服务效率，提供个性化的用户体验，并实现更高的客户满意度。
漫画生成工具开发者·2023-08-13 15:50
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他