语料库

事件抽取综述

事件抽取综述1基本概念1.1事件1.2事件抽取2国内外研究现状3语料库3.1ACE事件语料库3.2MUC语料库3.3TDT语料库3.4KBP语料库3.5ECB语料库3.6CEC语料库4典型方法4.1限定域事件抽取
凡心curry·2023-04-20 17:15

分享一个国内使用的ChatGPT的方法

它是由OpenAI公司开发的一种语言模型，可以在大规模语料库上进行无监督学习，并生成高质量的自然语言文本。ChatGPT可以用于多种应用场景，例如智能客服、语音助手、聊天机器人等。
書盡·2023-04-20 06:23

词的表示方法——词向量

缺点：（1）纬度灾难，有多少个词语我们的维度就多大，对于庞大的语料库来说，存储量和计算量都
我是小蔡呀～～～·2023-04-20 00:38

二分类负采样方法

负采样的采样方法：抽取负例：让语料库中常出现的单词易被抽到，不常出现的单词难被抽到。基于频
算法技术博客·2023-04-19 18:31

采用推理的方法认知单词、CBOW模型

需要生成所有单词的共现矩阵，再对这个矩阵进行SVD，以获得密集向量，如果语料库处理的单词数量非常大，将需要大量的计算资源和时间。
算法技术博客·2023-04-19 18:31

CBOW模型的数据预处理

数据预处理：从语料库生成上下文和目标词。如下图所示，contexts的各行成为神经网络的输入，target的各行成为正确解标签（要预测出的单词）。
算法技术博客·2023-04-19 18:31

通过共现矩阵和余弦相似度实现机器对单词的认知、python实现

通过共现矩阵和余弦相似度实现机器对单词的认知、python实现本文介绍的定义：一、语料库预处理二、单词的分布式表示三、单词的相似度四、相似单词排序本文介绍的定义：语料库、计数方法的目的、语料库预处理、单词的分布式表示
算法技术博客·2023-04-19 18:30

NLP作业01：利用HMM实现词性标注

实现词性标注作业要求我在这个课程的目标实现词性标注这个作业在哪个具体方面帮助我实现目标代码实现参考文献1.隐马尔科夫模型 2.基于HMM的词性标注 3.基于HMM+Viterbi算法的词性标注Python文章目录作业内容HMM模型介绍✨维特比算法介绍代码展示作业内容1.利用“1998人民日报词性标注语料库
风逸尘_lz·2023-04-19 02:06

ChatGPT的原理分析

GPT模型的训练使用了海量的语料库，可以预测下一个单词、短语、句子或文本，从而实现自然语言生成。
老王学长·2023-04-17 22:59

第二章 自然语言处理与单词的分布式表示

目录2.1自然语言处理（NaturalLanguageProcessing，NLP）2.2同义词词典2.2.1WordNet2.2.2同义词词典的问题2.3基于计数的方法2.3.1基于Python的语料库的预处理
路哞哞·2023-04-15 13:52

AISHELL-3语料库及格式解读

AISHELL-3希尔贝壳中文普通话语音数据库AISHELL-3的语音时长为85小时88035句，可做为多说话人合成系统。录制过程在安静室内环境中，使用高保真麦克风（44.1kHz，16bit）声调的标记格式采用数字1、2、3、4、5,代替《汉语拼音方案》中声调阴平（ˉ），阳平（ˊ），上声（ˇ），去声（ˋ），轻声（不标调）这几个标调符号韵律的标记格式韵律分成四级，分别用#4，#3，#2，#1表示。
子燕若水·2023-04-15 09:51

词句相似度计算——余弦相似度

第一步要做的肯定是分词，把一个句子分成一组一组的散词，分词一般我们会用现成的语料库，比如结巴分词是吧，传说中的最好用的中文分词模块包。如果不是专业性特别强的方向，足矣，如果是专项的，比如医学、金融学、
罗小丰同学·2023-04-15 04:56

模型优势缺陷整理

2.学习不足问题：尽管bert模型在大规模语料库上进行了预训练，但在某些任务上，它可能会出现学习不足的问题，导致性能下降。否定学习能力差。
是Perryl呀·2023-04-14 17:18

python-sklearn实现一个简易的智能问答机器人

数据预处理主要是对语料库进行收集，并对语料库进行筛选转换为需要的格式；然后使用朴素贝叶斯对处
LiangJun.py·2023-04-14 10:58

语料库汇总

1.BCC语料库北京语言大学的BCC汉语语料库，总字数约150亿字，包括：报刊（20亿）、文学（30亿）、微博（30亿）、科技（30亿）、综合（10亿）和古汉语（20亿）等多领域语料。
_2c_·2023-04-14 08:35

【还有七天】1001番茄践行者-Day49

雅思听说读写【20个番茄】听力——审题录播视频＋剑8点听复听写作——杜杜写作直播＋课后作业阅读——真经总纲＋真经5口语——每日背三句二、考试元技能【2个番茄】Week1直播＋思维导图课程＋费曼80%常规早听早过语料库
雪dou国·2023-04-14 06:16

Word2vec

语言概率模型计算一个句子的概率的概率模型，基于一个语料库来构建。生成一个句子可以利用贝叶斯公式进行链式分解，求得生成的概率。通常是先计算好词串出现次数，将概率值存起来，下
rssivy·2023-04-14 00:39

sql sever如何进行英文词频统计_英语语料库及词频表介绍

一、英文语料库介绍顾名思义，语料库就是集合了英语书面和口语等各类英文表述方式的语言材料集合。它收集的英语词汇包罗万象，亘古棉今。是英文词汇的一个大全集合。下面是目前主流的
weixin_39701288·2023-04-13 12:46

TF-IDF

这时，需要一个语料库（corpus），用来模拟语言的使用环境。如果一个词越常见，那么
放开那个BUG·2023-04-13 03:55

使用chatgpt写6.5分作文范文

因为如果神经网络都是拿大量的语料库去训练的，你跟他说中文，他对应的就是中文的资料库，而不是都是英文思维，之后他立马给你翻译了一下，这是很一样的。所以，我认为应该是要尽量跟他使用英文去交流，这样你
盛溪的猫猫·2023-04-12 15:29

Hugging Face Course-Diving in 抱抱脸 Tokenizers library （Introduction & BPE）

在这些情况下，使用在来自另一个领域或语言的语料库上预训练的标
爱睡觉的Raki·2023-04-12 11:01

利用python进行tf-idf算法绘制词云图_TF-IDF算法解析与Python实现方法详解

它能够用于评估一个词语对于一个文集或一个语料库中
weixin_39644952·2023-04-12 05:58

论文阅读 A Survey of Large Language Models 1

文章目录摘要介绍回顾LLMS资源公开可用的模型检查点或API具有数十亿个参数的模型具有数千亿个参数的模型LLM公开API常用语料库书籍CommonCrawlReddit链接维基百科代码其他库资源摘要讨论了机器语言智能的发展
赫凯·2023-04-12 05:31

奇思妙想，用ChatGPT写代码怎么样呢？来看看写一个简单的Android apk

OpenAI新推出的一种人工智能技术驱动的自然语言处理工具，使用了Transformer神经网络架构，也是GPT-3.5架构，这是一种用于处理序列数据的模型，拥有语言理解和文本生成能力，尤其是它会通过连接大量的语料库来训练模型
程序猿会指北·2023-04-11 08:32

Chatbot是什么？chatbot平台有哪些？有什么AI chatbots推荐？SaleSmartly chatbot助力独立站运营

有些聊天机器人会搭载自然语言处理系统，如：SaleSmartly的聊天机器人，不仅包含了简单的FAQ功能，还具有先进的AI、自然语言处理（NLP）和机器学习；但大多简单的系统只会撷取输入的关键字，再从语料库中找寻最合适的应答句
Salesmartly·2023-04-11 02:48

【Pytorch基础教程37】Glove词向量训练及TSNE可视化

首先基于语料库构建词的共现矩阵，然后基于共现矩阵和GloVe模型学习词向量。
山顶夕景·2023-04-10 21:17

模糊测试入门案例，利用AFL和Honggfuzz模糊测试Tiff

最好选择由C或者C++编写的软件或是项目有可用的示例代码最好能自己编译插桩，Qemu模式比较慢最好有测试用例(语料库)下面主要记录一下利用AFL模糊测试tiff(一个图像处理软件)的过程，有源码fuzz
3nduRance·2023-04-10 19:29

wiki语料库训练检索式聊天机器人

环境：python3.7~9，chatterbot库语料库：中文语料库github.com/brightmart/nlp_chinese_corpus可以从我的网盘下:trained_txt:(我训练时踩坑然后去掉每一步遇到的非法
飞鸟malred·2023-04-10 06:39

InstructGPT 和chatGPT的区别

InstructGPT是一种面向导论性任务的语言模型，它被训练在一个大型指令性语料库上，能够生成自然语言指令和指导。
基鑫阁·2023-04-09 08:51

「PyTorch自然语言处理系列」2. 快速回顾传统NLP应用

第二章快速回顾传统NLP应用1.语料库，标记和类型2.一元组，二元组，三元组，...，N元组3.词形和词干4.分类句子和文档5.分类单词：词性标注6.分类短语：分块和命名实体识别7.
数据与智能·2023-04-08 08:01

【5】深度学习之Pytorch——如何使用张量处理文本数据集（语料库数据集）

在计算机领域，不断崛起的两个领域，一个是CV一个是NLP，下面我们可以探索一下深度学习在NLP的应用和特点。深度学习在自然语言处理（NLP）领域有广泛的应用。以下是一些主要的应用和特点：语音识别：深度学习模型可以通过语音数据训练，学习如何将语音转换为文本。文本分类：深度学习模型可以根据文本内容将文本分为不同的类别。例如，情感分析、主题分类等。机器翻译：深度学习模型可以将一种语言翻译成另一种语言。神
王小王-123·2023-04-08 08:57

NLP基本步骤及原理

本文目录第一章：文本预处理（Preprocess）1.1NLTK自然语言处理库1.1.1NLTK自带语料库第二章：分词处理（Tokenize）2.1NLTK分词2.2结巴分词2.3正则表达式分词2.4词形处理
Mr_Yanger·2023-04-07 20:59

Lesson 3 An unknown goddess

实在是不好意思，我也不知道为啥昨天就漏了这茬……安利雅思备考的小伙伴一个网站：考满分，可以在线听写语料库内容，挺方便（也挺崩溃的）Sometimeago,aninterestingdiscoverywasmadebyarchaeologistsontheAegeanislandofKea.AnAmericanteamexploredatemplewhichstandsinanancientcity
花雕·2023-04-07 12:05

Wav2KWS: Transfer Learning From Speech Representations for Keyword Spotting(2021)

我们使用经过大规模语音语料库预训练的编码器作为骨干网络，然后
阿凡凡提·2023-04-07 01:11

无监督第五节：LDA (Latent Dirichlet Allocation算法细节)（主题模型）

LDA假设在语料库D中每个文档的生成过程如下：选择N∼Poisson(ξ).选择θ∼Dir(α).对于每个N单词:(a)选择一个主题∼Multinomial(θ).
数据小新手·2023-04-07 01:03

python 文本分析库_Python数据挖掘——文本分析

一、语料库（Corpus）语料库是我们要分析的所有文档的集合。二、中文分词2.1概念：中文分词（ChineseWordSegmentation）：将一个汉字序列切分成一个一个单独的词。
weixin_39611382·2023-04-06 19:13

【文本分析学习】Anaconda+pytorch虚拟环境下的pycharm文本分析（含分词、词性标注、词形归一化、停用词、文本情感分析、词频、文本相似度，附数据代码） NLTK

pycharm文本分析NLTK一、准备工作（一）Anaconda、pytorch、pycharm安装二、Pycharm解释器配置三、Pycharm中的文本分析下载基本的包（一）下载nltk、jieba（二）下载语料库
little_徐·2023-04-06 19:55

linux c brotli压缩简介

据谷歌研究，Brotli压缩速度同zlib的Deflate实现大致相同，而在Canterbury语料库上的压缩密度比LZMA和bzip2略大。
whatday·2023-04-06 17:40

D2

1.语料库C51～5加改错2.Friendidioms3.Movies三句4.听力漫威访谈5三国演义的15分钟
梦想奔现记·2023-04-06 09:21

如何利用Quizlet高效学英语

它的好处之一在于，可以自己建立语料库，背自己想背的，而不是固定的单词表。不过你也可以选择别人已经制作好的学习集。
ItsGrey·2023-04-06 02:41

【周复盘】1001番茄践行者–Day45

距离我的7月6号雅思考试还有13天历史的经验告诉我们，人们不会从历史的经验中吸取教训——全倾全力备战雅思今日3things【20个番茄】一、雅思听说读写阅读总纲判断题＋真经5判断题——【3个番茄】听力语料库第五
雪dou国·2023-04-05 19:43

ChatGPT应用

GPT通过大量的语料库训练，学习自然语言中的语法、语义和上下文信息，可以生
四季不变·2023-04-05 14:57

下一代的新操作系统就是ChatGPT！

ChatGPT是人工智能研究实验室OpenAI在2022年11月30日推出的聊天机器人模型，它使用Transformer神经网络架构，训练数据来自包括维基百科，以及真实对话在内的庞大语料库。
偷拨网线的william·2023-04-05 00:53

图嵌入前篇之词嵌入模型 Wrod2Vec

RandomWalk中要使用到的模型，因此先学习Word2Vec神经网络语言模型NNLM目标：根据给定的词序列，预测下一个会出现的词，如给定“他”，“是”，“一个”，预测下一个会出现的词的概率模型输入设定语料库中词的个数是
_LvP·2023-04-03 20:49

Chatgpt在训练过程中过拟合的表现和解决办法

ChatGPT是一个基于GPT-2模型的聊天机器人，它需要在大量的对话语料库上进行训练以获得有用的表现，在训练大模型（例如ChatGPT）时，随着训练集的增加，过拟合问题就可能出现。
roxxo·2023-04-03 15:04

chatgpt能否替代程序员？

此外，ChatGPT目前的能力也是受到语料库和算法等因素的限制的。因此，在需要进行复杂算法设计、优化和调试等任务的情况下，程序员仍然是必不可少的。当需要
DHG Bening·2023-04-02 09:48

python自然语言处理入门教程（一）

它提供了易于使用的界面，以超过50语料库和词汇资源，如WordNet的，连同一套文字处理库进行分类，标记化，词干，标记，分析和语义推理，和活跃的论坛。
BjutHz·2023-04-01 23:24

pytorch 词性标注实战

首先加载词性标注语料库defload_treebank():fromnltk.corpusimporttreebank#sents存储全部经过标记化的句子#postags存储每个标记对应的词性标注结果sent
Icarus_·2023-04-01 23:12

NLP进阶之（二）Chatbot评估指标

NLP进阶之（二）Chatbot评估指标1.基于检索模型1.1Ubuntu对话语料库1.2Baseline评估指标2.常规评价2.1BLEU（BilingualEvaluationUnderstudy）
Merlin17Crystal33·2023-04-01 19:22

ChatGPT常用开源项目汇总

它通过无监督学习的方式，自动从大规模的语料库中学习语言的规律和结构，从而具备了强大的文本生成
Chaos_Wang_·2023-04-01 17:32
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他