语料

Chatbot是什么？chatbot平台有哪些？有什么AI chatbots推荐？SaleSmartly chatbot助力独立站运营

有些聊天机器人会搭载自然语言处理系统，如：SaleSmartly的聊天机器人，不仅包含了简单的FAQ功能，还具有先进的AI、自然语言处理（NLP）和机器学习；但大多简单的系统只会撷取输入的关键字，再从语料库中找寻最合适的应答句
Salesmartly·2023-04-11 02:48

XGBoost文本分类实战

一、将收集到的语料进行文本预处理1）train.txt预处理为train.csv，格式为id，内容，标签使用excel打开train.txt然后选择分隔符为英文逗号，这样内容在一列，然后再为他们添加id
hbpartty·2023-04-10 21:37

【Pytorch基础教程37】Glove词向量训练及TSNE可视化

首先基于语料库构建词的共现矩阵，然后基于共现矩阵和GloVe模型学习词向量。
山顶夕景·2023-04-10 21:17

模糊测试入门案例，利用AFL和Honggfuzz模糊测试Tiff

最好选择由C或者C++编写的软件或是项目有可用的示例代码最好能自己编译插桩，Qemu模式比较慢最好有测试用例(语料库)下面主要记录一下利用AFL模糊测试tiff(一个图像处理软件)的过程，有源码fuzz
3nduRance·2023-04-10 19:29

NLP-条件随机场-实战

NLP-条件随机场-实战一、线性链式条件随机场二、数据的预处理1、语料分词和词性标注2、命名实体的标注三、提取特征1、CRF++使用特征模板2、sklearn_crfsuite提取特征函数一、线性链式条件随机场我们常用的是线性链式条件随机场
大虾飞哥哥·2023-04-10 17:11

基于条件随机场(CRF)对中文案件语料进行命名实体识别(NER)

==1.1.0six==1.11.0sklearn==0.0sklearn-crfsuite==0.3.6tabulate==0.8.2tqdm==4.28.1##文件组织-**corpus.py**语料类
小樊努力努力再努力·2023-04-10 17:38

iOS使用CoreML分类汽车评论

前言上一篇【iOS使用CoreML来分类垃圾信息】文章中用的是英文语料，而苹果的文本分类其实是支持多语言的，而中文的训练在国内更具实用价值，所以本文介绍如何针对中文语料进行训练。
Jiao123·2023-04-10 08:03

“大熊猫”的国际外宣｜BrochureBroker特辑：《HelloChengdu》中英文杂志

今天逛书店的时候想起来了去年暑假看到的一本特别的杂志——《HELLOChengdu》杂志封面一览由于没有找到官方的网站，所以我收集了杂志的多个平台的介绍（语料来源：douban.com，baidu.com
冷萃选手小刘·2023-04-10 08:34

windows下使用word2vec训练维基百科中文语料全攻略！（一）

全文共1065个字，5张图，预计阅读时间7分钟。训练一个聊天机器人的很重要的一步是词向量训练，无论是生成式聊天机器人还是检索式聊天机器人，都需要将文字转化为词向量，时下最火的词向量训练模型是word2vec，所以，今天小编文文带你使用维基百科训练词向量。训练数据下载我们使用维基百科训练词向量，维基百科数据的下载地址为：https://dumps.wikimedia.org/zhwiki/lates
LeadAI学院·2023-04-10 06:10

wiki语料库训练检索式聊天机器人

环境：python3.7~9，chatterbot库语料库：中文语料库github.com/brightmart/nlp_chinese_corpus可以从我的网盘下:trained_txt:(我训练时踩坑然后去掉每一步遇到的非法
飞鸟malred·2023-04-10 06:39

使用simBert生成同义语句(全过程)

SimBERT属于有监督训练，训练语料是自行收集到的相似句对，通过一句来预测另一句的相似句生成任务来构建Seq2Seq部分，然后前面也提到过[CLS]的向量事实上就代
thirsd·2023-04-10 05:12

同义词挖掘

2、竞品数据+翻译模型挖掘同义词通过领域搜索query，抓取竞品搜索结果title，构建query-title平行语料，进而通过fast-align无监督翻译对齐方法挖掘同义词。
lzhenboy·2023-04-10 00:55

InstructGPT 和chatGPT的区别

InstructGPT是一种面向导论性任务的语言模型，它被训练在一个大型指令性语料库上，能够生成自然语言指令和指导。
基鑫阁·2023-04-09 08:51

动手做个mini智能助理--数据准备（2）

背景：这部分会介绍如何准备自己的数据，利用chatgpt的self-instruct的方式批量的生成平行语料对。
远洋之帆·2023-04-09 07:40

本地CPU运行ChatGLM-6B与测试过程记录

ChatGLM的参数数量是62亿，训练集是1T标识符的中英双语语料。相比而言，GPT3的参数量级是1750亿，GPT4是100万亿（网传）。ChatGLM-6B作为该领域的低成本模型，值得一试。
ybdesire·2023-04-09 04:30

chat GPT人工智能写论文-怎么用chatGpt写论文

这是因为机器学习算法是基于已有的大量语料数据来训练的，相同的输入信息则会导致生成
147SEO·2023-04-08 12:46

「PyTorch自然语言处理系列」2. 快速回顾传统NLP应用

第二章快速回顾传统NLP应用1.语料库，标记和类型2.一元组，二元组，三元组，...，N元组3.词形和词干4.分类句子和文档5.分类单词：词性标注6.分类短语：分块和命名实体识别7.
数据与智能·2023-04-08 08:01

【5】深度学习之Pytorch——如何使用张量处理文本数据集（语料库数据集）

在计算机领域，不断崛起的两个领域，一个是CV一个是NLP，下面我们可以探索一下深度学习在NLP的应用和特点。深度学习在自然语言处理（NLP）领域有广泛的应用。以下是一些主要的应用和特点：语音识别：深度学习模型可以通过语音数据训练，学习如何将语音转换为文本。文本分类：深度学习模型可以根据文本内容将文本分为不同的类别。例如，情感分析、主题分类等。机器翻译：深度学习模型可以将一种语言翻译成另一种语言。神
王小王-123·2023-04-08 08:57

NLP基本步骤及原理

本文目录第一章：文本预处理（Preprocess）1.1NLTK自然语言处理库1.1.1NLTK自带语料库第二章：分词处理（Tokenize）2.1NLTK分词2.2结巴分词2.3正则表达式分词2.4词形处理
Mr_Yanger·2023-04-07 20:59

Lesson 3 An unknown goddess

实在是不好意思，我也不知道为啥昨天就漏了这茬……安利雅思备考的小伙伴一个网站：考满分，可以在线听写语料库内容，挺方便（也挺崩溃的）Sometimeago,aninterestingdiscoverywasmadebyarchaeologistsontheAegeanislandofKea.AnAmericanteamexploredatemplewhichstandsinanancientcity
花雕·2023-04-07 12:05

训练一个中文gpt2模型

链接为:https://github.com/yuanzhoulvpi2017/zero_nlp介绍本文，将介绍如何使用中文语料，训练一个gpt2可以使用你自己的数据训练，用来：写新闻、写古诗、写对联等我这里也训练了一个中文
yuanzhoulvpi·2023-04-07 10:10

AI学习笔记（十五）自然语言处理基本概念

目录AI学习笔记之自然语言处理自然语言处理(NaturalLanguageProcessing）自然语言简介自然语言处理的难点自然语言处理的现状基于深度学习的自然语言处理NLP的处理过程获取预料语料预处理特征工程模型训练
Lee森·2023-04-07 07:03

Wav2KWS: Transfer Learning From Speech Representations for Keyword Spotting(2021)

我们使用经过大规模语音语料库预训练的编码器作为骨干网络，然后
阿凡凡提·2023-04-07 01:11

无监督第五节：LDA (Latent Dirichlet Allocation算法细节)（主题模型）

LDA假设在语料库D中每个文档的生成过程如下：选择N∼Poisson(ξ).选择θ∼Dir(α).对于每个N单词:(a)选择一个主题∼Multinomial(θ).
数据小新手·2023-04-07 01:03

如何开发一个ChatGPT

要开发一个ChatGPT模型，您需要以下步骤：1.准备大量的聊天语料。这可以通过爬取网络上的聊天记录或使用现有的聊天数据集来完成。
weixin_42613017·2023-04-07 00:39

python 文本分析库_Python数据挖掘——文本分析

一、语料库（Corpus）语料库是我们要分析的所有文档的集合。二、中文分词2.1概念：中文分词（ChineseWordSegmentation）：将一个汉字序列切分成一个一个单独的词。
weixin_39611382·2023-04-06 19:13

【文本分析学习】Anaconda+pytorch虚拟环境下的pycharm文本分析（含分词、词性标注、词形归一化、停用词、文本情感分析、词频、文本相似度，附数据代码） NLTK

pycharm文本分析NLTK一、准备工作（一）Anaconda、pytorch、pycharm安装二、Pycharm解释器配置三、Pycharm中的文本分析下载基本的包（一）下载nltk、jieba（二）下载语料库
little_徐·2023-04-06 19:55

linux使用bash遍历多层文件结构

引言问题的起因是想要对语料进行数据处理，类似wikipedia的语料基本都是有多层文件结构，类似于text/GS/wiki_01，编写好了一个针对单一文件的处理程序后，需要对所有文件进行处理，不想用python
hangguns·2023-04-06 18:18

linux c brotli压缩简介

据谷歌研究，Brotli压缩速度同zlib的Deflate实现大致相同，而在Canterbury语料库上的压缩密度比LZMA和bzip2略大。
whatday·2023-04-06 17:40

GPT是如何工作的？应用场景有哪些？

预训练阶段，GPT利用大量未标注的语料（比如网上的文章、书籍、社交媒体等）来训练一个语言模型
技术小张zz·2023-04-06 17:19

D2

1.语料库C51～5加改错2.Friendidioms3.Movies三句4.听力漫威访谈5三国演义的15分钟
梦想奔现记·2023-04-06 09:21

如何利用Quizlet高效学英语

它的好处之一在于，可以自己建立语料库，背自己想背的，而不是固定的单词表。不过你也可以选择别人已经制作好的学习集。
ItsGrey·2023-04-06 02:41

【周复盘】1001番茄践行者–Day45

距离我的7月6号雅思考试还有13天历史的经验告诉我们，人们不会从历史的经验中吸取教训——全倾全力备战雅思今日3things【20个番茄】一、雅思听说读写阅读总纲判断题＋真经5判断题——【3个番茄】听力语料库第五
雪dou国·2023-04-05 19:43

ChatGPT应用

GPT通过大量的语料库训练，学习自然语言中的语法、语义和上下文信息，可以生
四季不变·2023-04-05 14:57

赶紧看看包装盒！｜Brochure Broker特辑：苹果充电器说明书Apple One-year Limited Warranty Summary

今天小刘就来给大家分享一下来自apple电源适配器保修总结的双语语料！图片来自苹果官网AppleOne-YearLimitedWarra
冷萃选手小刘·2023-04-05 13:02

下一代的新操作系统就是ChatGPT！

ChatGPT是人工智能研究实验室OpenAI在2022年11月30日推出的聊天机器人模型，它使用Transformer神经网络架构，训练数据来自包括维基百科，以及真实对话在内的庞大语料库。
偷拨网线的william·2023-04-05 00:53

2018年10月31日

明天就试试看中文语料的效果了，先拿我的微信公众号数据试一试，不行的话看看人民日报数据库？都比
真昼之月·2023-04-04 16:36

预训练语言模型（GPT，BERT）

文章目录GPT模型预训练语言模型模型和学习BERT模型去噪自编码器模型和学习模型特点References在自然语言处理中事先使用大规模语料学习基于Transformer等的语言模型，之后用于各种任务的学习和预测
如松茂矣·2023-04-04 04:32

emnlp论文阅读笔记 2021-04-12（未允禁转）

尽管语言模型通过在大量语料上预训练隐式地学习到了一定的知识，然而这种获取知识的方式没有显式利用知识库和知识图谱，较为低效融合外部知识增强模型推理能力的研究仅仅依靠独立的知识三元组。
9_SooHyun·2023-04-04 02:10

图嵌入前篇之词嵌入模型 Wrod2Vec

RandomWalk中要使用到的模型，因此先学习Word2Vec神经网络语言模型NNLM目标：根据给定的词序列，预测下一个会出现的词，如给定“他”，“是”，“一个”，预测下一个会出现的词的概率模型输入设定语料库中词的个数是
_LvP·2023-04-03 20:49

Chatgpt在训练过程中过拟合的表现和解决办法

ChatGPT是一个基于GPT-2模型的聊天机器人，它需要在大量的对话语料库上进行训练以获得有用的表现，在训练大模型（例如ChatGPT）时，随着训练集的增加，过拟合问题就可能出现。
roxxo·2023-04-03 15:04

达观数据CTO纪达麒:小标注数据量下自然语言处理实战经验

然而在实际工程应用中，最经常面临的挑战是我们往往很难有大量高质量的标注语料。“巧妇难为无米之炊”，在缺少语料的情况下，如何达到良好的NLP应用效果，是这些场景要落地所必须解决的问题。
weixin_ry5219775·2023-04-03 02:35

卷积神经网络CNN的文本分类原理和实战

在使用爬虫获取的语料
Viterbi·2023-04-02 23:47

2022-03-18

西周末年，有一个人叫史伯，他能预知西周的灭亡，原因就是周幽王去和而取同，周幽王不听取别人的意见，只喜欢听与自己相同的意见，于是史伯语料了周王朝的灭亡，于是有了“何实生物，同则不继”的伟大思想。
小橘酱吖·2023-04-02 21:10

chatgpt能否替代程序员？

此外，ChatGPT目前的能力也是受到语料库和算法等因素的限制的。因此，在需要进行复杂算法设计、优化和调试等任务的情况下，程序员仍然是必不可少的。当需要
DHG Bening·2023-04-02 09:48

预训练模型

目录一、BERT1、贡献1.1MLM任务1.2NSP任务2、实验细节二、ALBERT1、贡献1.1词向量分解1.2层参数共享1.3SOP任务三、ERNIE1、贡献2、实验细节2.1语料2.2MLM任务2.3DLM
hellozgy·2023-04-01 23:25

python自然语言处理入门教程（一）

它提供了易于使用的界面，以超过50语料库和词汇资源，如WordNet的，连同一套文字处理库进行分类，标记化，词干，标记，分析和语义推理，和活跃的论坛。
BjutHz·2023-04-01 23:24

pytorch 词性标注实战

首先加载词性标注语料库defload_treebank():fromnltk.corpusimporttreebank#sents存储全部经过标记化的句子#postags存储每个标记对应的词性标注结果sent
Icarus_·2023-04-01 23:12

微信小程序聊天语料收集平台技术总结

最近接了个项目要求要做微信小程序聊天的，似乎和实验室收集语料数据有关，这里对要用到的技术简单做个记录，主要怕自己忘记了。
Xpilgrim·2023-04-01 22:59

NLP进阶之（二）Chatbot评估指标

NLP进阶之（二）Chatbot评估指标1.基于检索模型1.1Ubuntu对话语料库1.2Baseline评估指标2.常规评价2.1BLEU（BilingualEvaluationUnderstudy）
Merlin17Crystal33·2023-04-01 19:22
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他