自然语言处理杂谈第11页

【自然语言处理】微调 Fine-Tuning 各种经典方法的概念汇总

【自然语言处理】微调Fine-Tuning各种经典方法的概念汇总前言请看此微调Fine-TuningSFT监督微调（SupervisedFine-Tuning）概念：监督学习，无监督学习，自监督学习，半监督学习

溢流眼泪·2024-02-07 07:11

飞桨自然语言处理框架 paddlenlp的 trainer

飞桨（PaddlePaddle）的NLP库PaddleNLP中的Trainer类是一个用于训练和评估模型的简单但功能完整的循环。它被优化用于与PaddleNLP一起使用。Trainer类简化了训练过程，提供了自动的批处理、模型保存、日志记录等特性。以下是Trainer类的主要参数和功能：模型：model：可以是一个预训练的模型或一个自定义的paddle.nn.Layer。如果使用自定义模型，它需要

路人与大师·2024-02-07 07:37

text-davinci 和ChatGPT3.5 区别

`text-davinci`适用于生成文本、回答问题、翻译和类似的自然语言处理任务。-`ChatGPT3.5`是在GPT

su317·2024-02-07 06:48

所谓“天道”，是天地万物永恒之道，更是天下子民赤诚之心

是非清浊，不在天下悠悠之口、不在后世野史杂谈，而在人心。”*他点头：“人心不足，往往欲壑难填。天灾人祸暂且不论，只算古往今来所谓'盟国'者，因分赃不均以致兵戎相见，进而国破家亡的先例，数不胜数。

一壹木一·2024-02-07 06:52

今日杂谈

今天，寒气来袭，气温骤降，太阳也躲起来了，整个天空阴沉沉的，好像随时要下雨。风也大了，早操时，耳边是呼呼的响声，同学们在风中瑟瑟发抖，也许，这才是冬天该有的样子。早上感冒还没好，喉咙干，好像堵了什么东西，吃了一包感冒药，心想着要是能请假该多好啊。可是一到办公室，就开始投入工作，马上叫了四位同学来完成“宪法小卫士”，又带操。今天周一，我们班又拿到了流动红旗，其实要一周里面每天都保持好的纪律，好的卫生

卡卡002·2024-02-07 05:33

【计算机视觉】浅谈计算机视觉中的Transformer

典型实验典型实验详解：实验目的：实验设置：数据集：模型配置：训练策略：评估指标：实验过程：数据预处理：模型训练：模型验证：实验结果与分析：4.关键代码实现5.总结：摘要：随着深度学习的发展，Transformer模型在自然语言处理领域取得了巨大成功

沐风—云端行者·2024-02-07 05:43

NLP自然语言处理-第一章NLP基础

第一章NLP基础在本章你将学到NLP（自然语言处理）相关的基础知识。

Viterbi·2024-02-06 21:38

机器学习概述及流程

三、人工智能主要分支1、计算机视觉（CV）2、自然语言处理（NLP）：文本挖掘/分类、机器翻译、语音识别3、机器人四、机器学习工作流程简介从数据中自动分析获得模型，再利用模型对未知数据进行预测。

机智的冷露·2024-02-06 19:36

机器学习简要概述

机器学习+数据库=数据挖掘+工业应用=模式识别+图像处理=机器视觉+语音处理=语音识别+文本处理=自然语言处理二、数据集及模型数据集的划分：方法：

@Duang~·2024-02-06 19:03

大白话介绍循环神经网络

循环神经网络实质为递归式的网络，它在处理时序任务表现出优良的效果，毕竟递归本来就是一步套一步的向下进行，而自然语言处理任务中涉及的文本天然满足这种时序性，比如我们写字就是从左到右一步步来的鸭，刚接触深度学习的友友们

浅白Coder·2024-02-06 17:23

PyTorch（超详细）部署与激活举起Python火炬，点亮智慧人生【Windows版】

自然语言处理：机器翻译、文本分类、情感分析、问答系统等。语音处理：语音识别、语音合成、说话人识别等。生

心安成长·2024-02-06 14:04

[自然语言处理|NLP] 文本分类与情感分析，数据预处理流程，包括了同义词替换和拼写纠正，以及使用NLTK库和TextBlob库进行标记化和情感分析（附代码）

[自然语言处理|NLP]文本分类与情感分析，数据预处理流程，包括了同义词替换和拼写纠正，以及使用NLTK库和TextBlob库进行标记化和情感分析（附代码）。

代码讲故事·2024-02-06 12:30

土人杂谈之整理近年文章

今天晚上，土人按照自己七天前（12月13日）的议程设置：长篇小说《不惑》、健身专著《健身道》、跑步随笔集《快乐奔跑》、时评杂文集《自以为是》还有今天的健身随笔集《一个健身教练的人文笔记》等，把电脑里近几年的文章分类归位，后面三者应有150篇以上，整理提升一下，争取明年向建党一百周年献礼！

土人爱腹肌·2024-02-06 10:02

NLP_Bag-Of-Words(词袋模型)

文章目录词袋模型用词袋模型计算文本相似度1.构建实验语料库2.给句子分词3.创建词汇表4.生成词袋表示5.计算余弦相似度6.可视化余弦相似度词袋模型小结词袋模型词袋模型是一种简单的文本表示方法，也是自然语言处理的一个经典模型

you_are_my_sunshine*·2024-02-06 10:48

利用Bert模型进行命名实体识别

自然语言的表示之所以之前自然语言处理的发展没有达到CV领域，很大一部分原因是很难把抽象的语言用准确的数学方式表示。

刘单纯·2024-02-06 08:36

自然语言处理 | (13)kenLM统计语言模型构建与应用

本篇博客中我们将学习如何使用KenLM工具构建统计语言模型，并使用它完成一个典型的'智能纠错'文本任务。目录1.实验准备2.训练数据3.训练语言模型4.模型压缩5.模型加载6.智能纠错1.实验准备安装依赖#安装依赖!aptinstalllibboost-all-dev!aptinstalllibbz2-dev!aptinstalllibeigen3-dev下载KenLM并编译#下载kenlm压缩包

CoreJT·2024-02-06 07:21

星辰杂谈*养成学习的习惯/似此星辰同昨日～随笔（五）

文l仙派狼王*星辰原创学习是一件长久的事情。以前，只是知道在学校里面，要努力学习，自己是很勤奋的人。每天，除了在校队的训练时间，我对自己的学习，抓的还是比较紧的，要求也比较高，是图书馆的常客。参加工作之后，专业不对口。工作上，什么都不懂，带我的老师傅真的很好。现实的社会，给我上了一课。本以为不需要再读书的我，重新拿起了书本。找教材，找资料，在社会这所大学里，重新拿起了书本，又当起了学生。从此以后，

似此星辰同昨日·2024-02-06 07:12

【机器学习与自然语言处理】预训练 Pre-Training 各种经典方法的概念汇总

【NLP概念合集：一】预训练Pre-Training，微调Fine-Tuning及其方法的概念区别前言请看此正文预训练Pre-Training无监督学习unsupervisedlearning概念：标签PCA主成分分析（PrincipalComponentAnalysis）降维算法LSA潜在语义分析（LatentSemanticAnalysis）降维算法LDA隐含狄利克雷分布（LatentDiri

溢流眼泪·2024-02-06 07:18

深度学习驱动下的自然语言处理进展及其应用前景

文章目录每日一句正能量前言技术进步应用场景挑战与前景自然语言处理技术当前面临的挑战未来的发展趋势和前景伦理和社会影响实践经验后记每日一句正能量一个人若想拥有聪明才智，便需要不断地学习积累。

想你依然心痛·2024-02-06 07:46

【NLP】 Word2Vec模型 & Doc2Vec模型

共同学习交流个人主页－Sonhhxg_柒的博客_CSDN博客欢迎各位→点赞+收藏⭐️+留言系列专栏-机器学习【ML】自然语言处理【NLP】深度学习【DL】foreword✔说明⇢本人讲解主要包括Python

Sonhhxg_柒·2024-02-06 07:15

巜珠峰杂谈》

时隔78年，中国人民、亚洲人民以及世界人民的第二次抗日战争又正式开始了！这次抗日战争不同以往的抗日战争是日本这次的侵略并非使用飞机大炮坦克等暴力军事侵略，而是使用不顾中国人民及全世界人民的反对公然向大海排放核污染水从而侵害中国人民、亚洲人民以及全世界人民的一种非暴力行径的侵略！显然，这次对中国人民、亚洲人民以及全世界人民的侵略比以往的侵略来得更加的猛烈、更加的恐怖、更加的灾难深重！因为这种核污染水

13e9e7b99bd8·2024-02-06 06:13

郎官弟？皇帝师？

追寻家谱的起因(2010-06-0121:29:51)[编辑][删除]标签：杂谈5月17日，我从杭州学习回来，内容是关于史志方面的，从18日开始，我特别想知道祖先的情况，这是一种很奇特的不自觉、不自知、

摩肩接踵·2024-02-06 05:13

Plus GPT API最有前途的应用领域

GPT-3API是由OpenAI开发的一种自然语言处理技术，它是当前最先进的语言模型之一。

橘子海_G·2024-02-06 05:45

鲁西南方言杂谈-树栽子

我们中华民族自古就有＂爱树、育树＂的传统，有了树，才会有和谐美丽的大自然；有了树，才有清爽、新鲜的空气；有了树，才会给后代留一笔财富。如唐朝诗人于鹄《种树》诗云“一树新栽益四邻，野夫如到旧山春。树成多是人先老，垂白看他攀折人”，就将种树情形描写得比较生动。包括我在内的鲁西南人，自古勤厉、爱植树，如今你可以到该地区走一走，看一看，到处都是绿树成荫，充满生机灵气。那么，你知道鲁西南方言里，将植树的“树

一两茶叶·2024-02-06 02:27

深度学习系列57: 清华大模型MiniCPM上手

MiniCPM是面壁智能与清华大学自然语言处理实验室共同开源的系列端侧大模型，主体语言模型MiniCPM-2B仅有24亿（2.4B）的非词嵌入参数量1.上手对比测试mps比cpu大概快了9倍左右。

IE06·2024-02-06 02:53

自然语言处理中所有任务的概括

简介：自然语言处理（NaturalLanguageProcessing，NLP）是人工智能领域中的一个重要分支，致力于让计算机能够理解、解释、处理人类语言。

茫茫人海一粒沙·2024-02-06 02:04

今日arXiv最热NLP大模型论文：微软提出SliceGPT，删除25%模型参数，性能几乎无损

引言：探索大型语言模型的高效压缩方法随着大型语言模型（LLMs）在自然语言处理领域的广泛应用，它们对计算和内存资源的巨大需求成为了一个不容忽视的问题。

夕小瑶·2024-02-06 01:56

自然语言处理中的深度学习

教材选用《动手学深度学习》，李沐等著；词嵌⼊（word2vec）⾃然语⾔是⼀套⽤来表达含义的复杂系统。把词映射为实数域向量的技术也叫词嵌⼊（wordembedding）。近年来，词嵌⼊已逐渐成为⾃然语⾔处理的基础知识。Word2vec⼯具包含了两个模型：跳字模型（skip-gram）和连续词袋模型（continuousbagofwords，简称CBOW）。跳字模型假设基于中⼼词来⽣成背景词，连续词

qiufeng1ye·2024-02-06 01:37

EMNLP 2023精选：Text-to-SQL任务的前沿进展（上篇）——正会论文解读

导语本文记录了今年的自然语言处理国际顶级会议EMNLP2023中接收的所有与Text-to-SQL相关（通过搜索标题关键词查找得到，可能不全）的论文，共计12篇，包含5篇正会论文和7篇Findings论文

Q同学的nlp笔记·2024-02-05 21:49

Python-Flair 实现英文命名实体识别(NER)

Flair是由ZalandoResearch开发的一个简单的自然语言处理（NLP）库。Flair的框架直接构建在PyTorch上，PyTorch是最好的深度学习框架之一。

小小晓晓阳·2024-02-05 20:36

《夜市听邻桌杂谈有感》

月上枝头梦初始，灯红酒绿方入市；邻桌嘈嘈错杂谈，侧耳倾听这世间；举杯摇头独自饮，谁家少本难念经；斗米折腰平常事，直教梦里寻初心。

欠你一首诗·2024-02-05 19:17

2022-04-03

自然语言处理实验演示-21.文本翻译从一种语言到另一种语言的文本翻译在各种网站中越来越普遍。我们可以通过各种工具库执行此操作。当然，大部分在线翻译引擎都会有次数或者收费等限制。

跨象乘云·2024-02-05 19:57

NLP自然语言处理

随着人工智能的飞速发展，自然语言处理（NaturalLanguageProcessing，简称NLP）已经成为了AI领域的一颗璀璨明珠。

AI论道·2024-02-05 17:59

[技术杂谈]如何下载vscode历史版本

网站模板：https://code.visualstudio.com/updates/v1_85如果你想下载1.84系列可以访问https://code.visualstudio.com/updates/v1_84然后看到：选择对应版本下载即可，我是windowsx64系统选择x64即可开始下载

FL1623863129·2024-02-05 16:51

故乡胙城的庙会

故乡胙城的庙会(2011-05-0622:29:25)[编辑][删除]转载▼标签：杂谈分类：光影世界我的故乡在延津胙城，胙城为原胙城县治所，有华严寺、城隍庙，每年农历四月初四都举行庙会，相沿成俗，历史悠久

晴鹤563·2024-02-05 16:20

氾胜之-鲁西南方言杂谈之人物

一种氾胜之画像氾胜之，正史中没有他的传，古籍中有关他的事迹的记载也寥寥无几。他是西汉末年人，《汉书·艺文志》注说他在汉成帝时当过议郎。祖籍在山东泛水（今山东菏泽市曹县）一带。《广韵》云卷二凡第二十九载，氾姓“出敦煌、济北二望。皇甫谧云:'本姓凡氏，遭秦乱，避地于泛水，因改焉。汉有氾胜之，撰书言种植之事，子辑为敦煌太守，子孙因家焉”。《汉书·艺文志》颜师在注引刘向《别录》云，成帝时使氾“致用三辅，有

一两茶叶·2024-02-05 16:17

经典论文介绍：GPT的由来，Improving Language Understanding by Generative Pre-Training

《ImprovingLanguageUnderstandingbyGenerativePre-Training》是谷歌AI研究团队在2018年提出的一篇论文，作者提出了一种新的基于生成式预训练的自然语言处理方法

才能我浪费·2024-02-05 15:47

军训杂谈——桂奇峰

这是一段很特别日子，以前看到过一句话:你生命中出现的很多人只是为了给你上一课，再匆匆离开。我们还会再见，军训这段日子很特别我也不会忘记，很感谢你们。我就很直白的说一下我自身的一个感受。【关于责任】我很怕麻烦别人，当看到组长因为我们的过错而受罚时我很难受。项目规定第五轮的最后一名将会直接销毁队旗拆散队伍，很不安，很害怕这种形式的比赛，特别是在第一轮我们组得了最后一名组长做了20个俯卧撑之后。但社会这

桂奇峰·2024-02-05 14:11

第七章朴素贝叶斯机器学习

朴素贝叶斯是一组功能强大且易于训练的分类器，它使用贝叶斯定理来确定给定一组条件的结果的概率，“朴素”的含义是指所给定的条件都能独立存在和发生.朴素贝叶斯是多用途分类器，能在很多不同的情景下找到它的应用，例如垃圾邮件过滤、自然语言处理等

颜大哦·2024-02-05 14:32

LLaMA 模型和DeepSpeed 框架联系与使用

它设计用于理解和生成自然语言文本，支持多种语言，并且能够执行多种自然语言处理任务。LLaMA模型因其开源特性、优异的性能和广泛的适用性而受到关注。

samoyan·2024-02-05 13:28

清华系2B模型杀出，性能吊打LLaMA-13B

2月1日，面壁智能与清华大学自然语言处理实验室共同开源了系列端侧语言大模型MiniCPM，主体语言模型MiniCPM-2B仅有24亿（2.4B）的非词嵌入参数量。

智慧医疗探索者·2024-02-05 13:28

Python中对于开发项目的个人感想杂谈

在遇到一个项目之前呢，需要做以下步骤1，分析项目需要完成那些功能需求2，抽象出模型，写到models，基于model中的对象，分析有哪些属性，写到__init__方法中，需要打印某些对象的信息的时候，可以写在__str__，某些不依赖于具体实例的方法，如查看新建了多少个实例，可以写为如下：classBaseModel:defsave(self):"""使用pickle将用户对象保存到文件:retu

软件测试老痞·2024-02-05 12:25

每日荐书员/《汪曾祺的写作课》：汪曾祺毕生阅读心得与写作经验

本书精选了汪曾祺关于阅读与写作的文章35篇，包括对阅读的经验之谈，如《开卷有益》《谈读杂书》《读廉价书》等；对技巧的精确提炼，如《思想·语言·结构》《小说技巧常谈》《文学语言杂谈》；对创作的深刻感悟，如

李廿·2024-02-05 12:38

第二十二回横海郡柴进留宾景阳冈武松打虎-大模型ChatGLM2-6B新手速通

人工智能涵盖了多个领域，如语音识别、图像识别、自然语言处理等。当前最流行的人

skywalk8163·2024-02-05 12:32

ChatGPT高效提问—基础知识（NLP）

ChatGPT高效提问—基础知识（NLP）自然语言处理（NatureLanguageProcessing,NLP）是计算机科学和人工智能领域的一个重要分支，旨在使计算机能够自动处理、理解和生成人类语言。

Bruce_Liuxiaowei·2024-02-05 11:43

【PyTorch][chapter 14][李宏毅深度学习][Word Embedding]

前言：这是用于自然语言处理中数据降维的一种方案。

明朝百晓生·2024-02-05 11:06

NLP入门系列—词嵌入 Word embedding

NLP入门系列—词嵌入Wordembedding2013年，Word2Vec横空出世，自然语言处理领域各项任务效果均得到极大提升。

不二人生·2024-02-05 10:54

自然语言处理从零到入门分词

自然语言处理从零到入门分词–Tokenization一、什么是分词？二、为什么要分词？

BlackStar_L·2024-02-05 09:24

【NLP入门教程】二、分词

分词（Tokenization）是自然语言处理的基本步骤之一，它将文本拆分成更小的组成部分，如单词、短语或符号等。这些拆分后的组成部分称为“词元”（Token）。

晨星同行·2024-02-05 09:21

人工智能：破局与创新的较量，谁将主宰未来？

这使得数据驱动的AI技术取得了突破性进展，尤其是在计算机视觉、自然语言处理等领域。1.2深度学习与神经网络的创新深度学习作为AI的核心技术之一，其基于神经网络的算法在近年来得到了快速发展。

猫之角·2024-02-05 09:14

推荐频道

自然语言处理杂谈