nlp学习之路

自然语言处理入门：使用Python和NLTK进行文本预处理

文章标题：自然语言处理入门：使用Python和NLTK进行文本预处理简介自然语言处理（NLP）是人工智能领域的一个重要分支，它致力于使计算机能够理解、分析和生成人类语言。
Evaporator Core·2024-02-19 19:29

NLP-词袋模型

词袋模型是自然语言处理中常用的一种文本表示方法，用于将文本转换为数值型向量，以便于计算机进行处理和分析。在词袋模型中，文本被看作是一个由词语组成的集合，而每个词语都是独立的，不考虑它们在文本中的顺序和语境关系。因此，词袋模型将文本表示为一个固定长度的向量，其中每个维度对应一个词语，该维度的值表示该词语在文本中出现的频次或者其他统计量。具体来说，词袋模型包括以下步骤：分词：将文本按照一定的规则或算法
草明·2024-02-19 19:58

NLP_自然语言处理项目(2)：seq2seq_attention_机器翻译（基于PyTorch）

1、seq2seq_attention_机器翻译seq2seq_attention是一种基于神经网络的机器翻译模型，它通过编码器和解码器两个部分实现翻译功能。编码器将源语言句子转换为一个固定长度的向量表示，解码器则将这个向量作为输入，生成目标语言句子的翻译结果。在seq2seq_attention中，编码器和解码器都是由循环神经网络（RNN）组成的。编码器将源语言句子中的每个单词依次输入RNN，每
@硬train一发·2024-02-19 18:56

剽悍一只猫的剽悍行动营——我的二十二天学习之路

作者：原来如此我就是这么幸运，有幸知道有行动营这个社群，并且幸运的加入了这个社群。在一个正确的时间，认识了一群有正能量的人，学习了很多正能量的知识。我是一个赋闲在家十年的人;我是一个全职的家庭主妇;我是一个没有高学历的人;我是一个没有特长的人;我是一个与社会脱节的人……但就是这样的我，有幸通过朋友加入行动营。每天除了接送孩子做家务，刷刷朋友圈，追剧，这就是你想要的生活吗？你的以后后也要这样度过吗？
娜一姐·2024-02-19 18:55

如何使用 MongoDB 构建采用 AI 技术的应用程序

这可以包括机器学习（ML）、深度学习（DL）、自然语言处理（NLP）等。确定您需要收集和处理的数据类型以及这些数据如何支持AI模型。设计数据模型：根据AI模型的需求设计MongoDB的数据模型。
数字化信息化智能化解决方案·2024-02-19 16:03

深度学习的应用实例

自然语言处理（NLP）情感分析：深度学习模型如循环神经网络（RNN）和Transformer等已被广泛用于情感分析任务，例如识别文本中的情感倾向或情感类别。
数字化信息化智能化解决方案·2024-02-19 16:27

今日arXiv最热NLP大模型论文：上海AI Lab联合清华发布十项全能数学大模型InternLM-Math

数学推理能力是大语言模型（LLMs）抽象推理能力的一个重要体现。近年来，随着深度学习技术的不断进步，LLMs在数学推理任务上取得了显著的进展。从小学级别到高中级别的数学问题，通过链式推理（chain-of-thoughtreasoning）或程序式推理（program-of-thoughtreasoning），LLMs展现出了解决数学问题的潜力。这些模型的构建需要在数学语料上进行预训练，并在数学问
夕小瑶·2024-02-19 16:56

今日Arxiv最热大模型论文：大语言模型真的理解上下文了吗？新研究揭示惊人发现

探索大型语言模型的上下文理解能力在自然语言处理（NaturalLanguageProcessing,NLP）领域，理解上下文是把握人类语言的关键。
夕小瑶·2024-02-19 16:55

上海NLP执行师课程（第四天）学习收获

今天是学习的第四天了。每天都有很多收获，今天也不例外。上午应老师讲的信念形成的三个阶段，对我很有触动。0一7岁是印记期，这个阶段的孩子全然开放，对外来的信息全然接受。基于这一点家长和幼儿园的老师对孩子的教育就有太多的地方值得反思。8一13岁是模伤期，14一21岁是社交期。通过应老师的讲解，我知道了在这三个阶段教育孩子的方法和注意事项。更懂得了作为中学教师要怎样去理解孩子和对待孩子。下午，危娜老师带
那兰提花1·2024-02-19 16:39

神经网络算法 —— Embedding（嵌入）！！

文章目录前言1、Embedding的本质（1）机器学习中的Embedding（2）NLP中的Embedding2、Embedding的原理（1）ImageEmbedding（图像嵌入）（2）WordEmbedding
JOYCE_Leo16·2024-02-19 15:15

NLP课程学习017

今天2021年4月27日【学习内容】42，舒缓情绪的技巧43，保险箱技术【我的收获】情绪是我们的本能，也是能量。1.舒缓情绪的技巧：觉察-舒缓-表达-转化-运用。舒缓情绪的方法：深呼吸（我们忘了呼吸就会失去智慧）；混合法（集中注意力）；生理平衡法（放松，抚平情绪）运用身体的能量，用身体接触，调和身体能量，让情绪平和下来，多做一些身体能量，多拥抱自己。【我可以这样用】在孩子哭闹时我们经常会产生情绪，
贝字旁的赚·2024-02-19 14:53

【自然语言处理】:实验4布置，预训练语言模型实现与应用

清华大学驭风计划因为篇幅原因实验答案分开上传，自然语言处理专栏持续更新中，期待的小伙伴敬请关注有任何疑问或者问题，也欢迎私信博主，大家可以相互讨论交流哟~~案例简介2018年，Google提出了预训练语言模型BERT，该模型在各种NLP
X.AI666·2024-02-19 13:38

一起走的学习之路(294)

数据化思维之前国庆的时候我想大家都听说了我们可能会和周林一起接一个门面。由于是大投资，所以我们都比较慎重，说实话，这个门面在我们看来，并不太好，但是周林他们却觉得不错。因此，这几天方同学就一直在研究这个店铺的科学性。今天，他就在群里一直发一串数字，刚开始我并不知道这是什么意思，结果后来他解释了一下，是同一时段新门面费门口人流量，周围店铺客人，新门面客人，以及我们现在这个店铺的客人。然后对比了好多个
小米雨路·2024-02-19 13:35

NLP_GPT生成式自回归模型

文章目录介绍完整代码小结介绍自回归(Autoregressive)是自然语言处理模型的一种训练方法，其核心思想是基于已有的序列(词或字符)来预测下一个元素。在GPT中，这意味着模型会根据给定的上文来生成下一个词，如图所示。在GPT模型的训练和推理这两个相互独立的过程中，“自回归”的含义是不同的。训练过程中的“自回归”:在训练阶段，GPT通过大量文本数据进行学习。模型会接收一个词序列作为输入，然后预
you_are_my_sunshine*·2024-02-19 12:32

关于VIT（Vision Transformer）的架构记录

这种刻意简化的设置的一个优势是，可扩展的NLPTransformer架构及其高效的实现几乎可以即插即用。图：模型概述。
一条小小yu·2024-02-19 12:53

NLP_BERT与GPT争锋

文章目录介绍小结介绍在开始训练GPT之前，我们先比较一下BERT和GPT这两种基于Transformer的预训练模型结构，找出它们的异同。Transformer架构被提出后不久，一大批基于这个架构的预训练模型就如雨后春笋般地出现了。其中最重要、影响最深远的两个预训练模型当然就是GPT和BERT这两个模型。在ChatGPT震惊世界之前，在自然语言处理领域影响最大的预训练模型是BERT，很多科研工作都
you_are_my_sunshine*·2024-02-19 12:13

如何使用Python进行自然语言处理

自然语言处理（NLP）是人工智能领域中一个非常重要的技术，它涉及到计算机对人类语言的理解和处理。
程序员～小强·2024-02-15 10:57

Day276 父母是孩子最好的催眠师

【温柔能量妈】NLP三阶第一天学习，潜意识是宝藏，里面有无穷的潜能未激发。潜意识有什么，我们的世界有什么，潜意识不分辨正面负面语言，它是照单全收。
李春华_7db6·2024-02-15 10:35

NLP_ChatGPT的RLHF实战

文章目录介绍小结介绍ChatGPT之所以成为ChatGPT，基于人类反馈的强化学习是其中重要的一环。而ChatGPT的训练工程称得上是复杂而又神秘的，迄今为止，OpenAl也没有开源它的训练及调优的细节。从OpenAl已经公开的一部分信息推知，ChatGPT的训练主要由三个步骤组成，如下图所示。原文：译文：第1步，先使用大量数据(从Prompt数据库中抽样)通过监督学习在预训练的GPT-3.5基础
you_are_my_sunshine*·2024-02-15 09:41

NLP快速入门

NLP入门课程链接：https://www.bilibili.com/video/BV17K4y1W7yb/?
Knoka705·2024-02-15 09:10

NLP_GPT到ChatGPT

GPT在多种NLP任务上取得了显著进步。GPT-2：2019年，OpenAI推出了GPT的升级版，拥有更多参数[15亿
you_are_my_sunshine*·2024-02-15 09:39

【AI视野·今日NLP 自然语言处理论文速览 第七十八期】Wed, 17 Jan 2024

AI视野·今日CS.NLP自然语言处理论文速览Wed,17Jan2024(showingfirst100of163entries)Totally100papers上期速览✈更多精彩请移步主页DailyComputationandLanguagePapersDeductiveClosureTrainingofLanguageModelsforCoherence
hitrjj·2024-02-15 09:57

Prompt Tuning：深度解读一种新的微调范式

面向不同种类NLP任务，prompt如何选择和设计？面向超大规模模型，如何借助prompt进行参数有效性训练？面向GPT3，什么是In-ContextLearning？什么是Chain-Of-
lichunericli·2024-02-15 09:55

时间是画面

图片发自App上海NLP专业执行师第三天，时间即是画面，每分每秒呈现不同的画面，说一说今天印象最深的几幅。
感恩生命中有你·2024-02-15 09:57

word embedding是什么，word embedding之前需要做什么？

从自然语言的角度看，NLP可以大致分为自然语言处理和自然语言生成这两部分，就是理解文本和文本生成。
liaolaa·2024-02-15 08:43

java实现beamsearch_beam search原理以及在NLP中应用

BeamSearch简介一、概要传统的广度优先策略能够找到最优的路径，但是在搜索空间非常大的情况下，内存占用是指数级增长，很容易造成内存溢出，因此提出了beamsearch的算法。beamsearch尝试在广度优先基础上进行进行搜索空间的优化(类似于剪枝)达到减少内存消耗的目的。二、BeamSearch算法新的概念为了达到搜索的目的，beamsearch引入了启发函数的概念(h)来估计从当前节点到
知乎汽车·2024-02-15 08:13

【AI视野·今日NLP 自然语言处理论文速览 第七十九期】Thu, 18 Jan 2024

AI视野·今日CS.NLP自然语言处理论文速览Thu,18Jan2024Totally35papers上期速览✈更多精彩请移步主页DailyComputationandLanguagePapersDecipheringTextualAuthenticity
hitrjj·2024-02-15 06:17

NLP 人生三件事

人生里的很多困扰并不是因为事件，而是我们没有区分清楚事情里面的边界，我们把很多事件揉在一起，就会变得乱，纠缠，从而让自己活得很累。人生三件事：1.自己的事:只能自己去做，对自己的人生负责任，自己的事情全力以赴，不把自己人生的钥匙交给他人。2.别人的事:一个人不能改变另一个人，尊重他人的选择，放下对他人的期待3.老天的事：臣服，尊重，顺势而为例：你开心了我就开心你关心我我心情就好这是一种托付心态，把
YOKI陶·2024-02-15 05:30

NLP4

限制性信念潜意识我的收获：我有很多时候会感到无助，无望，无资格或者叫无价值感，比如曾经有一次自己想卖东西，结果没人买，被拒绝，当时只觉得好没面子，原来以为别人也会像我一样热衷，结果没有人捧场，被拒绝了一次，我就再也没骨气第二次的勇气，可能是我小时候被这样拒绝了太多次，那种身体里的感觉太深刻，所以再一次体验，就陷在里面出不来了，全是羞耻，恐惧，就更不会去想一想，也许有人需要呢？也许有人跟我一样看好这
素月分辉·2024-02-15 05:44

这是属于2020年的第一篇：疫情带给我的思考

这是“精进学习之路”第1篇原创文章，阅读大约需3分钟。大家好，我是精进学习之路（微信公众号）。今天我正式的第一篇文章。我到底要做什么呢？这要从2020年春节说起。
麦小麦兜兜不住·2024-02-15 05:18

闲聊自然语言处理NLP

原文链接无论在工程界还是学术界自然语言处理(NLP)一直是一个比较热的话题，尤其随着近些年深度学习的发展给NLP也带来一些新思路。对于这个话题随便聊聊，想到哪写到哪。
热血沸腾·2024-02-15 04:25

PaddleNLP 自然语言处理 知识图谱 uie-x-base,uie-m-large,uie-m-base模型使用时，报错Out of memory error on GPU 0 gpu内存不够

Hi,I’m@货又星I’minterestedin…I’mcurrentlylearning…️I’mlookingtocollaborateon…Howtoreachme…README目录（持续更新中）各种错误处理、爬虫实战及模板、百度智能云人脸识别、计算机视觉深度学习CNN图像识别与分类、PaddlePaddle自然语言处理知识图谱、GitHub、运维…WeChat：1297767084Git
货又星·2024-02-15 04:42

对话系统 | (6) 医疗健康领域的短文本理解

主要内容包括：丁香园主要的业务和所服务的对象，以及在垂直领域下NLP工作可能需要面对的挑战在医疗健康领域短文本理解上的尝试结合工
CoreJT·2024-02-15 04:08

一起走的学习之路(四十八)

很多事情为什么做不好，因为大多数时候他们真的不是我们的刚需。你说我们想要找更多的钱，想要财富自由，但似乎不管怎样，我们依旧不会饿死，基本的生活仍然可以保证，于是想更多方法赚更多钱就不是那么刚需，所以我们常常就更多的是想想。回想一下，我每次做成功的事似乎都因为那件事是刚需。以前每到期末就会很认真的复习，因为期末考试成绩直接影响着奖学金或是寒暑假的质量。为什么大学毕业考公务员和有了工作参加公务员考试是
小米雨路·2024-02-15 03:09

nlp成长

这次写不出东西了，但是我知道我一直在坚持，我学会了坚持，坚持快乐，坚持nlp的核心理念我的人生是成功快乐的
宁静致远2009·2024-02-15 02:15

今日arXiv最热NLP大模型论文：清华提出LongAlign，打破长上下文对齐瓶颈，数据、训练策略、评估基准一网打尽

随着LLMs的发展，其支持的上下文长度越来越长。仅一年时间，GPT-4就从一开始的4K、8K拓展到了128k。128k什么概念？相当于一本300页厚的书。这是当初只支持512个tokens的BERT时代不敢想象的事情。随着上下文窗口长度的增加，可以提供更丰富的语义信息，从而减少LLM的出错率和“幻觉”发生的可能性，提升用户体验。但现有的构建长上下文LLMs的工作主要集中在上下文扩展方面，即位置编码
夕小瑶·2024-02-15 02:27

今日arXiv最热NLP大模型论文：智能谈判Agent综述，一文读懂谈判桌上的人工智能

谈判，就是大家坐下来聊聊，看怎么能达成共识，共同解决问题。可以是朋友间的闲聊，也可以是国与国之间的外交场合。但谈判这事儿，说简单也不简单。人们往往会带着偏见和情绪，忽略了别人的好建议，导致结果不尽如人意。而且，谈判也是门技术活，不是谁都能轻易搞定的。为了促进人类谈判过程，研究者们提出了智能谈判Agent，能够在多轮互动中辅助人类甚至直接与人类进行谈判。一个典型的谈判对话涉及到Agent和人类之间的
夕小瑶·2024-02-15 02:27

今日arXiv最热NLP大模型论文：基于语言模型模拟的经济学研究

引言：经济选择预测的新视角在经济决策的预测领域，传统方法通常受限于获取人类选择数据的难度。实验经济学研究大多集中在简单的选择设置上，而这些设置往往无法捕捉复杂的人类行为。近年来，人工智能社区通过两种方式为这一领域做出了贡献：一是探讨大型语言模型（LLMs）是否能在简单的选择预测设置中替代人类；二是通过机器学习（ML）的视角研究更复杂的实验经济学设置，这些设置涉及不完全信息、重复游戏和自然语言交流，
夕小瑶·2024-02-15 02:26

今日arXiv最热NLP大模型论文：大语言模型为什么始终会产生幻觉

随着LLMs的广泛应用，幻觉问题引起了越来越多的安全和道德关注，各种各样的幻觉缓解方法也层出不穷，比如各类知识增强方法、对模型答案进行验证、新的评估基准等。相信大家会和我一样有一个疑问：幻觉问题有望被彻底解决吗？今天介绍的这篇文章很特别，它没有具体讨论缓解幻觉的方法，而是通过对幻觉问题进行明确定义和形式化分析，对幻觉精确讨论与验证实验，最终得出了一个基本结果：即无论模型架构、学习算法、提示技术或训
夕小瑶·2024-02-15 02:56

今日arXiv最热NLP大模型论文：无需数据集，大模型可通过强化学习与实体环境高效对齐 | ICLR2024

引言：将大型语言模型与环境对齐的挑战虽然大语言模型（LLMs）在自然语言生成、理解等多项任务中取得了显著成就，但是在面对看起来简单的决策任务时，却常常表现不佳。这个问题的主要原因是大语言模型内嵌的知识与实际环境之间存在不对齐的问题。相比之下，强化学习（RL）能够通过试错的方法从零开始学习策略，从而确保内部嵌入知识与环境的对齐。但是，怎样将先验知识高效地融入这样的学习过程是一大挑战，为了解决这一差距
夕小瑶·2024-02-15 02:56

AllenAI 开源了关于大模型的所有细节！数据、代码、参数、训练过程，完全复现

开篇：OLMo的诞生与开放模型的重要性在人工智能领域，语言模型（LMs）的发展一直是推动自然语言处理（NLP）技术进步的核心力量。
夕小瑶·2024-02-15 02:56

NLP学习-05.问答系统基础-文本表示(word representation)-距离计算

上几节已经介绍了文本的分词,拼写纠错,这节介绍wordrepresentation和距离的计算都比较简单,不做详细说明.什么是wordrepresentation即将一个文本进行向量化,这样可以容易地进行距离的度量.有哪些方法进行文本向量化onehot:每个词都用onehot变化表示成稀疏向量;booleanrepresentation:即词典的长度为向量长度,有词的记为1;booleanrepr
logi·2024-02-15 01:35

【GRU回归预测】开普勒算法优化多头注意力机制卷积神经网络结合门控循环单元KOA-MultiAttention-CNN-GRU数据预测（多输入单输出）【含Matlab源码 3772期】

个人主页：海神之光代码获取方式：海神之光Matlab王者学习之路—代码获取方式⛳️座右铭：行百里者，半于九十。
Matlab领域·2024-02-14 23:18

ApacheCN 交流社区热点汇总 2019.3

出国留学-微信讨论组自然语言处理（NLP）学习路线【每日一问】ID3、C4.5、C5.0和CART有什么联系、区别和优劣？【每日一问】假设模型准确率接近的情况下，模型融合越多越好吗？
布客飞龙·2024-02-14 21:40

20201110-NLP的巨人肩膀-1引子

转载：https://zhuanlan.zhihu.com/p/50443871没办法，写的太好了图片.pngNLP的巨人肩膀我们都知道，牛顿说过一句名言IfIhaveseenfurther,itisbystandingontheshouldersofgiants
野山羊骑士·2024-02-14 20:54

手动下载spacy的en_core_web_sm模型

https://github.com/explosion/spacy-models/releases例子代码importspacynlp=spacy.load("your/base/path/en_core_web
茫茫人海一粒沙·2024-02-14 19:08

我的理财学习之路

8月下旬的一天中午，无意中看到一篇推文，是微淼商学院推荐的课程，文末有老师的微信二维码，已经课程的付款链接，因为推文写的比较好，尤其是提出的关闭花呗信用卡等，太符合我目前的实际情况了，所以特别感兴趣，抱着试一试的态度报了名，当时是0821.开课时间是0829，中间有8天的时间让读一本电子书《小狗钱钱》，虽然之前听说过这本书，但是没有读过原版，读完了之后就感慨，不愧是风靡全球的理财入门读物，里面的内
韩玲Julie·2024-02-14 18:09

自然语言处理N天-AllenNLP学习（实现简单的词性标注）

有一篇帖子总结了一下学习处理NLP问题中间的坑。NLP数据预处理要比CV的麻烦很多。去除停用词，建立词典，加载各种预训练词向量，Sentence->Wo
我的昵称违规了·2024-02-14 12:54

使用模型Helsinki-NLP/opus-mt-en-zh实现英译中

googlecodlab运行需要5秒fromtransformersimportAutoModel,AutoTokenizer,MarianMTModelfromhuggingface_hub.hf_apiimportHfFolderHfFolder.save_token('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')text="Memphisisaserieso
hehui0921·2024-02-14 11:18

断舍离（3）

22017年的夏日的洛阳，凯旋路上高大的梧桐树依稀可见，参加NLP专业执行师的学习，遇见应童老师，收到小树宝宝的礼物。回来
波光粼粼_·2024-02-14 10:30
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他