NLP自学笔记第3页

【Python机器学习】NLP分词——词干还原的挑战

zhangbin_237·2024-08-28 05:03

NLP化学反应式

我只能承认，这样子理解NLP的人一定是个奇葩。对，我必须承认自己是个奇葩。因为以前的我总认为这世界很奇葩，所以我也只能变成个奇葩才能适应它……呃，Whatonearth我奇葩吗？

福哥0075826·2024-08-27 17:07

常见的NLP处理框架介绍！

自然语言处理（NLP）处理框架是指一系列用于开发、实现和部署自然语言处理应用程序的工具、库和框架。

weixin_54503231·2024-08-27 09:21

NLP学习——信息抽取

信息抽取自动从半结构或无结构的文本中抽取出结构化信息的任务。常见的信息抽取任务有三类：实体抽取、关系抽取、事件抽取。1、实体抽取从一段文本中抽取出文本内容并识别为预定义的类别。实体抽取任务中的复杂问题：重复嵌套，原文中多个实体之间共享片段不连续，一个实体由多个不连续片段组成2、关系抽取从文本中抽取一对实体和预定义的关系类型。传统的关系抽取任务实现方案是先进行实体抽取，再输入头尾实体与原文进行关系分

P-ShineBeam·2024-08-27 01:36

Prompt-Tuning：大模型微调技术

随着深度学习技术的不断发展，大模型（如GPT、BERT等）在各种自然语言处理（NLP）任务中取得了显著的成功。然而，训练和部署大模型需要大量的计算资源和时间，这限制了其在一些资源有限场景中的应用。

百度_开发者中心·2024-08-26 19:14

喝了那么多鸡汤，你知道哪一碗有毒吗？

虽然曾经我也学过NLP里一句话：“一个人不能改变另一个人。”在此之后我也一直在做出改变，不再去强势的想要改变别人，可是最近我却被文章开始的这句话迷失自我。

b66c6f1f6d41·2024-08-26 11:28

从零开始大模型开发与微调：有趣的词嵌入

从零开始大模型开发与微调：有趣的词嵌入作者：禅与计算机程序设计艺术/ZenandtheArtofComputerProgramming1.背景介绍1.1问题的由来自然语言处理（NLP）领域近年来取得了飞速发展

AGI通用人工智能之禅·2024-08-26 08:33

【Python机器学习】NLP概述——自然语言智商

就像人类的智能一样，如果不考虑多个智能维度，单凭一个智商分数是无法轻易衡量NLP流水线的能力的。衡量机器人系统能力的一种常见方法是：根据系统行为的复杂性和所需的人类监督成都这两个维度来衡量。

zhangbin_237·2024-08-26 01:20

《人工智能与自然语言处理：开启智能交流新时代》

其中，自然语言处理（NaturalLanguageProcessing，简称NLP）作为人工智能的一个重要分支，正逐渐改变着我们与计算机交互的方式。那么，人工智能究竟是如何进行自然语言处理的呢？

程序猿阿伟·2024-08-25 22:03

深度学习--复制机制

复制机制（CopyMechanism）是自然语言处理（NLP）中特别是在文本生成任务中（如机器翻译、摘要生成等）使用的一种技术。

Ambition_LAO·2024-08-25 21:28

python通过Gurobi求解线性规划

Gurobi使用基本步骤求解线性规划模型代码实现GurobiGurobi是一款强大的商业数学规划求解器，用于解决线性规划（LP）、整数规划（IP）、混合整数规划（MIP）、二次规划（QP）、非线性规划（NLP

vibag·2024-08-25 18:09

将遍历出的结果字符串装在列表

fromKeyword_extractionimportThe_original_titleKey_word=[]foriinThe_original_title:fromdtl_nlpimportmax_length_wordsll

月夜星空下·2024-08-25 17:54

阿里云力夺 FewCLUE 榜首！知识融入预训练+小样本学习的实战解析

中文语言理解权威评测基准CLUE自成立以来发布了多项NLP评测基准，包括分类榜单，阅读理解榜单和自然语言推断榜单等，在学术界、工业界产生了深远影响。其中，FewCLUE是CLUE最新推出的一

阿里云技术·2024-08-25 16:26

人工智能领域--RAG技术

RAG，即Retrieval-AugmentedGeneration（检索增强的生成），是一种结合了检索（Retrieval）和生成（Generation）机制的人工智能技术，常用于提升自然语言处理（NLP

胡萝卜不甜·2024-08-25 13:39

【ShuQiHere】“从 One-Hot 到 GPT：窥探词表示技术的演变”

【ShuQiHere】在自然语言处理（NLP）领域，如何让机器理解人类语言一直是一个核心问题。而词表示（WordRepresentation）正是解决这个问题的基础技术。

ShuQiHere·2024-08-25 08:06

用 Unsloth 微调 LLaMA 3 8B

用Unsloth微调LLaMA38B今年4月份，Meta公司发布了功能强大的大型语言模型（LLM）Llama-3，为从事各种NLP任务的开发人员提供了功能强大可以在普通机器上运行的开源LLM。

liugddx·2024-08-25 08:05

探索Ruby的自然语言处理宝库：文本魔法的艺术

标题：探索Ruby的自然语言处理宝库：文本魔法的艺术在人工智能的浪潮中，自然语言处理（NLP）成为了连接人类语言与机器理解的桥梁。

2401_85743969·2024-08-25 05:47

23 注意力机制—BERT

目录BERT预训练NLP里的迁移学习BERTBERT动机BERT预训练NLP里的迁移学习在计算机视觉中比较流行，将ImageNet或者更大的数据集上预训练好的模型应用到其他任务中，比如小数据的预测、图片分类或者是目标检测使用预训练好的模型

Unknown To Known·2024-08-25 01:57

【2025校招】4399 NLP算法工程师笔试题

目录1.第一题2.第二题3.第三题⏰时间：2024/08/19输入输出：ACM格式⏳时长：2h本试卷分为单选，自我评价题，编程题单选和自我评价这里不再介绍，4399的编程题一如既往地抽象，明明是NLP岗位的笔试题

Iareges·2024-08-25 01:25

自然语言处理NLP之中文分词和词性标注

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录一、Python第三方库jieba（中文分词、词性标注）特点二、jieba中文分词的安装关键词抽取基于TF-IDF算法TF-IDF原理介绍基于TextRank算法的关键词抽取textRank算法原理介绍总结一、Python第三方库jieba

陈敬雷-充电了么-CEO兼CTO·2024-08-24 10:53

Google BERT 算法全面分析

一、什么是BERT算法BERT全称是BidirectionalEncoderRepresentationsfromTransformers，BERT算法诞生于2018年，从当时开始就引起了AI界尤其是NLP

云点SEO·2024-08-24 08:44

paddle nlp 3.0 全面拥抱开源大模型

首先安装神圣的飞桨自然语言处理框架3.0pipinstall--upgradepaddlenlp==3.0.0b0阿里云通义千问（Qwen2）系列大模型介绍阿里云通义千问（Qwen2）是阿里云推出的一系列先进的大型语言模型

路人与大师·2024-08-24 04:40

7个使用大语言模型的最佳情绪分析 API

在自然语言处理（NLP）中，情感分析是指使用人工智能（A

幂简集成·2024-08-23 17:36

小琳AI课堂：Llama——NLP界的多面手

Llama:NLP界的多面手引言：大家好，这里是小琳AI课堂。今天，我们要探索的是自然语言处理（NLP）领域的一位明星——Llama。

小琳ai·2024-08-23 14:43

深入解析Doctran：使用AI和NLP优化文本处理

深入解析Doctran：使用AI和NLP优化文本处理引言在当今数据驱动的世界中，高效处理和分析大量文本信息变得至关重要。

qq_37836323·2024-08-23 13:11

【Python机器学习】NLP概述——聊天机器人的自然语言流水线

构建对话引擎或者聊天机器人所需的NLP流水线类似于某些问答系统。聊天机器人需要4个处理阶段和一个数据库来维护过去语句和回复的记录。

zhangbin_237·2024-08-23 10:51

Datawhale AI夏令营第四期魔搭- AIGC文生图方向 task03笔记

自然语言处理（NLP）：了解文本编码、语言模型等NLP技术，因为Kolors在生成图像时需要理解并处理输

汪贤阳·2024-08-22 11:30

电商搜索革命：大模型如何重塑购物体验？

在AI助手，NLP和搜索领域

京东零售技术·2024-08-22 00:54

【2024软考架构师自学笔记】8.软件可靠性基础知识

文章目录8.1软件可靠性基本概念8.1.1软件可靠性定义8.1.2软件可靠性的定量描述8.1.3可靠性目标8.1.4可靠性测试的意义8.1.5广义的可靠性测试与狭义的可靠性测试8.2软件可靠性建模8.2.1影响软件可靠性的因素8.2.2软件可靠性的建模方法8.2.3软件的可靠性模型分类8.3软件可靠性管理8.4软件可靠性设计8.4.1容错设计技术8.4.2检错技术8.4.3降低复杂度设计8.4.4

老杜2024·2024-08-21 22:42

【2024软考架构师自学笔记】9. 软件架构的演化和维护

文章目录9.1软件架构演化和定义的关系9.1.1演化的重要性9.1.2演化和定义的关系9.2面向对象软件架构演化过程9.2.1对象演化9.2.2消息演化9.2.3复合片段演化9.2.4约束演化9.3软件架构演化方式的分类9.3.1软件架构演化时期9.3.2软件架构静态演化9.3.3软件架构动态演化9.4软件架构演化原则9.5软件架构演化评估方法9.6大型网站系统架构演化实例9.7软件架构维护9.1

老杜2024·2024-08-21 22:42

【2024软考架构师自学笔记】2. 信息系统基础知识

文章目录2.1信息系统概述2.1.1信息系统定义2.1.2信息系统的发展2.1.3信息系统的分类2.1.4信息系统的生命周期2.1.5信息系统的建设原则2.1.6信息系统的开发方法2.1.7综合性信息系统2.2业务处理系统TPS2.2.1业务处理系统的概念2.2.2业务处理系统的功能2.2.3业务处理系统的特点2.3管理信息系统MIS2.3.1管理信息系统的概念2.3.2管理信息系统的功能2.3.

老杜2024·2024-08-21 22:12

【2024软考架构师自学笔记】7.系统质量属性与架构评估

文章目录7.1软件系统质量属性7.1.1质量属性概念7.1.2面向架构评估的质量属性*7.1.3质量属性的场景描述7.2系统架构评估7.2.1系统架构评估中的重要概念7.2.2系统架构评估方法7.3ATAM方法架构评估实践7.3.1阶段1——演示(Presentation)7.3.2阶段2——调查和分析7.3.3阶段3——测试7.3.4阶段4——报告ATAM7.1软件系统质量属性7.1.1质量属性

老杜2024·2024-08-21 21:05

【Python机器学习】NLP的部分实际应用

自然语言处理在现实中非常多的应用，下表是其中的一些例子：应用示例1示例2示例3搜索web文档自动补全编辑拼写语法风格对话聊天机器人助手行程安排写作索引用语索引目录电子邮件垃圾邮件过滤分类优先级排序文本挖掘摘要知识提取医学诊断法律法律断案先例搜索传票分类新闻事件检索真相核查标题排字归属剽窃检测文字取证风格指导情感分析团队士气监控产品评论分类客户关怀行为预测金融选举预测营销创作电影脚本诗歌歌词如果在索

zhangbin_237·2024-08-21 21:00

网络安全（黑客）—2024自学笔记

前言一、什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。无论网络、Web、移动、桌面、云等哪个领域，都有攻与防两面性，例如Web安全技术，既有Web渗透，也有Web防御技术（WAF）。作为一个合格的网络安全工程师，应该做到攻守兼备，毕竟知己知彼，才能百战百胜。二、怎样规划网络安全如果你

羊村最强沸羊羊·2024-03-26 07:23

2021-02-07 NLP心理实操作线上课 day7（16讲、17讲）

#前提假设（上）（下）【学习内容】：第十六讲：前提假设（上）1、前提假设A.对人的前提假设【看人】：（1）没有两个人是一样的（2）沟通的效果取决于对方的回应【每当做出一个沟通需要向对方做出一个核对】（3）一个人不能改变另外一个人（4）每一个人都选择给自己最佳利益的行为(5）每人都已经具备使自己成功快乐的资源和能力（6）动机和情绪总不会错，只是行为没有效果而已第十七讲：前提假设（下）B.对事的前提假

海洋7606·2024-03-25 12:26

2024网络安全-自学笔记

前言一、什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。无论网络、Web、移动、桌面、云等哪个领域，都有攻与防两面性，例如Web安全技术，既有Web渗透，也有Web防御技术（WAF）。作为一个合格的网络安全工程师，应该做到攻守兼备，毕竟知己知彼，才能百战百胜。二、怎样规划网络安全如果你

羊村最强沸羊羊·2024-03-20 01:39

自然语言处理概念以及发展

自然语言概念总结自然语言处理（NaturalLanguageProcessing，简称NLP）是计算机科学领域与人工智能领域的一个重要方向，它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法

黑夜照亮前行的路·2024-03-18 23:05

读《重塑心灵》，悟个人与企业系统关系

系统动力派NLP的创始人李中莹先生在他的《重塑心灵》中写到：一个人生于宇宙之间，不可能脱离其它人事物的影响，也不可能完全不影响其他人，因此只有充分尊重这种系统性才能摆正自己的位置，达到天人合一，内外和谐的境界

猫咪06·2024-03-18 16:24

自然语言处理（NLP）技术的概念及优势

自然语言处理（NLP）是人工智能领域的一个重要分支，其目标是使计算机能够理解、处理和生成人类自然语言的形式和含义。

刘小董·2024-03-18 00:36

今日无更新

，根据原来的改改就好……这周真的是有点繁杂了，搞定之后连着四五月份要写两篇论文，再加上五月底的课程论文还有紧接着的文献综述，看样子要疯……现在梳理一下自己手里的锤子：转到Pytorch，使用AllenNLP

我的昵称违规了·2024-03-17 17:12

大型语言模型RAG（检索增强生成）：检索技术的应用与挑战

随着大型预训练语言模型（LLMs）如GPT-3和BERT的出现，自然语言处理（NLP）领域取得了显著进展。然而，这些模型在处理知识密集型任务时仍存在局限性，特别是在需要最新或特定领域知识的情况下

in_tsz·2024-03-17 15:22

(done) NLP “bag-of-words“ 方法（带有二元分类和多元分类两个例子）词袋模型、BoW

一个视频：https://www.bilibili.com/video/BV1mb4y1y7EB/?spm_id_from=333.337.search-card.all.click&vd_source=7a1a0bc74158c6993c7355c5490fc600这里有个视频，讲解得更加生动形象一些总得来说，词袋模型(Bow,bag-of-words)是最简单的“文本—>矢量”(把文本转为矢量

shimly123456·2024-03-17 14:21

NLP技术

自然语言处理（NLP）技术可以应用在多个领域，例如机器翻译、情感分析、文本分类等。以下是几个例子：1.机器翻译：NLP技术可以将一种语言的文本自动翻译成另一种语言。

小天才dhsb·2024-03-13 00:47

小白看得懂的 Transformer

1.导语谷歌推出的BERT模型在11项NLP任务中夺得SOTA结果，引爆了整个NLP界。而BERT取得成功的一个关键因素是Transformer的强大作用。

zy_zeros·2024-03-12 18:39

【AI视野·今日NLP 自然语言处理论文速览第八十二期】Tue, 5 Mar 2024

AI视野·今日CS.NLP自然语言处理论文速览Tue,5Mar2024(showingfirst100of175entries)Totally100papers上期速览✈更多精彩请移步主页DailyComputationandLanguagePapersKey-Point-DrivenDataSynthesiswithitsEnhancementonMathematicalReasoningAut

hitrjj·2024-03-11 09:07

每日荐书：《语言的魔力》在育儿的旅途中，建议一定要学习的一本书！

本书作者：罗伯特•迪尔茨，NLP（神经语言程式学）大师，被公认为现今对NLP贡献最多的人。整理和开发了系统NLP、理解层次、重塑印记法、矛盾整合等许多著名的心理学技巧。

殷老师认知心理教育说·2024-03-10 00:57

计算机设计大赛深度学习的智能中文对话问答机器人

1项目架构2项目的主要过程2.1数据清洗、预处理2.2分桶2.3训练3项目的整体结构4重要的API4.1LSTMcells部分：4.2损失函数：4.3搭建seq2seq框架：4.4测试部分：4.5评价NLP

iuerfee·2024-03-07 20:46

ChatGPT介绍

它基于Transformer架构，这是一种在自然语言处理（NLP）领域取得突破的深度学习方法。通过在海量的互联网文本数据上进行预训练，ChatGPT获得了强大的语言理解和生成能力。

程序媛9688·2024-03-07 11:03

基于ERNIR3.0文本分类的开发实践

utm_id=0遇到的问题：如下采用paddleNLP下文本分类实例进行分类训练后发现生成的模型分类不准。打算自己开发脚本进行分类计算再进行服务化部署。基于ERNIR3.0文本分类任务模型

wangqiaowq·2024-03-07 03:54

Python中的自然语言处理和文本挖掘

在Python中，自然语言处理（NLP）和文本挖掘通常涉及对文本数据进行清洗、转换、分析和提取有用信息的过程。

api77·2024-03-05 23:49

推荐频道

NLP自学笔记