nlp基础学习第3页

nlp基础学习

小琳AI课堂：单向模型 vs 双向模型 —— 揭秘大语言模型生成文本的奥秘

今天，我们要深入探讨自然语言处理（NLP）领域中的两种基础模型架构：单向模型和双向模型。这两种模型在处理和理解语言序列（如句子）的方式上有显著差异，它们的工作原理直接影响着大语言模型生成文本的方式。

小琳ai·2024-08-31 01:29

【Python机器学习】NLP词频背后的含义——隐性语义分析

隐性语义分析基于最古老和最常用的降维技术——奇异值分解（SVD）。SVD将一个矩阵分解成3个方阵，其中一个是对角矩阵。SVD的一个应用是求逆矩阵。一个矩阵可以分解成3个最简单的方阵，然后对这些方阵求转置后再把它们相乘，就得到了原始矩阵的逆矩阵。它为我们提供了一个对大型复杂矩阵求逆的捷径。SVD适用于桁架结构的应力和应变分析等机械工程问题，它对电气工程中的电路分析也很有用，它甚至在数据科学中被用于基

zhangbin_237·2024-08-30 14:22

PyTorch 基础学习（14）- 归一化

系列文章：《PyTorch基础学习》文章索引概述归一化是数据预处理中的重要步骤之一，它可以将数据调整到特定的范围或分布，有助于加速训练并提高模型的性能。在机器学习中，不同的归一化方法适用于不同的场景。

花千树-010·2024-08-30 12:38

PyTorch 基础学习

文章索引：PyTorch基础学习（1）-快速入门PyTorch基础学习（2）-张量TensorsPyTorch基础学习（3）-张量的数学操作PyTorch基础学习（4）-张量的类型PyTorch基础学习

花千树-010·2024-08-30 12:07

自然语言处理（NLP）与机器学习：深度探索两者的关系

自然语言处理（NLP）与机器学习：深度探索两者的关系1.自然语言处理(NLP)的概述NLP的主要任务包括：2.机器学习(ML)的概述机器学习的主要类型包括：3.NLP与机器学习的关系1.机器学习驱动NLP

听忆.·2024-08-30 10:51

大模型训练和推理

文章目录一、NLP基础1.Tokenizer2.positionencoding3.注意力机制与transformer架构二、大模型训练1.SFT训练2.RLHF训练3.分布式并行训练技术（1）模型并行

李明朔·2024-08-30 01:27

自然语言处理系列四十二》新词发现与短语提取》新词发现》代码实战

自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列四十二新词发现》代码实战短语提取算法原理总结自然语言处理系列四十二新词发现》代码实战新词发现是NLP

陈敬雷-充电了么-CEO兼CTO·2024-08-29 20:24

0基础学习Python路径（27）sys模块

Pythonsys模块详解1.简介“sys”即“system”，“系统”之意。该模块提供了一些接口，用于访问Python解释器自身使用和维护的变量，同时模块中还提供了一部分函数，可以与解释器进行比较深度的交互。2.常用功能2.1sys.argv“argv”即“argumentvalue”的简写，是一个列表对象，其中存储的是在命令行调用Python脚本时提供的“命令行参数”。这个列表中的第一个参数是

星河漫漫l·2024-08-29 18:09

计算机毕业设计之基于Python的旅游景点评论内容分析与研究

通过运用自然语言处理（NLP）技术，清洗并预处理了这些数据，以便于后续分析。随后，采用情感分析方法来识别和量化评论中的主观态度和情绪倾向，从而判断游客的整体满意度。

微信bishe58·2024-08-29 10:49

【Three.js基础学习】19.Custom models with Blender

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档前言blender模型资源:【blender】一个汉堡包-CSDN博客一、代码import'./style.css'import*asTHREEfrom'three'import{OrbitControls}from'three/examples/jsm/controls/OrbitControls.js'import{GLTFLoa

蚕食我的耐心·2024-08-29 08:33

css基础学习总结(一)

文章目录一.选择器1.标签选择器2.类选择器3.ID选择器4.分组选择器5.派生与子元素选择器6.属性选择器7.伪类选择器8.伪对象选择器9.选择器的优先级别css优先级的6大分类一.选择器1.标签选择器选择器例子描述elementp/div/span选择所有含有指定标签的元素Documentdiv{color:red;}span{color:blue;}p{color:green;}HelloW

晚睡早起₍˄·͈༝·͈˄*₎◞ ̑̑·2024-08-29 08:02

【机器学习-随记】使用 Slack 和 Facebook Messenger 的消息机器人实现虚拟客服人员

使用Slack和FacebookMessenger的消息机器人实现虚拟客服人员1.平台选择与集成2.消息机器人开发3.自然语言处理(NLP)4.虚拟助手功能实现5.语音助手集成6.安全与用户隐私7.测试与部署边走

听忆.·2024-08-29 06:19

论文：Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks

论文：Retrieval-AugmentedGenerationforKnowledge-IntensiveNLPTaskscode:https://github.com/huggingface/transformerscode

Ian_Wonder·2024-08-28 18:27

初识LangChain的快速入门指南

初识LangChain的快速入门指南LangChain是一个强大的自然语言处理（NLP）工具链，旨在帮助开发者快速构建复杂的语言处理应用。

hai40587·2024-08-28 17:50

C++ 基础学习

提示并输入一个字符串，统计该字符串中字母个数、数字个数、空格个数、其他字符的个数#includeusingnamespacestd;intmain(){cout='0'&&str[i]='a'&&str[i]='A'&&str[i]<='Z')){alp++;}elseif(str[i]==''){spa++;}else{other++;}}cout<<"数字"<

wuziNO_1·2024-08-28 17:49

0基础学习Python路径（29）collections模块

1.简介collections是python的内置模块，提供了很多方便且高性能的关于集合的操作，掌握这些知识有助于提高代码的性能和可读性。2.常用功能2.1namedtuple功能详解namedtuple()返回一个新的元组子类，且规定了元组的元素的个数，同时除了使用下标获取元素之外，还可以通过属性直接获取。fromcollectionsimportnamedtupleUser=namedtupl

星河漫漫l·2024-08-28 16:07

【好书分享第十期】大模型应用解决方案_基于ChatGPT和GPT-4等Transformer架构的自然语言处理（文末送书）

文章目录前言一、内容简介二、作者简介三、目录四、摘录粉丝福利前言在不到4年的时间里，Transformer模型以其强大的性能和创新的思想，迅速在NLP社区崭露头角，打破了过去30年的记录。

屿小夏·2024-08-28 14:56

【Python机器学习】NLP分词——利用分词器构建词汇表（三）——度量词袋之间的重合度

如果能够度量两个向量词袋之间的重合度，就可以很好地估计他们所用词的相似程度，而这也是它们语义上重合度的一个很好的估计。因此，下面用点积来估计一些新句子和原始的Jefferson句子之间的词袋向量重合度：importpandasaspdsentence="""ThomasJeffersonBeganbulidingMonticelliastheageof26.\n"""sentence=senten

zhangbin_237·2024-08-28 05:33

【Python机器学习】NLP概述——深度处理

自然语言处理流水线的各个阶段可以看作是层，就像是前馈神经网络中的层一样。深度学习就是通过在传统的两层机器学习模型架构（特征提取+建模）中添加额外的处理层来创建更复杂的模型和行为。上图中，前四层对应于聊天机器人流水线中的前两个阶段（特征提取和特征分析）。例如，词性标注（POS标注）是在聊天机器人流水线的分析阶段生成特征的一种方法。POS标签由默认的SpaCY流水线自动生成，该流水线包括上图中所有的前

zhangbin_237·2024-08-28 05:03

【Python机器学习】NLP分词——词干还原的挑战

zhangbin_237·2024-08-28 05:03

vue 如何合并两个项目_实例详解Vue基础学习之项目整合及优化

Vue基础学习之项目整合及优化前言使用webpack构建过Vue项目的同学应该知道alias的作用，我们可以使用它将复杂的文件路径定义成一个变量来访问。

weixin_39690401·2024-08-28 02:42

NLP化学反应式

我只能承认，这样子理解NLP的人一定是个奇葩。对，我必须承认自己是个奇葩。因为以前的我总认为这世界很奇葩，所以我也只能变成个奇葩才能适应它……呃，Whatonearth我奇葩吗？

福哥0075826·2024-08-27 17:07

常见的NLP处理框架介绍！

自然语言处理（NLP）处理框架是指一系列用于开发、实现和部署自然语言处理应用程序的工具、库和框架。

weixin_54503231·2024-08-27 09:21

NLP学习——信息抽取

信息抽取自动从半结构或无结构的文本中抽取出结构化信息的任务。常见的信息抽取任务有三类：实体抽取、关系抽取、事件抽取。1、实体抽取从一段文本中抽取出文本内容并识别为预定义的类别。实体抽取任务中的复杂问题：重复嵌套，原文中多个实体之间共享片段不连续，一个实体由多个不连续片段组成2、关系抽取从文本中抽取一对实体和预定义的关系类型。传统的关系抽取任务实现方案是先进行实体抽取，再输入头尾实体与原文进行关系分

P-ShineBeam·2024-08-27 01:36

0基础学画画（鲸鱼），连载77/100天

大家好，我是大鱼漫说，你们可以叫我大鱼，我现在是一位零基础学习绘画的程序员。每日一问~小鱼问：看过你的视频，想知道，你画画时候的笔刷都是自带的吗？为什么有的我找不到呢？

大鱼漫说·2024-08-27 00:15

Prompt-Tuning：大模型微调技术

随着深度学习技术的不断发展，大模型（如GPT、BERT等）在各种自然语言处理（NLP）任务中取得了显著的成功。然而，训练和部署大模型需要大量的计算资源和时间，这限制了其在一些资源有限场景中的应用。

百度_开发者中心·2024-08-26 19:14

喝了那么多鸡汤，你知道哪一碗有毒吗？

虽然曾经我也学过NLP里一句话：“一个人不能改变另一个人。”在此之后我也一直在做出改变，不再去强势的想要改变别人，可是最近我却被文章开始的这句话迷失自我。

b66c6f1f6d41·2024-08-26 11:28

从零开始大模型开发与微调：有趣的词嵌入

从零开始大模型开发与微调：有趣的词嵌入作者：禅与计算机程序设计艺术/ZenandtheArtofComputerProgramming1.背景介绍1.1问题的由来自然语言处理（NLP）领域近年来取得了飞速发展

AGI通用人工智能之禅·2024-08-26 08:33

【Python机器学习】NLP概述——自然语言智商

就像人类的智能一样，如果不考虑多个智能维度，单凭一个智商分数是无法轻易衡量NLP流水线的能力的。衡量机器人系统能力的一种常见方法是：根据系统行为的复杂性和所需的人类监督成都这两个维度来衡量。

zhangbin_237·2024-08-26 01:20

《人工智能与自然语言处理：开启智能交流新时代》

其中，自然语言处理（NaturalLanguageProcessing，简称NLP）作为人工智能的一个重要分支，正逐渐改变着我们与计算机交互的方式。那么，人工智能究竟是如何进行自然语言处理的呢？

程序猿阿伟·2024-08-25 22:03

深度学习--复制机制

复制机制（CopyMechanism）是自然语言处理（NLP）中特别是在文本生成任务中（如机器翻译、摘要生成等）使用的一种技术。

Ambition_LAO·2024-08-25 21:28

python通过Gurobi求解线性规划

Gurobi使用基本步骤求解线性规划模型代码实现GurobiGurobi是一款强大的商业数学规划求解器，用于解决线性规划（LP）、整数规划（IP）、混合整数规划（MIP）、二次规划（QP）、非线性规划（NLP

vibag·2024-08-25 18:09

将遍历出的结果字符串装在列表

fromKeyword_extractionimportThe_original_titleKey_word=[]foriinThe_original_title:fromdtl_nlpimportmax_length_wordsll

月夜星空下·2024-08-25 17:54

阿里云力夺 FewCLUE 榜首！知识融入预训练+小样本学习的实战解析

中文语言理解权威评测基准CLUE自成立以来发布了多项NLP评测基准，包括分类榜单，阅读理解榜单和自然语言推断榜单等，在学术界、工业界产生了深远影响。其中，FewCLUE是CLUE最新推出的一

阿里云技术·2024-08-25 16:26

人工智能领域--RAG技术

RAG，即Retrieval-AugmentedGeneration（检索增强的生成），是一种结合了检索（Retrieval）和生成（Generation）机制的人工智能技术，常用于提升自然语言处理（NLP

胡萝卜不甜·2024-08-25 13:39

【ShuQiHere】“从 One-Hot 到 GPT：窥探词表示技术的演变”

【ShuQiHere】在自然语言处理（NLP）领域，如何让机器理解人类语言一直是一个核心问题。而词表示（WordRepresentation）正是解决这个问题的基础技术。

ShuQiHere·2024-08-25 08:06

用 Unsloth 微调 LLaMA 3 8B

用Unsloth微调LLaMA38B今年4月份，Meta公司发布了功能强大的大型语言模型（LLM）Llama-3，为从事各种NLP任务的开发人员提供了功能强大可以在普通机器上运行的开源LLM。

liugddx·2024-08-25 08:05

探索Ruby的自然语言处理宝库：文本魔法的艺术

标题：探索Ruby的自然语言处理宝库：文本魔法的艺术在人工智能的浪潮中，自然语言处理（NLP）成为了连接人类语言与机器理解的桥梁。

2401_85743969·2024-08-25 05:47

23 注意力机制—BERT

目录BERT预训练NLP里的迁移学习BERTBERT动机BERT预训练NLP里的迁移学习在计算机视觉中比较流行，将ImageNet或者更大的数据集上预训练好的模型应用到其他任务中，比如小数据的预测、图片分类或者是目标检测使用预训练好的模型

Unknown To Known·2024-08-25 01:57

【2025校招】4399 NLP算法工程师笔试题

目录1.第一题2.第二题3.第三题⏰时间：2024/08/19输入输出：ACM格式⏳时长：2h本试卷分为单选，自我评价题，编程题单选和自我评价这里不再介绍，4399的编程题一如既往地抽象，明明是NLP岗位的笔试题

Iareges·2024-08-25 01:25

如何系统地学习Java基础：一份详细的学习指南

在本文中，我将为大家提供一个详细的Java基础学习计划，帮助你系统地掌握Java的核心概念和实用技能。学习计划概述阶段1：Java基础入门（1-2周）学习编程语言的基础是至关重要的，尤其是对于初学者。

项目笔记与工具库·2024-08-24 22:07

自然语言处理NLP之中文分词和词性标注

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录一、Python第三方库jieba（中文分词、词性标注）特点二、jieba中文分词的安装关键词抽取基于TF-IDF算法TF-IDF原理介绍基于TextRank算法的关键词抽取textRank算法原理介绍总结一、Python第三方库jieba

陈敬雷-充电了么-CEO兼CTO·2024-08-24 10:53

Google BERT 算法全面分析

一、什么是BERT算法BERT全称是BidirectionalEncoderRepresentationsfromTransformers，BERT算法诞生于2018年，从当时开始就引起了AI界尤其是NLP

云点SEO·2024-08-24 08:44

paddle nlp 3.0 全面拥抱开源大模型

首先安装神圣的飞桨自然语言处理框架3.0pipinstall--upgradepaddlenlp==3.0.0b0阿里云通义千问（Qwen2）系列大模型介绍阿里云通义千问（Qwen2）是阿里云推出的一系列先进的大型语言模型

路人与大师·2024-08-24 04:40

7个使用大语言模型的最佳情绪分析 API

在自然语言处理（NLP）中，情感分析是指使用人工智能（A

幂简集成·2024-08-23 17:36

小琳AI课堂：Llama——NLP界的多面手

Llama:NLP界的多面手引言：大家好，这里是小琳AI课堂。今天，我们要探索的是自然语言处理（NLP）领域的一位明星——Llama。

小琳ai·2024-08-23 14:43

深入解析Doctran：使用AI和NLP优化文本处理

深入解析Doctran：使用AI和NLP优化文本处理引言在当今数据驱动的世界中，高效处理和分析大量文本信息变得至关重要。

qq_37836323·2024-08-23 13:11

大学计算机学习心得1000字,大学计算机学习心得体会

大学计算机学习心得体会大学计算机基础学习心得计算机，即电脑，随着科学技术的发展，不断进行着更新发展。

刘瑷·2024-08-23 11:58

【Python机器学习】NLP概述——聊天机器人的自然语言流水线

构建对话引擎或者聊天机器人所需的NLP流水线类似于某些问答系统。聊天机器人需要4个处理阶段和一个数据库来维护过去语句和回复的记录。

zhangbin_237·2024-08-23 10:51

基础学习-全链路追踪工具

监控维度可以分为节点资源监控（CPU、内存、带宽、磁盘）、应用探活监控（探活心跳）、应用服务能力监控（自动化回归测试）、应用服务性能监控等（全链路追踪），本文主要对比全链路追踪中常使用的Zipkin、Pinpoint、SkyWalking和CAT。一、全链路追踪工具1、Zipkin Twitter开源的调用链分析工具，目前基于springcloudsleuth得到了广泛的使用，特点是轻量，使用部

爱欣晴·2024-08-23 03:35

上一页 1 2 3 4 5 6 7 8 下一页

按字母分类： A B C D E F G H I J K L M N O P Q R S T U V W X Y Z 其他

推荐频道