Datawhale自然语言处理第4页

【学习笔记】第三章深度学习基础——Datawhale X李宏毅苹果书 AI夏令营

局部极小值与鞍点梯度为0的点我们统称为临界点，包括局部极小值、鞍点等局部极小值和鞍点的梯度都为0，那如何判断呢？先请出我们损失函数：L(θ)，θ是模型中的参数的取值，是一个向量。由于网络的复杂性，我们无法直接写出损失函数，不过我们可以写出损失函数的近似取值。根据宋浩老师所讲的大学一年级高等数学的知识，我们可以通过三阶泰勒展开对损失函数在θ附近的取值进行近似：其中，θ是模型中的参数的取值，θ’是在θ

MoyiTech·2024-08-28 11:38

Datawhale X 李宏毅苹果书 AI夏令营｜机器学习基础之案例学习

机器学习（MachineLearning,ML）：机器具有学习的能力，即让机器具备找一个函数的能力函数不同，机器学习的类别不同：回归（regression）：找到的函数的输出是一个数值或标量（scalar）。例如：机器学习预测某一个时间段内的PM2.5，机器要找到一个函数f，输入是跟PM2.5有关的的指数，输出是明天中午的PM2.5的值。分类（classification）：让机器做选择题，先准备

Monyan·2024-08-28 11:06

聚星文社——绘唐科技Ai推文软件

绘唐AIGCAI工具·2024-08-28 09:57

大规模语言模型从理论到实践：智能代理的组成

大规模语言模型从理论到实践：智能代理的组成关键词：大规模语言模型、智能代理、自然语言处理、深度学习、知识表示、推理机制、应用场景文章目录大规模语言模型从理论到实践：智能代理的组成1.背景介绍2.核心概念与联系

AGI通用人工智能之禅·2024-08-28 08:21

【Python机器学习】NLP概述——深度处理

自然语言处理流水线的各个阶段可以看作是层，就像是前馈神经网络中的层一样。深度学习就是通过在传统的两层机器学习模型架构（特征提取+建模）中添加额外的处理层来创建更复杂的模型和行为。

zhangbin_237·2024-08-28 05:03

【Python机器学习】NLP分词——词干还原的挑战

要想使用自然语言处理的相关应用，第一件事就是需要一个强大的词汇表。

zhangbin_237·2024-08-28 05:03

大模型企业应用落地系列三》基于大模型的对话式推荐系统》技术架构实现》大数据平台层

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录大模型企业应用落地系列三技术架构实现》大数据平台层大模型底座层具体实现大模型推荐技术发展趋势探讨总结大模型企业应用落地系列三技术架构实现

陈敬雷-充电了么-CEO兼CTO·2024-08-28 03:49

基于深度学习的高效模型压缩

以下是关于高效模型压缩的详细讨论：1.模型压缩的背景与挑战随着深度学习模型的不断发展，模型规模和复杂性大幅增加，特别是在计算机视觉、自然语言处理等领域，模型通常包含数以亿计的参数。

SEU-WYL·2024-08-27 19:58

微软在Edge浏览器中引入本地AI模型；苹果将于9月10日发布iPhone 16系列

该API主要用于自然语言处理任务，如文本总结和分类，但不适用于要求事实准确性的场景，并需遵守

go2coding·2024-08-27 17:13

局部极小值与鞍点 Datawhale X 李宏毅苹果书 AI夏令营

1，为什么随着参数的不断更新，损失无法降低？当参数对损失微分为零的时候，梯度下降就不能再更新参数了，训练就停下来了，损失不再下降了，此时梯度接近于0。我们把梯度为零的点统称为临界点（criticalpoint）。损失没有办法再下降，也许是因为收敛在了临界点，临界点包括局部极小值，局部极大值和鞍点（梯度是零且区别于局部极小值和局部极大值（localmaximum）的点）2，如果一个点的梯度接近于0，

千740·2024-08-27 09:23

常见的NLP处理框架介绍！

自然语言处理（NLP）处理框架是指一系列用于开发、实现和部署自然语言处理应用程序的工具、库和框架。

weixin_54503231·2024-08-27 09:21

大模型企业应用落地系列》基于大模型的对话式推荐系统》技术架构设计全攻略

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录大模型企业应用落地系列全貌基于大模型的对话式推荐系统

陈敬雷-充电了么-CEO兼CTO·2024-08-27 07:42

大模型企业应用落地系列一》基于大模型的对话式推荐系统》对话式推荐系统概述

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录大模型企业应用落地系列一基于大模型的对话式推荐系统

陈敬雷-充电了么-CEO兼CTO·2024-08-27 07:12

Datawhale X 李宏毅苹果书 AI夏令营Day03

一、打卡Datawhale二、学习1、文档学习图中展示了一个函数集合，其中包含多个未知参数的函数fθ1(x)和fθ2(x)。通过将这些函数组合起来，可以得到一个更大的函数集合。

xuanEpiphany29·2024-08-27 06:34

深度学习--RNN以及RNN的延伸

循环神经网络（RecurrentNeuralNetwork,RNN）是一类能够处理序列数据的神经网络，在自然语言处理、时间序列分析等任务中得到了广泛应用。

Ambition_LAO·2024-08-27 06:31

揭秘Sora：深度学习与自然语言处理驱动的智能视频生成与互动

Sora-探索AI视频模型的无限可能随着人工智能技术的飞速发展，AI视频模型已成为科技领域的新热点。而在这个浪潮中，OpenAI推出的首个AI视频模型Sora，以其卓越的性能和前瞻性的技术，引领着AI视频领域的创新发展。让我们将一起探讨Sora的技术特点、应用场景以及对未来创作方式的深远影响。方向一：技术解析技术架构：Sora的技术架构主要包括视频处理模块和智能生成模块。视频处理模块负责视频内容的

疾风终究没有归途·2024-08-26 22:50

Prompt-Tuning：大模型微调技术

随着深度学习技术的不断发展，大模型（如GPT、BERT等）在各种自然语言处理（NLP）任务中取得了显著的成功。然而，训练和部署大模型需要大量的计算资源和时间，这限制了其在一些资源有限场景中的应用。

百度_开发者中心·2024-08-26 19:14

什么是LLM，主要用途有哪些，在应用中有哪些优势和局限性？

LLM在实际中的应用优势：1.多领域应用：自然语言处理：LLM在机器翻译、语音识别、文本生成等领域表现出色。智能对话系统：LLM能够提供与人类相似的聊天机器人体验。

好好学习的不知名程序员·2024-08-26 16:59

python深度学习框架——TensorFlow

TensorFlow，由Google开发的开源机器学习库，以其强大的功能和灵活性，在深度学习、计算机视觉和自然语言处理等领域发挥着重要作用。本文将深入探讨TensorFlow中的一些常用函数及其参数。

零度°·2024-08-26 14:13

【Nature】在科研中应用ChatGPT：如何与数据对话

这些模型通过自然语言处理技术，使得研究人员能够以直观的方式与数据进行交互，从而简化了数据分析和解释的过程。

智写AI·2024-08-26 11:23

当前主流的 ChatGPT 工具有哪些？

概述特色应用场景优缺点4.ChatGPTbyAnthropic概述特色应用场景优缺点5.其他值得关注的工具5.1.HuggingFace5.2.FacebookAIResearch(FAIR)5.3.自然语言处理科研界的其他项目总结随着人工

圣逸·2024-08-26 11:53

从零开始大模型开发与微调：有趣的词嵌入

从零开始大模型开发与微调：有趣的词嵌入作者：禅与计算机程序设计艺术/ZenandtheArtofComputerProgramming1.背景介绍1.1问题的由来自然语言处理（NLP）领域近年来取得了飞速发展

AGI通用人工智能之禅·2024-08-26 08:33

小琳AI课堂：AIGC

首先，我们要明白，AIGC不仅仅是关于机器生成一些酷炫的图片或者文章，它融合了人工智能、深度学习、自然语言处理、计算机视觉等多个学科的技术。

小琳ai·2024-08-26 07:59

【机器学习】机器学习与大模型在人工智能领域的融合应用与性能优化新探索

文章目录引言机器学习与大模型的基本概念机器学习概述监督学习无监督学习强化学习大模型概述GPT-3BERTResNetTransformer机器学习与大模型的融合应用自然语言处理文本生成文本分类机器翻译图像识别自动驾驶医学影像分析语音识别智能助手语音转文字大模型性能优化的新探索模型压缩权重剪枝量化知识蒸馏分布式训练数据并行模型并行异步训练高效推理模型裁剪缓存机制专用硬件未来展望跨领域应用智能化系统人

E绵绵·2024-08-26 06:25

【Python机器学习】NLP概述——自然语言智商

但是对自然语言处理流水线而言，其目标是建立一个完全自动化的自然语言处理系统，会消除所有的人工监督（一旦模型被训练和部署）。因此，一对更好的IQ维度应该能捕捉到自然语言流水线复杂的广度和深度。

zhangbin_237·2024-08-26 01:20

【自然语言处理】0821学习记录

1.对于自然语言来讲，在自然语言处理的第一步，我们要面对的是各种各样以不同形式表现的文本数据，比如，有的是纯txt文档，有的是存储在Excel中的表格数据，还有的是无法直接打开的pkl文件等。

007的米奇妙妙屋·2024-08-26 00:19

《人工智能与自然语言处理：开启智能交流新时代》

其中，自然语言处理（NaturalLanguageProcessing，简称NLP）作为人工智能的一个重要分支，正逐渐改变着我们与计算机交互的方式。那么，人工智能究竟是如何进行自然语言处理的呢？

程序猿阿伟·2024-08-25 22:03

《跨越文化与语言的鸿沟：人工智能的挑战与机遇》

不同语言的语法结构、词汇用法和表达方式千差万别，这使得机器翻译等自然语言处理任务变得异常复杂。例如，某些语言中的词汇可能在其他

程序猿阿伟·2024-08-25 22:03

TensorFlow库详解：Python中的深度学习框架

TensorFlow被广泛应用于各种深度学习任务，如图像识别、自然语言处理、语音识别等。

Ambition_LAO·2024-08-25 21:28

深度学习--复制机制

复制机制（CopyMechanism）是自然语言处理（NLP）中特别是在文本生成任务中（如机器翻译、摘要生成等）使用的一种技术。

Ambition_LAO·2024-08-25 21:28

《Hadoop核心技术》作者翟周伟：我与Hadoop的不解之缘

翟周伟，资深Hadoop技术专家，专注于Hadoop&大数据，数据挖掘，自然语言处理领域，目前就职于百度。2009年，利用Hadoop构建商业级大数据系统，是国内该领域最早的一批人之一；负责设

xytlwp·2024-08-25 21:27

人工智能领域--RAG技术

）检索增强生成RAG，即Retrieval-AugmentedGeneration（检索增强的生成），是一种结合了检索（Retrieval）和生成（Generation）机制的人工智能技术，常用于提升自然语言处理

胡萝卜不甜·2024-08-25 13:39

【Rust光年纪】深度探索：Rust语言中的文本分析与自然语言处理库综述

探索Rust语言文本处理库的奥秘前言在当今信息爆炸的时代，文本分析和自然语言处理技术变得愈发重要。Rust语言作为一种快速、安全、并发的编程语言，也逐渐走进了这一领域。

friklogff·2024-08-25 11:28

赠书 | 李航老师的蓝皮书

研究方向包括信息检索，自然语言处理，统计机器学习，及数据挖掘。曾出版过三部学术专著

茗创科技·2024-08-25 10:04

【ShuQiHere】“从 One-Hot 到 GPT：窥探词表示技术的演变”

【ShuQiHere】在自然语言处理（NLP）领域，如何让机器理解人类语言一直是一个核心问题。而词表示（WordRepresentation）正是解决这个问题的基础技术。

ShuQiHere·2024-08-25 08:06

探索Ruby的自然语言处理宝库：文本魔法的艺术

标题：探索Ruby的自然语言处理宝库：文本魔法的艺术在人工智能的浪潮中，自然语言处理（NLP）成为了连接人类语言与机器理解的桥梁。

2401_85743969·2024-08-25 05:47

使用 Hugging Face Transformers 创建文本生成模型

文本生成是自然语言处理中的一个重要任务，在聊天机器人、自动写作等领域有着广泛的应用。

Envyᥫᩣ·2024-08-25 05:47

深入理解LDA主题模型及其在文本分析中的应用

深入理解LDA主题模型及其在文本分析中的应用在自然语言处理领域，主题模型是一种强大的工具，能够自动发现文档集中的潜在主题。

小高要坚强·2024-08-25 04:45

Datawhale X 李宏毅苹果书 AI夏令营Day02

一、打卡Datawhale进入打卡链接选择相对应的任务打卡就可以了二、学习1、线性模型依旧是b站上老师的授课视频，我找到知乎上解释很好的文章，分享一下机器学习（一）线性模型————理论篇线性回归模型、对数几率模型

xuanEpiphany29·2024-08-24 19:21

自然语言处理NLP之中文分词和词性标注

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录一、Python第三方库jieba（中文分词

陈敬雷-充电了么-CEO兼CTO·2024-08-24 10:53

自然语言处理系列四十》条件随机场CRF》CRF开源工具实战

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列四十条件随机场(CRF)开源工具实战新词发现与短语提取总结自然语言处理系列四十条件随机场

陈敬雷-充电了么-CEO兼CTO·2024-08-24 09:17

Google BERT 算法全面分析

什么是BERT算法BERT全称是BidirectionalEncoderRepresentationsfromTransformers，BERT算法诞生于2018年，从当时开始就引起了AI界尤其是NLP（自然语言处理

云点SEO·2024-08-24 08:44

paddle nlp 3.0 全面拥抱开源大模型

首先安装神圣的飞桨自然语言处理框架3.0pipinstall--upgradepaddlenlp==3.0.0b0阿里云通义千问（Qwen2）系列大模型介绍阿里云通义千问（Qwen2）是阿里云推出的一系列先进的大型语言模型

路人与大师·2024-08-24 04:40

7个使用大语言模型的最佳情绪分析 API

在自然语言处理（NLP）中，情感分析是指使用人工智能（A

幂简集成·2024-08-23 17:36

深度学习学习经验——循环神经网络（RNN）

RecurrentNeuralNetwork,RNN）循环神经网络（RecurrentNeuralNetwork,RNN）是一种适合处理序列数据的神经网络，它能够利用历史信息来预测当前输出，适用于时间序列预测、自然语言处理等任务

Linductor·2024-08-23 15:54

小琳AI课堂：Llama——NLP界的多面手

今天，我们要探索的是自然语言处理（NLP）领域的一位明星——Llama。Llama，由MetaAI（原FacebookAI）开发，以其轻量级、高效和易用性著称，是处理快速、灵活文本需求的理想选择。

小琳ai·2024-08-23 14:43

FastAPI部署大模型Llama 3.1

项目地址：self-llm/models/Llama3_1/01-Llama3_1-8B-InstructFastApi部署调用.mdatmaster·datawhalechina/self-llm(github.com

记得叫Mark周更·2024-08-23 14:12

深入解析Doctran：使用AI和NLP优化文本处理

Doctran作为一个强大的Python包，结合了大型语言模型（LLMs）和开源自然语言处理（NLP）库的优势，为开发者提供了一个强大的工具，用于将原始文本转换为结构化、信息密集且优化的文档。

qq_37836323·2024-08-23 13:11

自然语言处理系列三十七》词频-逆文档频率TF-IDF》Java代码实现

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列三十七Java代码实现词频

陈敬雷-充电了么-CEO兼CTO·2024-08-23 06:00

人工智能中的语言模型演变

设计这些模型的目的是为了理解、人类语言的生成和处理，从自然语言处理到机器翻译甚至创意写作，这些模型日趋复杂且多功能，应用范围从自然语言处理到机器翻译，甚至创意写作。

机器之心AI·2024-08-23 01:27

推荐频道

Datawhale自然语言处理