NLP夏令营第6页

基于Bert-base-chinese训练多分类文本模型(代码详解）

目录一、简介二、模型训练三、模型推理一、简介BERT（BidirectionalEncoderRepresentationsfromTransformers）是基于深度学习在自然语言处理（NLP）领域近几年出现的

一颗洋芋·2024-09-04 15:41

Datawhale X 李宏毅苹果书 AI夏令营-深度学入门task2：线性模型

1.线性模型把输入的特征x乘上一个权重，再加上一个偏置就得到预测的结果，这样的模型称为线性模型（linearmodel）2.分段线性模型线性模型也许过于简单，x1跟y可能中间有比较复杂的关系。线性模型有很大的限制，只能表示一条直线，这一种来自于模型的限制称为模型的偏差，无法模拟真实的情况。所以需要写一个更复杂的、更有灵活性的、有未知参数的函数。分段线性曲线（piecewiselinearcurve

m0_53743757·2024-09-04 11:43

格局？境界？思想的维度的外衣！

我们把格局和境界，用NLP中的一个工具来解释！这个工具叫做“思想健身室”。通常，我们都知道保持良好的身体状态，需要健康饮食，充足睡眠，合理运动，思维也一样，想要达到更高的境界，需要刻意练习。

晓小女子·2024-09-04 11:24

【深度学习 transformer】使用pytorch 训练transformer 模型,hugginface 来啦

HuggingFace是一个致力于开源自然语言处理（NLP）和机器学习项目的社区。

东华果汁哥·2024-09-04 06:39

NLP中的词向量及其应用

这些是解决大多数NLP问题所必需的。领域适应是一种技术，它允许机器学习和转移学习模型来映射小生境数据集，这些数据集都是用同一种语言编写的，但在语言上仍然不同。例如

喜欢打酱油的老鸟·2024-09-04 05:01

基于人工智能的智能客服系统

目录引言项目背景客服系统的现状与挑战AI在客服领域的应用前景系统设计系统架构模块划分关键技术与实现自然语言处理（NLP）对话管理语音识别与合成情感分析数据准备与训练数据收集数据预处理模型训练系统集成与部署前端接口设计后端服务实现系统集成部署方案测试与优化系统测试性能优化用户反馈与迭代应用场景与案例分析电子商务客服银行与金融服务医疗健康咨询常见问题及解决方案常见问题解决方案未来发展与展望结论

嵌入式详谈·2024-09-04 05:58

LLM大模型落地-从理论到实践

学习目标熟悉主流LLM（Llama,ChatGLM,Qwen）的技术架构和技术细节；有实际应用RAG、PEFT和SFT的项目经验较强的NLP基础，熟悉BERT、T5、Transformer和GPT的实现和差异

hhaiming_·2024-09-04 01:12

TorchText宝典：解锁PyTorch下的NLP炼金术

标题：TorchText宝典：解锁PyTorch下的NLP炼金术在深度学习与自然语言处理(NLP)的交叉领域中，PyTorch已经成为了一个强大的工具。

2401_85702623·2024-09-04 01:06

没有儿童节的日子-考研记录

也是我决定要报考他们的夏令营的日子。材料写了一部分，还有一部分没有完成，然后老师就要求在今天下午4:00之前把这个事情完成。快2:00的时候，我看见这个消息，但是回到宿舍系统已经关闭了。

何C呀·2024-09-04 00:28

宁缺100·2024-09-03 18:57

一文讲清楚，AI、AGI、AIGC与AIGC、NLP、LLM，ChatGPT等概念

本文旨在深入解析人工智能（AI）、通用人工智能（AGI）、人工智能生成内容（AIGC）、自然语言处理（NLP）、大型语言模型（LLM）以及ChatGPT等关键概念，并探讨它们在现代科技发展中的重要性和实际应用

GPT-Hub·2024-09-03 10:07

Liunx最常用命令

1.系统命令命令帮助命令名-help查看ip地址ipaddr清屏clear重启reboot关机shutdown关闭防火墙systemctlstopfirewalld查看端口号占用情况netstat-tnlp

陈恒源·2024-09-03 07:54

0607 三组27号学习《NLP最有效用的十二条前提假设》心得

凡事都有他自身的规矩，与人沟通，想得到回应，就要做对方能够接受的状态，同时会有相应的回应，才会找到方法进行下一步的沟通，做事情，没有成功是选择的方式不对，不必纠结，换思路，换方法，总能找到成功的路。重复老套的做，就会得到老样子的结果！

幸福的水滴·2024-09-02 15:19

【Linux命令】进程、端口查询命令

1、根据进程ID查询占用的端口号netstat-nlp|grep[进程ID]2、根据端口号查询占用它的进程IDlsof-i:[端口号]或者netstat-nlp|grep[端口号]

iku!!·2024-09-02 12:20

大语言模型诞生、探索和爆发阶段

2017年：Google发表了Transformer架构，这是一种基于自注意力机制的神经网络架构，它彻底改变了自然语言处理（NLP）领域，使得大规模并行化处理成为可能，

花开盛夏^.^·2024-09-02 10:38

GPT-3：一个新应用生态系统诞生了

GPT-3以其庞大的规模成为OpenAI令人印象深刻的自然语言处理（NLP）模型。

派派AI学院·2024-09-02 09:34

Hugging Face教程

HuggingFace教程1.引言在当今数字化时代，自然语言处理（NLP）在各个领域中扮演着重要角色。从文本分类、情感分析到机器翻译和对话系统，NLP技术的应用日益广泛。

小牛笔记·2024-09-02 07:22

Datawhale AI夏令营第五期CV Task01

一、报名参加2024大运河杯数据开发大赛1.登录赛事平台2.修改昵称，实名认证3.打开比赛链接报名参赛4.修改队伍名称二、领取厚德云支持的GPU在线算力！(点击即可跳转)三、体验baseline1.下载baseline相关文件aptinstallgit-lfsgitlfsinstallgitclonehttps://www.modelscope.cn/datasets/Datawhale/AI_C

m0_60530253·2024-09-02 07:21

Datawhale AI夏令营第五期CV Task02

一、yolo模型介绍YOLO，全称为"YouOnlyLookOnce"，是一种流行的实时目标检测算法，由JosephRedmon等人于2015年首次提出。YOLO的核心思想是将目标检测任务视为一个单一的回归问题，直接从图像像素到边界框坐标和类别概率的映射。这种设计使得YOLO能够以非常快的速度进行目标检测，同时保持较高的精度，特别适合需要实时处理的应用场景。YOLO算法的一个显著特点是它在单个网络

m0_60530253·2024-09-02 07:21

Datawhale AI夏令营第五期魔搭-CV竞赛方向Task1笔记--初识yolo模型

DatawhaleAI夏令营第五期魔搭-CV竞赛方向Task1笔记–初识yolo模型作者:福州大学我是一个温柔的刀客2024/8/221.赛题简介本赛题最终目标是开发一套智能识别系统，能够自动检测和分类城市管理中的违规行为

切记我是一个温柔的刀客·2024-09-02 07:19

王梦雪中原焦点团队网络初期27期坚持分享第1天 20210325

之前看NLP方面书籍觉得自己顿悟了一些生活的道理。今晚上完第一节课感觉自己豁然开朗。在听刘老师讲课的时候我才真正觉察到自己的问题。所以拿起手机给老公发了条信息，得到的是温暖的回应。这种感觉真的很好。

王天才要努力·2024-09-02 06:16

Datawhale Al夏令营第三期 Al+物质科学task2学习笔记

AI4Science是一个较为普遍的术语，通常指的是人工智能在科学研究和技术发展中的应用。它涵盖了各种科学领域，包括物理学、化学、生物学、地球科学等。虽然没有一个特定的确切历史，但可以描述人工智能在科学研究中的一些早期里程碑和发展趋势。早期发展知识表示与推理：20世纪70年代末和80年代初，早期的AI研究开始探索如何用机器推理来模拟人类的思维过程。这种推理方式被应用于物理学、化学等学科中，尝试解决

weixin_75033552·2024-09-01 17:56

找出影响无意识的办法使它支持目标。

我的摘录：第一，重塑情绪、行为和记忆，这是基于约翰·格林德和理查德·班德勒最先开发的神经语言编程NLP的理解。1）NLP理论认为，无意识会控制人的体验、感知过去的记忆、以及当前发生的事。

如意笔记·2024-09-01 17:26

Datawhale x李宏毅苹果书入门 AI夏令营 task03学习笔记

实践方法论训练模型的基本步骤：（如下图所示）用训练集训练模型，（最终得出来最优的参数集）将最优参数集带入模型中，用测试集测试模型（人话：将最优参数集带入原来函数中，用测试集的x值计算y值）（这个过程就叫做预测）训练过程中遇到问题的解决攻略（看下图的方式是“前序遍历”）modelbias出现问题的情况：1.看trainingdata的loss，太大；2.当你模型无论如何调整参数，训练的结果还是不够好

weixin_75033552·2024-09-01 17:22

Day285 你爱学习吗

我说：NLP考试20多道题，写的我手胳膊酸疼，不听使唤，写的

李春华_7db6·2024-09-01 12:19

周报 | 24.8.19-24.8.25文章汇总

《黑神话：悟空》石破天惊，RTX4090D飞越花果山_新智元悟空-CSDN博客OpenCV学堂|汇总|深度学习图像去模糊技术与模型-CSDN博客深度学习与NLP|

双木的木·2024-09-01 08:26

深度探索：机器学习中的序列到序列模型（Seq2Seq）原理及其应用

从语言翻译、文本摘要、语音识别到对话系统，众多自然语言处理（NLP）任务的成功解决离不开一种强大的模型架构——序列到序列（Sequence-to

生瓜蛋子·2024-09-01 08:22

【雅静的幸福空间】第86篇《养孩子，请大胆放手》

“妈妈，草帽夏令营成团了吗？”“妈妈，什么时候可以出发啊？”受疫情影响，再加上好多孩子的暑假课程都在七月份，原本7月18日的草帽夏令营因报名人数不足而取消。

雅静_1790·2024-09-01 07:18

Firefly多轮对话微调书生·浦语InternLM-7B实践

Firefly项目链接：https://github.com/yangjianxin1/Fireflyfirefly-internlm-7b模型权重：https://huggingface.co/YeungNLP

u013250861·2024-09-01 00:09

Datawhale X 李宏毅苹果书 AI夏令营进阶 Task2-自适应学习率+分类

目录1.自适应学习率1.1AdaGrad1.2RMSProp1.3Adam1.4学习率调度1.5优化策略的总结2.分类2.1分类与回归的关系2.2带有softmax的分类2.3分类损失1.自适应学习率传统的梯度下降方法在优化过程中常常面临学习率设置不当的问题。固定的学习率在训练初期可能过大，导致模型训练不稳定，而在后期可能过小，导致训练速度缓慢。为了克服这些问题，自适应学习率方法应运而生。这些方法

沙雕是沙雕是沙雕·2024-08-31 22:57

大语言模型原理与工程实践：混合微调策略

ZenandtheArtofComputerProgramming1.背景介绍1.1问题的由来随着深度学习技术的迅猛发展，大语言模型（LargeLanguageModels，LLMs）在自然语言处理（NaturalLanguageProcessing，NLP

AGI通用人工智能之禅·2024-08-31 15:13

中标 | 极客天成分布式存储软件成功中标华泰证券并行文件系统软件项目

华泰证券并行文件系统软件项目是服务于华泰证券量化投研的重点项目,是华泰证券能否取得可持续性竞争优势的关键所在,华泰证券多年深耕信用量化投研领域，基于大数据、人工智能、NLP等技术自主研发。

极客天成ScaleFlash·2024-08-31 14:31

学习课程

个人成长方面：1.家庭系统排列——慧和心理机构王良炳老师2.脉轮舞——十堰菲竼空间宋佳奕老师3.有效沟通（非暴力沟通）实操练习课程——刘运华老师（我本人）二，心理咨询师技术方面1.儿童沙盘游戏治疗2.NLP

静待花开_602f·2024-08-31 12:11

文字模型训练分析评论（算法实战）

文字模型训练，尤其是在自然语言处理（NLP）领域，是构建能够理解、解释、生成人类语言系统的核心步骤。这类模型广泛应用于文本分类、情感分析、机器翻译、聊天机器人、摘要生成等多个方面。

富士达幸运星·2024-08-31 04:55

1-pipeline()函数-transformers-python库

Transformer模型用于解决各种NLP任务，Transformers库提供了创建和使用这些模型的功能。我们先来看一看pipeline()是如何解决NLP问题。

Flora-pi·2024-08-31 04:53

Datawhale AI夏令营

一、分析CV识别任务任务分析自己研究生期间做过的大多是无监督任务，监督任务做的很少。比如，之前用过yolov5做过滑动验证码的识别，给滑动验证码的缺口打标签是项耗时费力的工作。本次任务相同，是给非机动车、机动车打标签。frame_id：不同帧event_id：一帧里面出现的不同车辆idbbox：车辆位置模型输入输出猜测1）如果识别车辆很容易，那么输入原始音频x，标出每帧的位置作为输出，记为y。放进

于弋gg·2024-08-31 04:21

小琳AI课堂：单向模型 vs 双向模型 —— 揭秘大语言模型生成文本的奥秘

今天，我们要深入探讨自然语言处理（NLP）领域中的两种基础模型架构：单向模型和双向模型。这两种模型在处理和理解语言序列（如句子）的方式上有显著差异，它们的工作原理直接影响着大语言模型生成文本的方式。

小琳ai·2024-08-31 01:29

[Datawhale#1] cv task1 - Datawhale AI夏令营

参加cv方面的培训，记录自己的一些感悟吧。报名赛事2024“大运河杯”数据开发应用创新大赛——城市治理厚德云远程算力租赁https://portal.houdeyun.cn/register?from=Datawhale可以用3090，速度很快！baselineaptinstallgit-lfsgitlfsinstallgitclonehttps://www.modelscope.cn/datas

cinboxer·2024-08-30 15:29

[Datawhale AI 夏令营][第五期]智能识别系统-Task1笔记

任务是发布在MARS大数据服务平台的2024“大运河杯”数据开发应用创新大赛——城市治理。了解智慧河长的朋友可能听说类似的项目，它们可以识别河道中出现的一些问题。这次的智能识别系统与前者有相似的地方，但这个系统将聚焦城市违规行为的智能检测，通过研究开发高效可靠的计算机视觉算法，提升违规行为检测识别的准确度，降低对大量人工的依赖，提升检测效果和效率，从而推动城市治理向更高效、更智能、更文明的方向发展

keexh·2024-08-30 15:58

DataWhale AI夏令营 2024大运河杯-数据开发应用创新赛-task2

DataWhaleAI夏令营2024大运河杯-数据开发应用创新赛YOLO(YouOnlyLookOnce)上分心得分享YOLO(YouOnlyLookOnce)YOLO算的上是近几年最火的目标检测模型了

十分钟ll·2024-08-30 15:57

【Python机器学习】NLP词频背后的含义——隐性语义分析

隐性语义分析基于最古老和最常用的降维技术——奇异值分解（SVD）。SVD将一个矩阵分解成3个方阵，其中一个是对角矩阵。SVD的一个应用是求逆矩阵。一个矩阵可以分解成3个最简单的方阵，然后对这些方阵求转置后再把它们相乘，就得到了原始矩阵的逆矩阵。它为我们提供了一个对大型复杂矩阵求逆的捷径。SVD适用于桁架结构的应力和应变分析等机械工程问题，它对电气工程中的电路分析也很有用，它甚至在数据科学中被用于基

zhangbin_237·2024-08-30 14:22

自然语言处理（NLP）与机器学习：深度探索两者的关系

自然语言处理（NLP）与机器学习：深度探索两者的关系1.自然语言处理(NLP)的概述NLP的主要任务包括：2.机器学习(ML)的概述机器学习的主要类型包括：3.NLP与机器学习的关系1.机器学习驱动NLP

听忆.·2024-08-30 10:51

Datawhale X 李宏毅苹果书AI夏令营深度学习详解进阶Task02

目录一、自适应学习率二、学习率调度三、优化总结四、分类五、问题与解答本文了解到梯度下降是深度学习中最为基础的优化算法，其核心思想是沿着损失函数的梯度方向更新模型参数，以最小化损失值。公式如下：θt+1←θt-η*∇θL(θt)其中，θ表示模型参数，η表示学习率，L表示损失函数，∇θL表示损失函数关于参数的梯度。然而，梯度下降在复杂误差表面上存在局限性。例如，在鞍点或局部最小值处，梯度接近零，导致模

z are·2024-08-30 08:14

大模型训练和推理

文章目录一、NLP基础1.Tokenizer2.positionencoding3.注意力机制与transformer架构二、大模型训练1.SFT训练2.RLHF训练3.分布式并行训练技术（1）模型并行

李明朔·2024-08-30 01:27

自然语言处理系列四十二》新词发现与短语提取》新词发现》代码实战

自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列四十二新词发现》代码实战短语提取算法原理总结自然语言处理系列四十二新词发现》代码实战新词发现是NLP

陈敬雷-充电了么-CEO兼CTO·2024-08-29 20:24

计算机毕业设计之基于Python的旅游景点评论内容分析与研究

通过运用自然语言处理（NLP）技术，清洗并预处理了这些数据，以便于后续分析。随后，采用情感分析方法来识别和量化评论中的主观态度和情绪倾向，从而判断游客的整体满意度。

微信bishe58·2024-08-29 10:49

Datawhale AI夏令营-task03

DatawhaleAI夏令营-task03笔记来源：DatawhaleAI夏令营数据增强基础数据增强是一种在机器学习和深度学习领域常用的技术，尤其是在处理图像和视频数据时。

ghost_him·2024-08-29 06:50

【机器学习-随记】使用 Slack 和 Facebook Messenger 的消息机器人实现虚拟客服人员

使用Slack和FacebookMessenger的消息机器人实现虚拟客服人员1.平台选择与集成2.消息机器人开发3.自然语言处理(NLP)4.虚拟助手功能实现5.语音助手集成6.安全与用户隐私7.测试与部署边走

听忆.·2024-08-29 06:19

致家长朋友们的一封信:

夏令营第一天太多的忙碌，太多的惊喜。相遇即是缘分，上午常规培养课里，我给宝贝们仔细讲述了班级的布置和学习用品整理与摆放，让学生了解班级文化从而喜欢上咱们1.7班。

菩提树下悟道·2024-08-29 03:48

论文：Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks

论文：Retrieval-AugmentedGenerationforKnowledge-IntensiveNLPTaskscode:https://github.com/huggingface/transformerscode

Ian_Wonder·2024-08-28 18:27

推荐频道

NLP夏令营