nlp文本分类

用Stanford corenlp进行词性标注时遇到的问题

因为毕业设计的需要，得对中英文双语语料进行词性标注了，中文我就用了jieba，英文的没找到别的工具，用了Stanfordcorenlp了，首先用一片短文试运行了一下，运行没问题，但是用我自己的语料（十万行
20c5bd2d61e1·2024-02-05 11:12

从领域外到领域内：LLM在Text-to-SQL任务中的演进之路

标题：SelectiveDemonstrationsforCross-domainText-to-SQL会议：EMNLP2023Findings链接：https://arxiv.org/abs/2310.06302
Q同学的nlp笔记·2024-02-05 11:26

ChatGPT高效提问—基础知识（NLP）

ChatGPT高效提问—基础知识（NLP）自然语言处理（NatureLanguageProcessing,NLP）是计算机科学和人工智能领域的一个重要分支，旨在使计算机能够自动处理、理解和生成人类语言。
Bruce_Liuxiaowei·2024-02-05 11:43

支持向量机

支持向量机在许多领域都有广泛的应用，如文本分类、图像识别、生物信息学、金融预测等。支持向量机的应用：（1）文本分类：支持向量机可以用于文本分类任务，如垃圾邮件过滤、情感分析、主题分类等。
小森( ﹡ˆoˆ﹡ )·2024-02-05 10:24

NLP入门系列—词嵌入 Word embedding

NLP入门系列—词嵌入Wordembedding2013年，Word2Vec横空出世，自然语言处理领域各项任务效果均得到极大提升。
不二人生·2024-02-05 10:54

自然语言处理从零到入门 分词

三、中英文分词的3个典型区别四、中文分词的3大难点五、3种典型的分词方法六、分词工具总结参考分词是NLP的基础任务，将句子，段落分解为字词单位，方便后续的处理的分析。
BlackStar_L·2024-02-05 09:24

【NLP入门教程】二、分词

分词在许多NLP任务中都有重要应用，如文本分类、情感分析和机器翻译等。2.2.1英文分词英文分词相对简单，因为单词之间通常由空格分隔。然而，仅仅依靠空格进行分词可能导致一些问题，如标点符号和缩写等。
晨星同行·2024-02-05 09:21

NLP入门系列—分词 Tokenization

NLP入门系列—分词Tokenization分词是NLP的基础任务，将句子，段落分解为字词单位，方便后续的处理的分析。
不二人生·2024-02-05 09:18

【大厂AI课学习笔记】1.5 AI技术领域（3）自然语言处理

自然语言处理：定义、关键技术、技术发展、应用场景与商业化成功一、自然语言处理的定义自然语言处理（NLP）是人工智能（AI）领域的一个重要分支，它研究的是如何让计算机理解和生成人类自然语言中的文本或语音。
giszz·2024-02-05 08:20

ChatGPT高效提问—基础知识（LM、PLM以及LLM）

这些模型属于自然语言处理领域中最强大、最先进的技术之列，并广泛用于各种NLP任务，例如文本生成、文本分类、情感分析和机器翻译等
Bruce_Liuxiaowei·2024-02-05 08:11

自我察觉，是一个好的开始

以下是NLP接龙记录：第30天:在小区停车场，看到一个外来奔驰车辆像无头苍蝇一样拐来拐去（我们停车场像迷宫），司机看到保安，眼睛放光，问说这个路口能不能出去？保安很烦躁地说:“你自己
mylittlekitten·2024-02-05 07:46

复旦大学NLP团队发布86页大模型Agent综述

复旦大学自然语言处理团队（FudanNLP）发布了一篇长达86页的综述论文，探讨了基于大型语言模型的智能代理的现状和未来。
源代码杀手·2024-02-05 06:57

为什么OpenAI会如此成功？

OpenAI之所以能够成功，可以归因于以下几个关键因素：创新研究与技术突破：OpenAI自成立以来就专注于人工智能领域的前沿研究，尤其是在自然语言处理（NLP）和深度学习领域。
科学禅道·2024-02-05 06:16

ICLR2019 | 模型训练会发生了大量的、反复的样本遗忘现象，如何解决？

每天给你送来NLP技术干货！
zenRRan·2024-02-05 05:16

预训练

在CV和NLP领域，pretraining+finetuning是常用手段。而在推荐实际应用中，预训练也有一定的作用。
shudaxu·2024-02-05 02:28

NLP_语言模型的雏形N-Gram

文章目录N-Gram模型1.将给定的文本分割成连续的N个词的组合(N-Gram)2.统计每个N-Gram在文本中出现的次数，也就是词频3.为了得到一个词在给定上下文中出现的概率，我们可以利用条件概率公式计算。具体来讲，就是计算给定前N-1个词时，下一个词出现的概率。这个概率可以通过计算某个N-Gram出现的次数与前N-1个词(前缀)出现的次数之比得到4.可以使用这些概率来预测文本中下一个词出现的可
you_are_my_sunshine*·2024-02-04 22:52

2020 年的流水账

也不是一事无成，元旦日，运行了8次医疗NLP算法实验。今天2号，整理了一篇《账户与令牌，数字货币的波粒二象性》，上周写的，终于今天发了公众号。2020年虽然慌乱惶恐，但事也做了一点，整理下，聊以自慰。
灯下鼠·2024-02-04 19:37

今日arXiv最热NLP大模型论文：像人一样浏览网页执行任务，腾讯AI lab发布多模态端到端Agent

Agent的发展成为了LLM发展的一个热点。只需通过简单指令，Agent帮你完成从输入内容、浏览网页、选择事项、点击、返回等一系列需要执行多步，才能完成的与网页交互的复杂任务。比如给定任务：“搜索Apple商店，了解iPad智能保护壳SmartFolio的配件，并查看最近的自提点位置（邮政编码90038）。”下图演示Agent如何按照在线方式逐步与Apple网站进行交互，完成任务。在最后的屏幕截图
夕小瑶·2024-02-04 16:35

加速知识检索：伯克利&DeepMind联合研究，RaLMSpec让语言模型服务飞速提升2-7倍！

近年来，随着大型语言模型（LLM）的出现，在多样化的NLP任务上取得了令人瞩目的成果。
夕小瑶·2024-02-04 16:35

今日arXiv最热NLP大模型论文：IBM研究院提出Genie方法，自动生成高质量数据集

数据是大模型的基石。但传统的数据集创建方法通常依赖人工，耗时耗力成本高，另外数据集的来源复杂，噪声大，比如新闻媒体稿或者社交媒体，数据质量难以保证。为此，IBM研究院了一种名为Genie的新方法，可以自动生成高质量的数据。作者生成了三个大规模的合成数据，包含长篇问答（LFQA）、摘要和信息提取（IE）。通过人类评估，合成数据是自然且高质量的，可与人类标注数据相媲美的。此外，作者还将基于合成数据训练
夕小瑶·2024-02-04 16:35

今日arXiv最热NLP大模型论文：引入噪声，可提升RAG检索效果超30%？？

检索增强生成（Retrieval-AugmentedGeneration，简称RAG）系统的出现，提高了LLMs回答生成的准确性。它分为两个部分:检索与生成。检索即利用检索器从海量文档中检索出与查询最相关或者最相似的段落，而生成则是LLMs针对混合查询和检索到的文档生成响应。最近关于RAG的研究也非常多，特别是对检索组件有非常多的优秀工作。今天我们介绍的这篇文档从一个特殊的角度出发，讨论检索到的文
夕小瑶·2024-02-04 16:35

今日arXiv最热NLP大模型论文：像人一样浏览网页执行任务，腾讯AI lab发布多模态端到端Agent

‍Agent的发展成为了LLM发展的一个热点。只需通过简单指令，Agent帮你完成从输入内容、浏览网页、选择事项、点击、返回等一系列需要执行多步，才能完成的与网页交互的复杂任务。比如给定任务：“搜索Apple商店，了解iPad智能保护壳SmartFolio的配件，并查看最近的自提点位置（邮政编码90038）。”下图演示Agent如何按照在线方式逐步与Apple网站进行交互，完成任务。在最后的屏幕截
夕小瑶·2024-02-04 16:04

加速知识检索：伯克利&DeepMind联合研究，RaLMSpec让语言模型服务飞速提升2-7倍

近年来，随着大型语言模型（LLM）的出现，在多样化的NLP任务上取得了令人瞩目的成果。
夕小瑶·2024-02-04 16:04

Word2Vec ——gensim实战教程

NLP领域确实是一个知识迭代特别快速的领域，每年都有新的知识冒出来。所以身处NLP领域的同学们要时刻保持住学习的状态啊。笔者又重新在B站上看了这门课程的第一二节课。这里是课程链接。
王同学死磕技术·2024-02-04 14:48

NLP自然语言处理的基本语言任务介绍

自然语言处理（NaturalLanguageProcessing，NLP）是计算机科学、人工智能和语言学领域的一个分支，它致力于使计算机能够理解、解释和生成人类语言。
人生万事须自为，跬步江山即寥廓。·2024-02-04 14:43

生成式 AI 已掀起浪潮，行业发展会怎么样？

2.生成式AI应用的基础知识：包括什么是生成式AI、其与自然语言处理（NLP）之间的关系、数据隐私保护等方面的内容。
Runwise 即能创新·2024-02-04 13:26

【使用 Python 进行 NLP】 第 2 部分 NLTK

一、说明Python有一些非常强大的NLP库，NLTK—自然语言工具包—NLTK是一个强大的开源库，用于NLP的研究和开发。它内置了50多个文本语料库和词汇资源。
无水先生·2024-02-04 12:11

Aug.13 《重塑心灵》| 想让快乐和成功找上门吗？读懂这3个字母吧！

这门学问，就叫做NLP。NLP这几个字母都代表什么意思呢？第一个字母“N”，直译是“神经”，意译是“身心”，指的是你的头脑头脑和身体连接在一起，帮助你控制感觉器官和功能系统，去维持与世界的联系。
北京杜豆豆·2024-02-04 10:35

未来5年内，人工智能将彻底改变你的商业模式

2、在自然语言处理、对话系统、机器翻译、摘要生成、问题解答、文本分类等领域有广泛的应用，为用户提供了强大的语言交互和智能化的服务。构建和训练这些大模
郭靖守襄阳【软芯民用】·2024-02-04 09:52

【文本到上下文 #10】探索地平线：GPT 和 NLP 中大型语言模型的未来

以我们之前对BERT和迁移学习的讨论为基础，将重点转移到更广阔的视角，包括语言模型的演变和未来，特别是生成式预训练转换器（GPT）及其在NLP中的重要作用。  
无水先生·2024-02-04 09:20

论文浅尝 | 大型语言模型的人类对齐

arxiv.org/abs/2307.12966概述这份综述探讨了针对大型语言模型（LLMs）的人类期望进行对齐的技术，涵盖了以下几个方面：1.数据收集：有效收集LLMs对齐所需的高质量指令的方法，包括使用NLP
开放知识图谱·2024-02-04 07:04

深度学习和大数据技术的进步在自然语言处理领域的应用

文章目录每日一句正能量前言一、深度学习在NLP中的应用二、大数据技术在NLP中的应用三、深度学习和大数据技术的影响四、应用场景后记每日一句正能量努力学习，勤奋工作，让青春更加光彩。
想你依然心痛·2024-02-04 06:41

有哪些流行的中文开源语言模型？

支持中文的流行开源语言模型有很多，这些模型在自然语言处理领域的中文任务上表现出色，包括文本分类、情感分析、机器翻译、问答系统等。以下是一些支持中文的流行开源语言模型：1.
qq_20984273·2024-02-04 06:41

举例说明自然语言处理（NLP）技术

自然语言处理（NLP）技术是一种使计算机能够理解和处理人类自然语言的领域。以下是一些常见的NLP技术的例子：文本分类：将文本按类别进行分类，例如将电子邮件归类为垃圾邮件或非垃圾邮件。
做一个AC梦·2024-02-04 04:26

开启人生新篇章

很偶然的机会，昨晚跟着邹城NLP智慧学院的好朋友去曲阜参加了马老师的落地实修课，挺有收获的！帅气的马老师讲的很好:知道了就要做！并且要持续不断的去做！才有可能改变！
爱在深秋_19·2024-02-03 21:48

2019-03-31

我很难推动他，只有他自己推动自己，把它带入NLP、以及他接触更多人，我能做的很有限。还是多看到他做到的地方吧。4、期待:自己对自己的
老龙_8457·2024-02-03 21:19

【文本到上下文 #8】NLP中的变形金刚：解码游戏规则改变者

一、说明  欢迎来到我们对不断发展的自然语言处理（NLP）领域的探索的第8章。在本期中，我们将重点介绍一项重塑NLP格局的突破性创新：Transformers。
无水先生·2024-02-03 20:22

【自然语言处理】P3 spaCy 与 NLTK（分词、词形还原与词干提取）以及 Porter 和 Snowball

目录准备工作spaCyNLTK文本分词spaCyNLTK词形还原spaCyNLTK词干提取PorterSnowballstemmers在自然语言处理（NLP）中，文本分词是将文本拆分为单词或词组的过程，
脚踏实地的大梦想家·2024-02-03 20:17

100 个 NLP 面试问题

100个NLP面试问题一、说明  对于技术磨练中，其中一项很酷的技能培训是提问。不知道答案并没有多大的错;错就错在不谷歌这些疑问。本篇就是在面试之前，您将此文档复制给自己，做一个系统的模拟实战。
无水先生·2024-02-03 19:47

2021-03-14

您好啊，这么有缘，我是专注心理教育，传递沟通技巧，帮助青春期孩子减压、抗焦虑，让更多家庭实现亲密育儿的尹继恩国际萨提亚家庭治疗师、美国应用心理学NLP执行师、国家一级播音员、国家二级心理咨询师培训3万+
b6524c2ab010·2024-02-03 19:34

NLP实践-文本分类（docker踩坑记录）

前述本篇记录来源于datawhale组织的组队学习活动，内容是中文预测训练模型泛化能力挑战赛，该比赛采用docker镜像的提交方式，提交打包好的代码镜像来运行得出预测结果。这次学习从学习怎么下载安装docker，还有docker的使用方式开始，满满的都是坑~一、WindowsDocker的安装对于Windows10家庭版系统，第一步需要确认windows10的版本，是否为2004或者更高版本。可以
撸猫摸鱼选手·2024-02-03 19:58

PyTrch深度学习简明实战33 - Transformer特征提取实现文本分类

importtorchimporttorchtext#pipinstalltorchdataimportnumpyasnpimporttorch.nnasnnimporttorch.nn.functionalasFfromtorch.utilsimportdatafromtorch.nnimportTransformerEncoder,TransformerEncoderLayer#处理文本的思路
薛东弗斯·2024-02-03 17:03

hanlp中的N最短路径分词

N-最短路径是中科院分词工具NLPIR进行分词用到的一个重要算法，张华平、刘群老师在论文《基于N-最短路径方法的中文词语粗分模型》中做了比较详细的介绍。
lanlantian123·2024-02-03 17:02

[每周一更]-(第86期)：NLP-实战操作-文本分类

NLP文本分类的应用场景医疗领域-病历自动摘要：应用：利用NLP技术从医疗文档中自动生成病历摘要，以帮助医生更快速地了解患者的状况。
ifanatic·2024-02-03 14:36

NLP入门系列—Attention 机制

NLP入门系列—Attention机制Attention正在被越来越广泛的得到应用。尤其是[BERT]火爆了之后。Attention到底有什么特别之处？他的原理和本质是什么？
不二人生·2024-02-03 13:32

钻石人生

有一天NLP叫醒了我，他告诉了我是谁，我想要干什么，我要到哪里去。这一刻我的两面性被减少了，开心比烦恼多了，敢真实的表达自己了，活的更绽放了，接纳了自己的不完美了，不在拼命的去证明自己了。
丁调调·2024-02-03 13:58

自然语言处理（NLP）—— Dialogflow ES聊天机器人

1.背景介绍这个实验室的目标是让你了解并使用Google的Dialogflow服务。Dialogflow是一个可以让你创建聊天机器人的服务，这个过程不需要或者只需要很少的编程技能。1.1账号的创建为了完成这个实验室，你需要在以下网站上创建账号：1.1DialogflowDialogflow:www.dialogflow.com（如果你有Google账号，可以直接使用它登录）；1.2ngrokngr
思诺学长·2024-02-03 12:13

丰盛日记第三天

4月24日今早晨练练了一遍NLP太极操，并实操了洒金粉，周日有一场百人的主题汇报，介绍过去一年大促业务的玩法。借着洒金粉法，让乔帮主的演讲、自信能力，也看到了自己在演讲台上的成功画面。
一剑飘红007·2024-02-03 11:51

NLP_NLP技术的演进史

文章目录起源:NLP的起源可以追溯到阿兰·图灵在20世纪50年代提出的图灵测试。图灵测试的基本思想是，如果一个计算机程序能在自然语言对话中表现得像一个人，那么我们可以说它具有智能。
you_are_my_sunshine*·2024-02-03 10:06

【NeRF和NLP】一些观察感悟，碎碎念

NeRF的paper，有几个感想：NeRF读的时候感觉和diffusion思路特别像，训练目标是一个很小很小的子步骤，大大简化了训练难度NeRF建模的是“真实”世界，其用模型隐含的存储了真实世界的体素（场）模型，而模型输出二维图片的方法本质上和模型所建模的内容无关（采用的是体素渲染的方式）。【对比大语言模型】大语言模型也是隐藏的建模了人类知识，但是大语言的模型输出并没有和模型的内容独立开来。NeR
Deno_V·2024-02-03 10:06
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他