NLP(自然语言处理)

pyspark操作示例

PYSPARK_DRIVER_CALLBACK_HOST']='127.0.0.1'PYSPARK_GATEWAY_PORT错误排查不能够链接到javaGateWay对应的ip及端口通过netstat-nlp
佛系小懒·2024-02-09 05:15

用python进行自然语言处理_用 Python 和 Stanford CoreNLP 进行中文自然语言处理

实验环境：Windows7/Python3.6.1/CoreNLP3.7.0一、下载CoreNLP二、安装stanzastanza是StanfordCoreNLP官方最新开发的Python接口。
weixin_39636696·2024-02-09 02:20

NLP学习笔记(十) 分词(下)

大家好，我是半虹，这篇文章来讲分词算法1概述所谓分词就是将文本段落分解成基本语言单位，这里的基本单位也可以称为词元在上篇文章，我们主要从分词过程的角度出发，介绍了一些不同类型的分词算法而本篇文章，我们将要从分词结果的角度出发，来介绍一些不同粒度的分词算法2按粒度划分分词算法按照粒度可以分为以下三类：词粒度、字粒度、子词粒度，下面会逐一进行讨论2.1词粒度基于词粒度的分词是最为直观的分词，这与人类理
半虹·2024-02-09 02:20

NLP学习（二）—中文分词技术

本次代码的环境：运行平台：WindowsPython版本：Python3.xIDE：PyCharm一、前言这篇内容主要是讲解的中文分词，词是一个完整语义的最小单位。分词技术是词性标注、命名实体识别、关键词提取等技术的基础。本篇博文会主要介绍基于规则的分词、基于统计的分词、jieba库等内容。一直在说中文分词，那中文分词和欧语系的分词有什么不同或者说是难点的呢？主要难点在于汉语结构与印欧体系语种差异
陈易德·2024-02-09 02:19

NLP词典切分算法

完全切分2.2正向最长匹配2.3逆向最长匹配2.4双向最长匹配3.速度测评词的定义在语言学上，词语的定义是具备独立意义的最小单位在基于词典的中文分词中，词典中的字符串就是词词的性质一、词典的加载加载HanLP
卡拉比丘流形·2024-02-09 02:19

python nltk中文_NLTK中文词性标注

1.说明学习自然语言处理，一定会参考NLTK,主要是学习它的思路,从设计地角度看看能做什么.其本质就是把语言看成字符串，字符串组，字符串集，寻找其间规律．NLTK是多语言支持的,但目前网上的例程几乎没有用
weixin_39560064·2024-02-09 02:49

使用NLTK进行自然语言处理：英文和中文示例

NaturalLanguageToolkit（NLTK）是一个强大的自然语言处理工具包，提供了许多有用的功能，可用于处理英文和中文文本数据。
茫茫人海一粒沙·2024-02-09 02:19

超实用的GPT使用三个明星技巧！

它可以把一段模糊的要求和文字解读成需求，毕竟理论上中文的自然语言处理难度是几个
赵闪闪168·2024-02-09 01:00

EMNLP 2023精选：Text-to-SQL任务的前沿进展（下篇）——Findings论文解读

导语本文记录了今年的自然语言处理国际顶级会议EMNLP2023中接收的所有与Text-to-SQL相关（通过搜索标题关键词查找得到，可能不全）的论文，共计12篇，包含5篇正会论文和7篇Findings论文
Q同学的nlp笔记·2024-02-09 01:58

LLM少样本示例的上下文学习在Text-to-SQL任务中的探索

会议：EMNLP2023Findings标题：EnhancingFew-shotText-to-SQLCa
Q同学的nlp笔记·2024-02-09 01:56

C++课程设计：单词统计器

自然语言处理：在自然语言处理领域，单词统计是一种基本的文本分析技术，可以用于文本分类、情感分析、机器翻译等应用。数据分析：在数据分析领域，单词统计可以用于分析文本数据的特征，例如词频分布、词汇多
Feelings◎·2024-02-09 00:11

如何获取 OpenAI API Key

获取到APIKey后，可以使用该凭证来进行自然语言处理、计算机视觉等人工智能相关的操作。使用OpenAIAPIKey可以方便地将人工智能功能集成到自己的应用程序中。
zzx0728·2024-02-08 21:33

Python---python网络爬虫入门实践总结

（1）资料库（2）数据分析（3）人工智能：人物画像；推荐系统：今日头条、亚马逊等；图像识别；自然语言处理为什么用python写爬虫？java：代码量很大，重构成本变大。php
maidu_xbd·2024-02-08 20:15

使用embedding实现简单的内容查找

embedding在深度学习中通常用于NLP（自然语言处理）。其作用是将文本处理成一个张量。思路通过将一个待查找文本使用分词器划分，然后使用embedding处理成张量。
南子大帅哥·2024-02-08 17:09

java多线程 封装_【原创】中文分词系统 ICTCLAS2015 的JAVA封装和多线程执行（附代码）...

首先ICTCLAS2015的传送门(http://ictclas.nlpir.org/)，其对中文分词做的比较透彻，而且有一定的可调式性。
洪文律所·2024-02-08 16:31

讲讲GPT-4模型中13万亿个token的故事

Token从字面意思上看是游戏代币，用在深度学习中的自然语言处理领域中时，代表着输入文字序列的“代币化”。那么海量语料中的文字序列，就可以转化为海量的代币，用来训练我们的模型。
科学禅道·2024-02-08 13:25

感恩日记第126天20190330

有人问我在学什么，我说在学NLP，然后大概讲了一下，我发现我自己对NL
屈玉华·2024-02-08 12:47

无法坚持写作的本质问题？就是因为你的价值观出了问题

NLP的解释是这样的。（NLP是专业术语，不懂可以百度一下）价值是事情的意义和一个人能够在事情里得到的好处。在这件事情里什么最
阿斌传媒工作室·2024-02-08 12:17

Python与自然语言处理库Gensim实战

一、Gensim简介Gensim是一款Python自然语言处理库。它能够自动化训练出一个文本语料库，然后用该语料库来训练出一个词向量模型。
心梓知识·2024-02-08 11:17

自然语言处理（NLP）——使用Rasa创建聊天机器人

1基本概念1.1自然语言处理的分类IR-BOT：检索型问答系统Task-bot：任务型对话系统Chitchat-bot:闲聊系统1.2任务型对话Task-Bot:task-orientedbot这张图展示了一个语音对话系统
思诺学长·2024-02-08 11:46

【爬虫实战】python文本分析库——Gensim

03、关键词提取04、Word2Vec嵌入（词嵌入WordEmbeddings）05、FastText嵌入（子词嵌入SubwordEmbeddings）06、文档向量化01、引言Gensim是一个用于自然语言处理和文本分析的
认真写程序的强哥·2024-02-08 11:45

Task02 消息传递图神经网络

参考链接：https://github.com/datawhalechina/team-learning-nlp/blob/master/GNN/Markdown%E7%89%88%E6%9C%AC/4
沫2021·2024-02-08 11:04

CV大（混合）模型之GLIP代码，原理解析

众所周知，随着NLP类的大模型问世，以chatgpt为代表，后续各大大厂相继出现自己的大模型，如百度的“文心一言”，华为的“盘古”，科大讯飞的“星火”，阿里的“通义千问”，商汤的“日日新”等，同样在CV
ywyErwin·2024-02-08 11:35

【NLP冲吖~】二、隐马尔可夫模型（Hidden Markov model, HMM）

0、马尔可夫模型某一状态只由前一个状态决定，即为一阶马尔可夫模型；状态间的转移依赖于前n个状态的过程，即为n阶马尔可夫模型马尔科夫链：如果St+1S_{t+1}St+1只依赖于前一时刻StS_tSt，不依赖于S1,...,St−1S_1,...,S_{t-1}S1,...,St−1，则称S1,S2,...,ST,...{S_1,S_2,...,S_T,...}S1,S2,...,ST,...为马尔
漂泊老猫·2024-02-08 11:33

自然语言处理(NLP)-第三方库(工具包)：Faiss【向量最邻近检索工具】【为稠密向量提供高效相似度搜索】【多种索引构建方式，可根据硬件资源、数据量选择合适方式】【支持十亿级别向量的搜索】

一、Faiss介绍Faiss是FacebookAI团队开源的针对聚类和相似性搜索库，为稠密向量提供高效相似度搜索和聚类，支持十亿级别向量的搜索，是目前最为成熟的近似近邻搜索库。它包含多种搜索任意大小向量集（备注：向量集大小由RAM内存决定）的算法，以及用于算法评估和参数调整的支持代码。Faiss用C++编写，并提供与Numpy完美衔接的Python接口。除此以外，对一些核心算法提供了GPU实现。相
u013250861·2024-02-08 10:07

【NLP 自然语言处理(一)---词向量】

文章目录什么是NLP自然语言处理发展历程自然语言处理模型模型能识别单词的方法词向量分词一个向量vector表示一个词词向量的表示-one-hot多维词嵌入wordembeding词向量的训练方法CBOWSkip-gram
y_dd·2024-02-08 09:56

NLP_“预训练+微调大模型”模式和Prompt/Instruct模式的异同

NLP应用人员可以根据自己的需要，对模型的头部或者部分参数进行适应性的调整，这通常涉及在相对较小的有标注数据集上进行有监督学习，让模型适应特定任务的需求。这就
you_are_my_sunshine*·2024-02-08 09:54

NLP_Seq2Seq编码器-解码器架构

定义编码器和解码器类4.定义Seq2Seq架构5.训练Seq2Seq架构6.测试Seq2Seq架构归纳Seq2Seq编码器-解码器架构小结Seq2Seq架构起初，人们尝试使用一个独立的RNN来解决这种序列到序列的NLP
you_are_my_sunshine*·2024-02-08 09:53

探索NLP中的N-grams：理解，应用与优化

N-grams广泛用于文本挖掘和自然语言处理任务。示例通过计算每个唯一的n元语
冷冻工厂·2024-02-08 09:23

论文浅尝 | 在图上思考：基于知识图谱的深度且负责的大语言模型推理

笔记整理：孙硕硕，东南大学硕士，研究方向为自然语言处理链接：https://arxiv.org/abs/2307.076971.动机本文的动机是大型语言模型在各种任务中取得了较大的进步，但它们往往难以完成复杂的推理
开放知识图谱·2024-02-08 09:22

自然语言NLP

什么是NLPNLP（NaturalLanguageProcessing）是自然语言处理的缩写，是计算机科学和人工智能领域的一个研究方向。NLP致力于使计算机能够理解、处理和生成人类自然语言的能力。
Flying_Fish_roe·2024-02-08 09:50

详解各种LLM系列｜LLaMA 1 模型架构、预训练、部署优化特点总结

作者|Sunnyyyyy整理|NewBeeNLPhttps://zhuanlan.zhihu.com/p/668698204后台留言『交流』，加入NewBee讨论组LLaMA是Meta在2023年2月发布的一系列从
kaiyuan_sjtu·2024-02-08 07:29

【最大似然估计】详解概率论之最大似然估计

本文收录于《深入浅出讲解自然语言处理》专栏，此专栏聚焦于自然语言处理领域的各大经典算法，将持续更新，欢迎大家订阅！
程序遇上智能星空·2024-02-08 05:22

Pytorch学习记录-GEC语法纠错

理论方面的论文也都是英文的，国内这块做的真的不行啊……学习计划GEC概念AlibabaatIJCNLP-2017Task1:EmbeddingGrammaticalFeaturesintoL
我的昵称违规了·2024-02-08 05:49

Vision Transformer（VIT）

VisionTransformer（VIT）VisionTransformer（ViT）是一种新兴的图像分类模型，它使用了类似于自然语言处理中的Transformer的结构来处理图像。
宫本文藏·2024-02-08 03:09

2021-7-31晨间日记

今天是什么日子起床：7：00就寝：天气：晴朗，有云心情：平静纪念日：叫我起床的不是闹钟是梦想年度目标及关键点：练就心理咨询师的硬本领本月重要成果：熟练10个nlp练习技能今日三只青蛙/番茄钟成功日志-记录三五件有收获的事务财务检视花了
快乐悦读·2024-02-08 03:50

深度学习教程 | 自然语言处理与词嵌入

深度学习教程|自然语言处理与词嵌入ShowMeAI作者：韩信子@ShowMeAI教程地址：www.showmeai.tech/tutorials/3…本文地址：www.showmeai.tech/article-det
Dashesand·2024-02-08 03:22

基于LSTM模型的时间序列预测（车厢重量预测），Python中Keras库实现LSTM，实现预测未来未知数据,包括参数详解、模型搭建，预测数据

相较于传统的循环神经网络，LSTM具有更好的长期记忆能力和更强的时间序列建模能力，因此在各种自然语言处理、语音识别、时间序列预测等任务中广泛应用。
Uncle_Tom09·2024-02-08 02:29

【前沿技术杂谈：深度学习新纪元】探索人工智能领域的革命性进展

探索人工智能领域的革命性进展深度学习的进展深度学习的基本原理和算法深度学习的历史发展神经网络的基本构成神经元层次结构激活函数关键技术和算法反向传播算法卷积神经网络（CNN）循环神经网络（RNN）长短期记忆网络（LSTM）实际应用案例图像识别语音到文本转换自然语言处理深度学习的应用实例自然语言处理
jcfszxc·2024-02-08 02:48

学习PyTorch中的注意力机制和Transformer架构

1.背景介绍注意力机制和Transformer架构是深度学习领域的重要概念和技术，它们在自然语言处理、计算机视觉等领域取得了显著的成果。
禅与计算机程序设计艺术·2024-02-08 02:13

我把整个秋招 NLP 算法岗的面经都在这里分享了！

年底了，最近技术群组织了一次AI算法岗面试讨论会，今天分享一位特别棒的同学，把整个秋招的NLP算法岗面经面试经历都共享了出来。如果你想加入我们的讨论群，见文末。
Python算法实战·2024-02-08 01:29

python实现文本情感分析

以下是一个简单的Python示例，使用了TextBlob库，这是一个用于处理文本数据的自然语言处理库。
程序员奇奇·2024-02-08 00:09

如何培养孩子的良好习惯？听听专家来给你支招

同时也是“袋鼠想学首席讲师”以及“NLP亲子导师”、“萨提亚家庭治疗师”、“家庭系统排列治疗师”、“国家二级心理咨询师”、“四川卫视专访家庭教育专家”.......讲座还未正式开始，广大家长陆续来到活动现场
袋鼠想学·2024-02-08 00:05

论文智能降重软件 神码ai

这些软件利用先进的自然语言处理和机器学习技术，帮助我们快速识别和修改
Leospanb87·2024-02-07 22:01

文心一言论文查重重复率高吗

以下是针对论文重复率高的情况，提供一些修改建议和技巧，可以借助此类工具：文心一言论文查重重复率高吗文心一言是百度推出的AI语言模型，具有强大的自然语言处理能力。
Leospanb87·2024-02-07 22:31

三种内感官之我是感觉型

NLP很不喜欢把人定型，因而我们会通过很多的途径来判断这个人，到底是属于哪个内感官的人。恰恰相反的是
幸福中昀人·2024-02-07 22:51

自然语言处理中的embeddings

1.背景自2010年代初以来，嵌入一直是自然语言处理（NLP）的主流热词之一。将信息编码成低维向量表示，在现代机器学习算法中很容易集成，这在NLP的发展中起到了核心作用。
一个好梦·2024-02-07 19:21

HanziNLP 软件包介绍-中文自然语言处理，建模和可视化

HanziNLP一个用户友好且易于使用的自然语言处理包，专为中文文本分析、建模和可视化而设计。HanziNLP中的所有功能都支持中文文本，并且非常适用于中文文本分析！
miracles_S·2024-02-07 19:20

NLP中的嵌入和距离度量

NLP中的嵌入嵌入是连续向量空间中对象、单词或实体的数值表示。在NLP中，词嵌入捕获词之间的语义关系，使算法能够更好地理解文本的上下文和含义。
deephub·2024-02-07 19:50

【自然语言处理-工具篇】spaCy＜1＞--介绍及安装指南

目录前言安装指南pipcondaspaCy升级总结前言spaCy是一个开源的自然语言处理库，用于处理和分析文本数据。它提供了许多功能，包括分词、词性标注
大表哥汽车人·2024-02-07 19:50
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他