sed-文本处理

【NLP】文本分类算法-基于字符级的无词嵌入双向循环神经网络（双向 GRU）

用户昵称、地址啥的，这种绝大部分风控场景都能遇到；关系网络的节点向量化，基本也是文本处理的思路；行为序列，也能用文本的知识去处理，能捕捉非常有趣模式。
风度78·2023-01-25 07:12

NLP（一）——文本处理

近期在阅读跨模态检索相关论文时，碰到很多处理文本的网络结构以及一些名词不是很了解，通过我的学习现在将这些知识点记录总结。本文中出现的图片来自于我学习的视频截屏：https://www.bilibili.com/video/BV1BR4y1g7LM?p=25&spm_id_from=pageDriver目录1、WordSegmentation（分词）分词工具：Jieba分词（常用），SnowNLP，
秃头研究生·2023-01-25 07:41

C 程序眼中的 Unicode

去年写了一篇文章「在C程序中处理UTF-8字符串」，介绍了如何使用GLib提供的UTF-8字符串处理函数来实现基本的UTF-8文本处理。
·2023-01-24 19:41

Datawhale--组队学习第12期--python爬虫基础学习---task0/task1环境配置和网页请求基础

先修知识：task0(基本类库安装，git，anaconda，文本处理)Task0(前置)：需要自己安装有关环境，学习git(b站)，下载有关driverChromedriver作用驱动浏览器（一个驱动程序
A half moon·2023-01-24 15:11

awesome-python

awesome-python是vinta发起维护的Python资源列表，内容包括：Web框架、网络爬虫、网络内容提取、模板引擎、数据库、数据可视化、图片处理、文本处理、自然语言处理、机器学习、日志、代码分析等
yykrlc·2023-01-24 11:20

劝你别把开源的AI项目写在简历上了！！！

01京东AI项目实战课程安排覆盖了从经典的机器学习、文本处理技术、序列模型、深度学习、预训练模型、知识图谱、图神经网络所有必要的技术。
视学算法·2023-01-23 08:03

4个可以写进简历的京东 NLP 项目实战

01京东AI项目实战课程安排覆盖了从经典的机器学习、文本处理技术、序列模型、深度学习、预训练模型、知识图谱、图神经网络所有必要的技术。
woshicver·2023-01-23 08:32

京东 | AI人才联合培养计划（NLP项目实战）

01京东AI项目实战课程安排覆盖了从经典的机器学习、文本处理技术、序列模型、深度学习、预训练模型、知识图谱、图神经网络所有必要的技术。
深度强化学习实验室·2023-01-23 08:21

详解京东商城智能对话系统（生成+检索）

01京东AI项目实战课程安排覆盖了从经典的机器学习、文本处理技术、序列模型、深度学习、预训练模型、知识图谱、图神经网络所有必要的技术。
PaperWeekly·2023-01-23 08:20

京东 | AI人才联合培养计划！

01京东AI项目实战课程安排覆盖了从经典的机器学习、文本处理技术、序列模型、深度学习、预训练模型、知识图谱、图神经网络所有必要的技术。
Datawhale·2023-01-23 08:48

多词表达抽取

基于位置标签的复合名词抽取论文核心算法：文本处理预处理过后，在此基础上对每个词条添加位置标签，形成每个词条的位置标签集，在进行停用词过滤以及同义词的合并处理，得到原子词条集；依照词条位置信息计算复合词条之间的同现度与相邻度
Chen__Wu·2023-01-21 16:02

【Qt】富文本处理简单介绍

文章目录Qt富文本处理富文本文档结构文本块QTextBlock表格、列表、图片查找功能语法高亮与HTML参考《QtCreator快速入门(第三版)》。
小地瓜重新去华容道工作·2023-01-21 07:08

[转]awsome-python

awesome-python是vinta发起维护的Python资源列表，内容包括：Web框架、网络爬虫、网络内容提取、模板引擎、数据库、数据可视化、图片处理、文本处理、自然语言处理、机器学习、日志、代码分析等
dejing6575·2023-01-19 14:13

基于python的贝叶斯分类算法预测_python机器学习:3：朴素贝叶斯算法

它在条件独立假设的基础上，使用贝叶斯定理构建算法，在文本处理领域有广泛的应用。公式如下：1.2朴素贝叶斯的简单应用：过去的7天当中，有3天下雨，4天没有下雨。
yisac·2023-01-14 20:47

谷歌提出 RNN 版 Transformer，或为长文本建模的当前最优解

文|小轶今天给大家介绍一篇谷歌的最新工作，解决的是Transformer的长文本处理问题。
夕小瑶·2023-01-14 09:26

tensorflow一维卷积输入_TensorFlow学习笔记(10):CNN文本处理(一维卷积)

在TensorFlow学习笔记(8):CNN实现中我们以图像处理为场景对卷积神经网络进行了介绍，包括了卷积操作和pooling操作的实现，其中卷积和pooling都采用了二维的操作，输入数据是四维的，shape=[batch,in_height,in_width,in_channels]，例如图像像素为28*28,RGB三色道表示，batch取100，那么shape=[100,28,28,3]在处
weixin_39631261·2023-01-13 10:58

软件测试|30 分钟轻松搞定正则表达式基础

正则表达式在文本处理中相当重要，各大编程语言中均有支持（跟Linux三剑客结合更是神兵利器）。
·2023-01-11 16:13

longformer长文本处理

链接：https://arxiv.org/pdf/2004.05150.pdfgithub:https://github.com/allenai/longformerAbstract由于自注意力机制，Transformer模型不能很好地处理长文本；为了处理这个问题，本文提出了Longformer，它的注意力机制是将局部注意力和任务驱动的全局注意力进行了结合。IntroductionTransfor
rucieryi369·2023-01-11 08:08

python中文文本分词_Python中文文本分词、词频统计、词云绘制

会使用到的中文文本处理包包括：wordcloud,jieba，re(正则表达式),collections。1准备工作导入相关的包，读取相关数据。
赵伊辰·2023-01-10 06:19

自然语言处理笔记目录

文章链接自然语言处理（一）：Pytorch的基础用法传送门自然语言处理（二）：文本预处理之文本处理的基本方法传送门自然语言处理（三）：文本预处理之文本张量表示方法传送门自然语言处理（四）：文本预处理之文本数据分析传送门自然语言处理
GeniusAng丶·2023-01-09 12:33

自然语言处理之文本处理步骤

1，首先将全部单词转换为小写，并清除标点符号，将其标准化2.用分词器将这个段落或者句子分解成单个词3.删除停止词（如：go,to,i,the,that)等以减少需要处理的词汇4.有必要的话可以同时进行词干提取和词性还原，将词还原成词根或者词干，常见的步骤是先进行词根还原和词干提取。
PCChris95·2023-01-09 10:03

整理了上千个Python类库，简直太酷啦！

数据处理文本处理chardet：字符编码检测器，该库可以检测文本、网页、xml等多种文件格式的编码difflib：文本差异比较ftfy：使程序更加完美的支持Unicode编码fuzzywuzzy
小詹学 Python·2023-01-08 13:01

语义分析的一些方法(中篇)

一个文本串，对其进行分词和重要性打分后（当然还有更多的文本处理任务），就可以开始更高层的语义分析任务。2.1TopicModel首先介绍主题模型。说到主题模型，第一时间会想到pLSA，NMF，LDA。
UMaker·2023-01-08 06:03

语义分析的方法简述二

一个文本串，对其进行分词和重要性打分后（当然还有更多的文本处理任务），就可以开始更高层的语义分析任务。2.1TopicModel首先介绍主题模型。说到主题模型，第一时间会想到pLSA，NMF，LDA。
AI深入浅出·2023-01-08 06:29

NLP语料库构建（corpus）

1文本加载文本处理函数学习：re.sub():正则表达式替换函数，对于输入的一个字符串，利用正则表达式（的强大的字符串处理功能），去实现（相对复杂的）字符串替换处理，然后返回被替换后的字符串，实现比普通字符串的
自在犹仙·2023-01-07 21:26

文本处理技能与文本数据清洗、提取、分词与统计

目录前言一、Linux的一些常用命令？二、Python的一些常用操作三、常用的一些自然语言处理工具包3-1、nltk工具包3-1-1、安装3-1-2、nltk的使用3-2、jieba工具包‘3-2-1、jieba工具包安装3-2-2、jieba使用3-2-3、常见词性分类四、常用的一些分词模型4-1、朴素贝叶斯4-2、N-gram模型五、可视化工具5-1、Seaborn5-2、Word六、文本特征
ㄣ知冷煖★·2023-01-07 15:10

Python从菜鸟到大神(1)

·2.Python的用途有:Web开发网络爬虫人工智能数据分析自动化运维系统编程图形处理数学处理文本处理数据库编程网络编程多媒体应用游戏开发以上就是Python的用途了。
刘竣熙·2023-01-07 14:31

python-文本处理和正则表达式

这篇文章就当作一个备忘录，用来记录遇到的文本处理问题，其解决的办法，重点是正
weixin_34111790·2023-01-07 09:59

python 文本处理 保留中英文和标点符号_python-文本处理和正则表达式

这篇文章就当作一个备忘录，用来记录遇到的文本处理问题，其解决的办法，重点是正
weixin_39692253·2023-01-07 09:59

One_hot和Word2Vec两种词向量方法的原理及比较

对于文本处理，首要的任务是要对非结构化数据进行结构化处理，由此诞生了词向量表示的方法，再众多词向量表示方法中，尤其以One_hot和word2vec两种方法最常用，下面也针对这俩方法进行阐述One_hot
阴天了·2023-01-07 07:01

Linux常用命令

servicefirewalldstatus2、查看主机名：hostname3、拷贝文件cp-r(拷贝文件夹，递归拷贝)远程拷贝scp4、命令来查看到Linux系统中所有的环境变量env5、su切户用户6、文本处理三剑客
mynameisjinxiaokai·2023-01-06 21:12

Python文本处理（1）——文本表示之词袋模型（BOW）（2）

上一篇总结了文本处理最基础的one-hot编码，这篇再来整理下基础的词袋模型（bagofword），以供复习（对应1127_文本处理之词袋模型（BOW））概述文本text=['TodayisFridayitisSunny
Robin_Pi·2023-01-06 10:35

python脚本中如何从外部传递参数的处理方法

1.流文本处理这种方法适用于修改一下文件中的内容，配合linux命令非常方便，举一个例子，我们需要从一个binlog文件中找到该里面最大的事物，我们要配合mysqldump来做：mysqlbinlog-v
笨猪起飞·2023-01-06 08:41

python二级第三方库汇总

目录pyinstaller库jieba库wordcloud库创建WordCloud对象创建WordCloud对象的参数WordCloud方法第三方库纵览网络爬虫数据分析文本处理用户图形界面机器学习Web
矛盾様·2023-01-06 08:19

探索用于NLP的Gensim库

Gensim是一个用于文本处理的库，可以用于计算文本之间的相似度，以及生成类似的文本。文章目录GensimGensim设计原则Gensim安装Gensim应用Gensim学习建议Gensi
Mr数据杨·2023-01-05 10:11

NLP自然语言处理Gensim词向量word2vec常见应用

Gensim是一个用于自然语言处理（NLP）的开源Python库，它可以帮助你进行文本处理。Gensim有许多优秀的特性，使它成为进行NLP文本处理的理想选择。
Mr数据杨·2023-01-05 10:11

Transformers库Question Answering任务样例

文章目录Transformers库QuestionAnswering任务样例前言一、在QA任务中的BERT微调加载数据集数据预处理长文本处理微调模型评
名字填充中·2023-01-05 05:59

php gd库 教程,php图像图形的操作GD库的使用基础教程

PHP除了能进行文本处理以外，通过GD库，可以对JPG、PNG、GIF、SWF等图片进行处理。GD库常用在图片加水印，验证码生成等方面。PHP默认已经集成了GD库
孙悦礼·2023-01-05 03:50

MySQL必知必会知识点整理

ORDERBY排序方向过滤数据使用WHERE子句操作符组合WHERE子句`IN`操作符`NOT`操作符用通配符进行过滤`LIKE`操作符技巧用正则表达式进行搜索创建计算字段拼接执行算术计算使用数据处理函数函数类型文本处理函数日期和时间处理函数数值处理函数汇总数据聚集函数聚集不同值分组数据创建分组
11ze·2023-01-05 02:27

一文读懂文本处理中的对抗训练

一文读懂文本处理中的对抗训练本作作者：追一科技算法研究员Leo,算法工程师WenZe背景与研究意义深度学习技术的快速发展，大幅提升了众多自然语言处理任务（比如文本分类，机器翻译等）的效果，越来越多的深度学习模型被用于现实生活中
追一科技·2023-01-04 11:48

一文读懂深度学习中文本处理的4种方式

一、序言文本处理方式是深度学习领域中自然语言处理的基础，即把文本转变成计算机识别的语言过程。转变之后才能用算法做后续的文本分析和理解。
L先生AI课堂·2023-01-04 11:17

nlp知识点总结（上）

二、语料库加工1.文本处理垃圾格式问题，大小写，标记化，句点、单撇号、连字符，词干化，句子边界。2.格式标注与数据标注三、语料库应用——统计分析1.Zipf
m0_59989429·2023-01-03 17:01

可视化文本处理模板代码

#encoding:utf-8#导入库-------------------------------importrequestsimportpandasaspdimportmathimportreimportjiebafromcollectionsimportCounterfromwordcloudimportWordCloudimportmatplotlib.pyplotaspltimportr
甜辣uu·2023-01-03 11:23

整理了上千个 Python 工具库，涵盖24个大方向

今天就给大家分享一下这几天的战果，宵衣旰食，不眠不休的整理了近千个Python库，梳理不易啊，收藏的同时，记得点赞支持文章目录技术提升1、数据处理文本处理特殊文本处理HTML/XML解析文件处理配置文件处理文档相关日志管理日期和时间
Python数据挖掘·2023-01-02 07:50

NLP-文本处理：依存句法分析（主谓、动宾、动补...）【基于“分词后得到的词语列表A”+“A进行词性标注后得到的词性列表B”来进行依存句法分析】【使用成熟的第三方工具包】

句法分析（syntacticparsing）是自然语言处理中的关键技术之一，它是对输入的文本句子进行分析以得到句子的句法结构的处理过程。对句法结构进行分析，一方面是语言理解的自身需求，句法分析是语言理解的重要一环，另一方面也为其它自然语言处理任务提供支持。例如句法驱动的统计机器翻译需要对源语言或目标语言（或者同时两种语言）进行句法分析。第三方工具包：哈工大LTP首页哈工大LTP4文档语义角色类型依
u013250861·2022-12-31 19:53

NLP | wordcloud 词云绘制

词云绘制准备1.1相应python库的安装1.2文件准备知识储备1.1jieba1.2wordcloud使用wordcloud绘制1.1词频分析1.1.1python库导入1.1.2文件内容读取1.1.3文本处理
MissMango0820·2022-12-30 21:29

自然语言处理之——文本向量化

无论是中文还是英文，词语都是表达文本处理的最基本单元。当前阶段，对文本向量化大部分的研究都是通过词向量化实现的。二．向量化算法word2vec词袋(
xiao | yang·2022-12-30 11:33

专注文本处理，达观数据完成B轮融资，累计融资超2亿元

https://blog.csdn.net/dQCFKyQDXYm3F8rB0/article/details/8433732611月22日，达观数据宣布成功完成1.6亿元B轮融资，由宽带旗下基金晨山资本领投，元禾重元、联想之星、钟鼎资本及老股东等跟投。达观数据总部位于上海张江高科技园区，目前已在北京、成都、深圳、西安等地开设分支机构。2015年获真格基金领投，众麟资本和掌门科技跟投的1000万元
喜欢打酱油的老鸟·2022-12-30 11:18

词向量技术原理及应用详解（一）

无论中文还是英文，词语都是表达文本处理的最基本单元。当前阶段，对文本向量化都是通过词向量化实现的。当然也有将文章或者句子作为文本处理的基本单元，像doc2vec和str2vec技术。接下
Steven灬·2022-12-30 01:33

北京理工大学-嵩天python语言程序设计-9-Python计算生态概览

概览Python计算生态，看见更大的世界实践能力-初步编写带有计算生态的复杂程序9.1从数据处理到人工智能9.1.1Python库之数据处理9.1.2Python库之数据可视化9.1.3Python库之文本处理
forever luckness·2022-12-29 15:53
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他