文本处理

超全的 Linux Shell 文本处理工具集锦

本文将介绍Linux下使用Shell处理文本时最常用的工具：find、grep、xargs、sort、uniq、tr、cut、paste、wc、sed、awk；提供的例子和参数都是最常用和最为实用的；对shell脚本使用的原则是命令单行书写，尽量不要超过2行；如果有更为复杂的任务需求，还是考虑python吧.1、find文件查找查找txt和pdf文件find . ( -name "*.txt" -
·2021-04-03 10:55

缓冲区和文件

倘若将Elisp的应用场景固定为文本处理，学习Elisp，我认为无需像学习其他任何一门编程语言那样亦步亦趋，所以本章直接从文件读写开始入手，通过一些小程序，建立对Elisp语言的初步感受。
·2021-04-03 00:38

缓冲区和文件

倘若将Elisp的应用场景固定为文本处理，学习Elisp，我认为无需像学习其他任何一门编程语言那样亦步亦趋，所以本章直接从文件读写开始入手，通过一些小程序，建立对Elisp语言的初步感受。
·2021-04-03 00:58

走在 Elisp 的歧路上 · 01 缓冲区和文件

倘若将Elisp的应用场景固定为文本处理，学习Elisp，我认为无需像学习其他任何一门编程语言那样亦步亦趋，所以本章直接从文件读写开始入手，通过一些小程序，建立对Elisp语言的初步感受。
·2021-04-01 22:43

文本分类模型中的“蒸”功夫

本文首发于：行者AI2018年Bert的横空出世给自然语言处理带来了巨大的突破，Bert及其衍生模型在多个文本处理下游任务中达到了SOTA的结果。
·2021-04-01 17:59

还记得这门古老的编程语言么，送你一份perl书单！

Perl只是作为一个功能强大的文本处理工具，不过很快发展成为一种通用的编程语言，可以帮助成千上万的程序员、系统管理员，以及像你一样的技术爱好者轻松完成工作。人们早已经翘首以待这本“大骆驼
·2021-03-20 20:00

送你一份perl书单

Perl只是作为一个功能强大的文本处理工具，不过很快发展成为一种通用的编程语言，可以帮助成千上万的程序员、系统管理员，以及像你一样的技术爱好者轻松完成工作。人们早已经翘首以待这本“大骆驼
·2021-03-20 20:15

【python基础】15-练习

变量和打印函数控制结构列表文件文本处理混杂对于某些问题，提供assert语法的Python程序会自动测试你在练习文件目录中的解决方案，比如练习Q2a-整数长度。该目录也包含了样例输入文本文件。
王诗翔·2021-03-12 00:08

SQL练习题二十二-每月十题(一)

该主题告一段落,市面上的SQL题大致我这个主题基本都囊括了,入门绰绰有余,剩余的,这个主题,我争取每个月更新一篇,主要是文本处理,窗口处理,多表处理,多条件处理,另类写法SQL/HQL,其中的题目来源来自面试题公众号社区
冰菓_·2021-02-28 13:23

探寻文本智能未来式，文心重磅升级文本处理功能

近日，百度语义理解平台文心（ERNIE）迎来重磅升级。新增文本实体抽取任务，升级定制文本分类网络，并在训练能力、部署方式等方面进行了一系列改进，进一步提升了NLP模型开发效率，开发者可在零门槛AI开发平台EasyDL体验文心新功能。文心（ERNIE）是依托百度深度学习平台飞桨打造的语义理解技术与平台，集先进的预训练模型、全面的NLP算法集、端到端开发套件和平台化服务于一体，为企业和开发者提供一整套
·2021-02-23 15:47

python中的字符串文本必须用什么括起来_Python标准库---18、文本处理服务：string 常见的字符串操作...

字符串常量此模块中定义的常量为：string.ascii_letters下文所述ascii_lowercase和ascii_uppercase常量的拼连。该值不依赖于语言区域。string.ascii_lowercase小写字母'abcdefghijklmnopqrstuvwxyz'。该值不依赖于语言区域，不会发生改变。string.ascii_uppercase大写字母'ABCDEFGHIJKL
作词人张汇泉·2021-02-20 06:06

shell文本处理三剑客之sed详解

文本处理：sed（StreamEDitor：流编辑）sed是一种在线的、非交互式的编辑器，它一次处理一行内容。
zy.小强·2021-02-19 12:35

iOS开发之Foundation

Foundation框架为应用程序和框架提供了基础功能，包括数据存储和持久性，文本处理，日期和时间计算，排序和过滤以及网络。
·2021-02-10 18:13

Linux三剑客之grep命令

grep是Linux中最常用的"文本处理工具"之一，grep与sed、awk合称为Linux中的三剑客。grep的全称为：GlobalsearchRegularExpressionand
钟离惜·2021-02-05 15:53

pytorch实现IMDB数据集情感分类（全连接层的网络、LSTM）

4.2LSTM4.3训练和测试五、完整代码5.1全连接层实现分类完整代码5.2LSTM分类完整代码5.3测试结果一、任务描述使用Pytorch相关API，设计两种网络结构，一种网络结构中只有全连接层，一种使用文本处理中最为常用的
我唱歌比较走心·2021-01-30 13:41

（九) 正则表达式——文本处理（用s///替换、split与join函数、列表上下文中的m//、非贪婪量词、文件更新等）

文章目录一、s///替换1.1、替换的规则要点1.2、代码示例二、split与join函数——字符串拆分与组合三、列表上下文中的m//四、非贪婪量词——加问号（？）五、跨行的模式匹配——/m修饰符六、一次性更新多个文件一、s///替换1.1、替换的规则要点不同的定界符——s///的定界符同qw//和m//一样可以改变，如s###，s{}{}，s等写法；用/g进行全局替换-——s///默认只进行一次
Mr.Marc·2021-01-26 19:58

类vue将template转为vnode的流程

）执行完毕后调用parseHTML函数中填写的options.start,设置根元素，父级元素，并储存当前element于stack数组中，方便结束标签函数执行时的取出处理核心函数parseText（文本处理
·2021-01-24 00:50

《SQL必知必会》(7，8)：创建计算字段、使用数据处理函数

(4，5，6)：过滤数据、高级数据过滤、通配符过滤文章目录第七课：创建计算字段7.1计算字段7.2拼接字段使用别名7.3执行算数计算7.4小结第八课：使用数据处理函数8.1函数8.2使用函数8.2.1文本处理函数
Bruce.vvu·2021-01-24 00:34

cut命令的使用实例

cut命令用于文本处理。通过选择列，可以使用此命令从文件中提取文本的一部分。cut命令的选项Cut基本语法：cutOPTION...[FILE]...选项：-f:通过指定哪一个字段进行提取。
·2021-01-23 14:29

正则表达式匹配所有内容_python处理文本文件——正则表达式

掌握文本处理的基本技能对于电路设计者来说十分必要，比如网表替换、仿真结果提取等，都需要一定的文本处理能力，那么面对数千行甚至数万行的文本内容你会如何操作呢？
记录生活的蛋黄派·2021-01-20 14:06

cut命令的使用实例

cut命令用于文本处理。通过选择列，可以使用此命令从文件中提取文本的一部分。cut命令的选项Cut基本语法：cutOPTION...[FILE]...选项：-f:通过指定哪一个字段进行提取。
刘遄·2021-01-19 13:56

百度开源两款句法分析应用工具，提升文本处理任务效果

欢迎关注【百度NLP】官方公众号，及时获取自然语言处理领域核心技术干货！！阅读原文：https://mp.weixin.qq.com/s/4ar6jHtF3b_6DIScB2IuuQ继2020年8月份中文依存句法分析工具DDParser发布后，百度于近日发布两款句法分析结果应用工具——基于句法分析的隐式向量表示工具和显式结构表示工具。句法分析利用句子中词与词之间的关系来表示词语的句法结构信息，如“
百度-NLP·2021-01-14 11:38

分词Python实现_文本处理NLP：分词与词云图

上次，我们分享了文本处理的方方面面的知识点，比较宏观，这次我们就其中的一点“分词”展开。一、为什么要分词“行文如流水”形容的是诗文、书法自然流畅不受拘束。
飛毛腿岡薩雷斯·2021-01-14 02:17

关于NLP相关技术全部在这里：预训练模型、图神经网络、模型压缩、知识图谱、信息抽取、序列模型、深度学习、语法分析、文本处理...

大家都知道NLP近几年非常火，而且发展也特别快。那些耳熟的BERT、GPT-3、图神经网络、知识图谱等技术实际上也就是这几年发展起来的，特别像图神经网络在这两年间取得了飞速的发展。我们正处在信息爆炸的时代、面对每天铺天盖地的新的网络资源和论文、很多时候我们面临的问题并不是缺资源，而是找准资源并高效学习。但很多时候你会发现，花费大量的时间在零零散散的内容上，但最后发现效率极低，浪费了很多宝贵的时间。
PaperWeekly·2021-01-10 18:46

Linux 命令 | 常用命令之 cut

目录一、基本概念二、语法格式和参数2.1语法格式2.2参数三、实例讲解3.1-d和-f参数3.2-b参数3.3-c参数四、总结五、参考文献cut是Linux文本处理命令中比较简单的命令，没有复杂的参数，
Linux猿·2021-01-08 22:12

pandas-task08-文本数据.md

文章目录一、str对象1.str对象的设计意图2.[]索引器3.string类型二、正则表达式基础1.一般字符的匹配2.元字符基础3.简写字符集三、文本处理的五类操作1.拆分2.合并3.匹配4.替换5.
Alex好好干饭·2021-01-06 22:40

Pandas进阶捌 文本处理

Pandas进阶捌文本处理pandas进阶系列根据datawhale远昊大佬的joyfulpandas教程写一些自己的心得和补充本文部分引用了原教程，并参考了《利用Python进行数据分析》pandas
嫌疑人Y的执事·2021-01-06 21:17

Day9-Python文本数据(DataWhale)

__version__)1.2.0一、str对象1.str对象的设计意图(1)str对象是定义在Index或Series上的属性，专门用于逐元素处理文本内容(2)对一个序列进行文本处理，首先需要获取其str
liying_tt·2021-01-06 15:02

关于NLP相关技术全部在这里：预训练模型、图神经网络、模型压缩、知识图谱、信息抽取、序列模型、深度学习、语法分析、文本处理...

大家都知道NLP近几年非常火，而且发展也特别快。那些耳熟的BERT、GPT-3、图神经网络、知识图谱等技术实际上也就是这几年发展起来的，特别像图神经网络在这两年间取得了飞速的发展。我们正处在信息爆炸的时代、面对每天铺天盖地的新的网络资源和论文、很多时候我们面临的问题并不是缺资源，而是找准资源并高效学习。但很多时候你会发现，花费大量的时间在零零散散的内容上，但最后发现效率极低，浪费了很多宝贵的时间。
文文学霸·2021-01-04 12:00

ElasticSearch 重点梳理

倒排索引单词词典文档所有单词B+倒排列表文档ID词频TF位置-语句搜索偏移-高亮Analyzer分词CharacterFilter-Tokenizer-TokenFilter对原始文本处理按照规则切分将切分的单词进行加工
懒无趣·2021-01-03 23:57

第八章 文本数据

三、文本处理的五类操作文本处理的五类基本操作拆分使用split函数对字符串
陈易男·2021-01-03 17:43

关于NLP相关技术全部在这里：预训练模型、图神经网络、模型压缩、知识图谱、信息抽取、序列模型、深度学习、语法分析、文本处理...

大家都知道NLP近几年非常火，而且发展也特别快。那些耳熟的BERT、GPT-3、图神经网络、知识图谱等技术实际上也就是这几年发展起来的，特别像图神经网络在这两年间取得了飞速的发展。我们正处在信息爆炸的时代、面对每天铺天盖地的新的网络资源和论文、很多时候我们面临的问题并不是缺资源，而是找准资源并高效学习。但很多时候你会发现，花费大量的时间在零零散散的内容上，但最后发现效率极低，浪费了很多宝贵的时间。
l7H9JA4·2020-12-30 18:10

使用循环神经网络RNN进行IMDB影评分类

文本处理文本可以理解为单词序列或字符序列。现在已经广泛使用的自然语言理解、文档分类、自动问答等都可以看作是深度学习在文本识别领域的应用。
guotianqing·2020-12-29 16:03

基于前程无忧平台数据分析师岗位的薪资水平分析（一）

目录1、数据爬取2、数据清洗2.1缺失值处理2.2字段规整2.3文本处理3、变量处理3.1城市地区划分修改3.2修改其他字段3.3设置哑变量4、特征选择4.1过滤法4.2随机森林筛选变量4.3递归消除法筛选变量
前门朝北开·2020-12-29 12:14

秒懂MySql之基础使用

ShuSheng0007/article/details/111500713出自：shusheng007文章目录概述数据库与SQLMysql使用安装数据库连接数据库操作数据库查询数据排序数据过滤数据函数算术运算文本处理函数日期和时间处理函数数学相关函数聚集函数修改数据插入数据更新数据删除数据总结概述
ShuSheng007·2020-12-27 12:28

tinyxml 读取文本节点_文本分类算法综述

文本分类：survey简述文本分类在文本处理中是很重要的一个模块，它的应用也非常广泛，比如：垃圾过滤，新闻分类，词性标注等等。
offer大虾·2020-12-27 11:55

文本处理三剑客之sed编辑器和awk

编辑器sed的工作流程及命令格式打印内容:使用地址:删除行:替换:插入:二、awk工作原理:按行输出文本:按字段输出文本：通过管道、双引号调用Shell命令:一、sed编辑器grep、sed、awk是文本处理三剑客
狗子说不熬夜不开心·2020-12-25 23:04

python--nltk库预处理德语文本

1.文本预处理程序的目的是找出高频不认识的词汇，因此直接删除停用词后再分词，以减小文本处理量。
rachelnew1900·2020-12-24 11:46

每天一个 Linux 命令（3）：sed

推荐：每天一个Linux命令（2）：od功能简介sed是一种流编辑器，也是文本处理中非常好的工具，配合正则使用更强大处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”，接着用sed命令处理缓冲区的内容
民工哥·2020-12-23 10:08

每天一个 Linux 命令（3）：sed

推荐：每天一个Linux命令（2）：od功能简介sed是一种流编辑器，也是文本处理中非常好的工具，配合正则使用更强大处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”，接着用sed命令处理缓冲区的内容
民工哥·2020-12-23 10:44

python筛选同义词_关于python：使用WordNet查找同义词，定义和例句

我读过这本书："使用NLTK2.0食谱进行Python文本处理"和"使用NLTK进行自然语言处理"，以帮助我朝这个方向发展。
weixin_39944944·2020-12-22 10:32

shell 文本处理三剑客（sed awk grep）之sed

shell文本处理三剑客（sedawkgrep）之sed各自的优势类型sedawkgrep是否要求格式化要求要求无要求支持正则标准正则标准正则扩展正则sed详解本身是一个管道命令，主要是以行为单位进行处理
丶大白菜·2020-12-21 16:09

《python应用实战 爬虫文本分析与可视化》笔记 下

第四章文本处理正则项表达式可以理解为匹配模板，与目标字符串匹配，看是否一致。比如：电子邮箱[email protected]匹配的正则项：[a-z]+@[a-z]+\.
sketchlcy·2020-12-21 16:56

js正则 字符串由汉子和字符组成_程序员玩转Python爬虫必备知识之正则表达式

正则表达式动机1.文本处理已经成为计算机的常见工作之一2.对文本内容的搜索，定位，提取是逻辑比较复杂的工作3.为了快速解决上述问题，产生了正则表达式技术定义：即文本的高级匹配模式，提供搜索，替代等功能。
Emmamkq·2020-12-19 16:19

深度学习框架PyTorch实战

加载models提供的模型，并直接用训练好的权重当做初始化参数开源：YOLOV物体检测Mark-R-CNN实例分割，抠图Bert文本处理，NLP读论文，看源码www.paperswithcode.com
石硕页·2020-12-15 21:28

shell字符串匹配的实现

grep、sed和awk内容比较多故单独列出，本文只涉及字符串的处理和部分文本处理命令。
·2020-12-11 12:45

python字符串分片讲解_详解Python中的文本处理

字符串—不可改变的序列如同大多数高级编程语言一样，变长字符串是Python中的基本类型。Python在“后台”分配内存以保存字符串(或其它值)，程序员不必为此操心。Python还有一些其它高级语言没有的字符串处理功能。在Python中，字符串是“不可改变的序列”。尽管不能“按位置”修改字符串(如字节组)，但程序可以引用字符串的元素或子序列，就象使用任何序列一样。Python使用灵活的“分片”操作来
weixin_39729784·2020-12-11 02:40

使用Python提取文本中含有特定字符串的方法示例

今天搞了一天的文本处理，发现python真的太适合做数据处理了。废话不多说，一起学习吧！
·2020-12-09 12:16

web概述，html概述及常用标签，文本处理

web概述html概述文本处理常用标签web概述：web三要素：浏览器：向服务器发起请求，下载服务器中的网页（HTML），然后执行HTML显示出内容。服务器：接受浏览器的请求，发送相应的页面到浏览器。
BLL101·2020-12-08 21:22

python如何读入数据_python中如何读入数据

Python的文本处理是经常碰到的一个问题，Python的文本文件的内容读取中，有三类方法：read()、readline()、readlines()，这三种方法各有利弊，下面逐一介绍其使用方法和利弊。
weixin_39759881·2020-12-06 18:53
上一页 28 29 30 31 32 33 34 35 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他