文本处理

Python脚本文件外部传递参数的处理方法

一、流文本处理这种方法适用于修改一下文件中的内容，配合Linux命令非常方便，举一个例子，我们需要从一个binlog文件中找到该里面最大的事物，我们要配合mysqldump来做：mysqlbinlog-v
·2021-05-27 11:21

python 文本处理---英文文本预处理（简单易懂 全有注释）！！！！！使用正则表达式以及nltk库分词器双方法！

最近正在复习正则表达式,学习文本处理,今天就来处理一下英文文本,由于在下学到的知识不多,于是乎,只能写出下面的一些功能,虽然不是基于爬取网页后在进行网页分析,是直接对一个事先准备好的文本进行预处理,我的代码的功能有去除一个文本里面的所有中文文本
luckyboy011226·2021-05-26 21:05

python文本处理的方案(结巴分词并去除符号)

看代码吧~importreimportjieba.analyseimportcodecsimportpandasaspddefsimplification_text(xianbingshi):"""提取文本"""xianbingshi_simplification=[]withcodecs.open(xianbingshi,'r','utf8')asf:forlineinf:line=line.s
·2021-05-26 13:42

mybatis的if判断不要使用boolean值的说明

里面永远就是false了，可以使用数字类型代替，但是不要使用0作为参数；补充知识：【MyBatis】标签的条件判断（Boolean类型参数）在MyBatis中，动态SQL元素和JSTL或基于类似XML的文本处理器相似
·2021-05-24 12:55

自动化运维必须要学的Shell文本处理三剑客之——grep的高级选项

grep的高级选项1.格式和选项2.结合基础正则练习案例1：查找指定的字符串“google”，并显示行号案例2：使用中括号[]进行查找相关字符案例3：行首与行尾字符^和$案例4：任意一个字符.和重复字符*案例5：限定连续RE字符范围{}3.RE特殊字符总结（基础正则表达式字符集合）在之前的博客中写过grep的基础用法，基础的grep用法可以参考：检索和过滤文件内容——grep命令，这边我就整理一些
码海小虾米_·2021-05-23 19:32

35 sed 命令

sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。
StarShift·2021-05-21 01:27

自动化运维必须要学的Shell文本处理三剑客之——awk用法（超多案例详细介绍）

awk用法1.什么是awk2.基本格式3.工作原理4.常见的内建变量（可直接用）5.按行输出文本6.按字段输出文本7.通过管道、双引号调用shell命令8.小案例：awk集合getline、数组的用法1.什么是awkAWK是一种处理文本文件的语言，是一个强大的文本分析工具。之所以叫AWK是因为其取了三位创始人AlfredAho，PeterWeinberger,和BrianKernighan的Fam
码海小虾米_·2021-05-21 00:49

python根据BM25实现文本检索

BM25其实只用到了一些基础的统计和文本处理的方法
lyy0905·2021-05-20 12:22

自动化运维必须要学的Shell文本处理三剑客之——sed用法（超多案例详细介绍）

sed的使用一、什么是sed编辑器1.1sed概述1.2sed的工作流程1.3sed命令的格式1.4sed命令的常用选项1.5sed命令的常用操作二、sed对文本的几种操作方式2.1打印内容2.1.1sed编辑器有两种寻址方式2.2删除内容2.3替换内容2.1插入内容一、什么是sed编辑器1.1sed概述sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。sed
码海小虾米_·2021-05-19 23:51

最全的中文 Python 资料合集来了

内容如下：1Web框架网络爬虫2网络内容提取3模板引擎4数据库5数据可视化6图片处理7文本处理8自然语言处理9机器学习10日志11代码分析除此之外！！
不加班的程序员丶·2021-05-19 21:20

python3测试工具开发快速入门教程3文本处理1正则表达式

简介--后面有很多习题，可以先做题目再来看文章参考资料：https://docs.python.org/3/howto/index.html正则表达式(RegularexpressionsREs或regexes或regexpatterns）本质是小的且高度专业化的编程语言。它嵌入到Python中，调用使用re模块。需要指定一些规则来描述那些你希望匹配的字符串集合。这些字符串集合可能包含英语句子、e
python测试开发·2021-05-19 20:32

iOS开发，检索字符串中相同字符串的所有range

最近在做富文本处理的时候，发现同一个字符串只被检索一次，于是写了下面的方法：-(NSArray*)rangeOfSubString:(NSString*)subStrinString:(NSString
小y想吃糖·2021-05-19 13:05

滑雪是不是要去北海道？学会Python电脑就能玩滑雪小游戏

其他基本上可以说全能，系统运维、图形处理、数学处理、文本处理、数据库编程、网络编程、web编程、多媒体应用、pymo引擎、黑客编程、爬虫编写、机器学习、人工智能等，接下来我就教大家做一个不用去北海道也可以滑雪的小游戏
程序猿中的BUG·2021-05-18 19:38

文本分类基础

文本分类基础文本处理字符串的连接与翻转字符串的大小写转换字符串的替换与删除字符串的查找与分割正则表达式去除停用词文本表示单词表示词袋模型本章的项目实战是《基于朴素贝叶斯的垃圾邮件过滤》，属于文本分类项目
꧁༺北海以北的等待༻꧂·2021-05-16 15:31

linux基础面试题一

1、统计当前主机的TCP协议网络各种连接状态出现的次数[root@cent8_yzil~]#netstat-nat|awk'{print$6}'|sort|uniq-c2、请使用文本处理命令打印出/etc
y_zilong·2021-05-15 17:33

C#中的正则匹配和文本处理

C#中的正则匹配和文本处理1、简介在博客之前上章讲了String类和StringBuilder类。
苏州程序大白·2021-05-15 09:31

新手入门、想转行的学Python要学习什么知识点呢？

Python除了极少的事情不能做之外，其他基本上可以说全能，系统运维、图形处理、数学处理、文本处理、数据库编程、网络编程、web编程、多媒体应用、pymo引擎、黑客编程、爬虫编写、机器学习、人工智能等，
日常分享Python·2021-05-14 20:24

正则能让别人给你竖起大拇指

正则表达式本质上是一个文本处理工具，可以对文本进行增、删、改、查操作，它比字符串提供的方法更灵活，有时候你写
lefex·2021-05-13 08:36

Unix & Linux的文本处理工具 -- grep, sed & awk

当大家看到标题时脑中闪过的大概是铺天盖地baidu,google出来的冗余的各类使用介绍，老生常谈希望能让大家对这三个文本工具有新的理解。1、grepgrep不做过多的介绍，打印出匹配的行，着重点在于输出结果并不对文本本身做修改。有个关于grep的小故事，从sed和grep能追溯到最初的unix行编辑器ed而grep的命名代表g(全局)/re(正则表达式)/p(打印)正是ed中全局打印行匹配的语法
点融黑帮·2021-05-09 02:58

Linux基础入门（九）

本文主要介绍简单的文本处理，本课程配套在线实验环境。http://www.shiyanlou.com/courses/1。
蓝桥云课·2021-05-08 01:31

正则表达式及文本处理

正则表达式及文本处理通俗点说，正则表达式就是处理字符串的方法，更加快速简洁的代表各个要求参数，一般用于描述字符排列和匹配模式的一种语法规则，通过正则表达式一些特殊符号的辅助，让用户轻易的查找、删除、替换一些字符串的处理程序
Az_d981·2021-05-07 21:59

Java正则表达式

本文主要讲一下什么是正则表达式,正则表达式的一些常用语法,以及我们项目中用到的一些正则表达式.定义首先,正则表达式是一种强大而灵活的文本处理工具,使得我们能够以编程的方式,构造复杂的文本模式,对输入的字符串进行搜索
葛糖糖·2021-05-06 02:41

Boost 库裁剪及其应用

Boost库涵盖的范围极广，有字符串和文本处理相关子库比如format库和regexp库，有容器相关子库比如variant库（和Qt的QVariant有得一拼），有迭代
district10·2021-05-05 19:56

文本处理之awk进阶

模式PATTERNPATTERN:根据pattern条件，过滤匹配的行，再做处理如果未指定：空模式，匹配每一行范例:[root@CentOS-8~]#awk-F:'{print$1,$3}'/etc/passwdroot0bin1daemon2adm3/regularexpression/：仅处理能够模式匹配到的行，需要用//括起来范例[root@CentOS-8~]#awk'/^UUID/{pr
丶旋律·2021-05-04 18:12

文本处理之awk基础

预定义变量预定义变量分为两类：控制awk工作的变量和携带信息的变量。第一类：控制AWK工作的预定义变量RS：输入记录分隔符，默认为换行符\n，参考RSIGNORECASE：默认值为0，表示所有的正则匹配不忽略大小写。设置为非0值（例如1），之后的匹配将忽略大小写。例如在BEGIN块中将其设置为1，将使FS、RS都以忽略大小写的方式分隔字段或分隔recordFS：读取记录后，划分为字段的字段分隔符。
丶旋律·2021-05-04 14:52

shell脚本获取commit号

shell脚本:gitlog-1|awk'NR==1{printsubstr($2,0,7)}'解释：1.gitlog-1获取最新的一条log记录.2.awk:一种优良的文本处理工具，参见：https:
天堂鱼·2021-05-03 06:10

Linux文本查看及处理工具

而文本处理工具中，有被称为Linux文本处理三剑客的grep、sed和awk，但不要激动，Linux文本三剑客另起文章来讲，本文先从一些经常用到的，功能简洁但非常实用的工具说起。
学渣角鹿白·2021-05-03 02:28

知道这20个正则表达式，能让你少写1,000行代码

正则表达式，一个十分古老而又强大的文本处理工具，仅仅用一段非常简短的表达式语句，便能够快速实现一个非常复杂的业务逻辑。熟练地掌握正则表达式的话，能够使你的开发效率得到极大的提升。
ChasonTse·2021-04-30 00:54

Zsh 开发指南（第五篇 数组）

用好数组，会让文本处理工作事半功倍。本篇只涉及数组的基础用法。数组定义数组可以直接赋值使用，不需要
陌辞寒·2021-04-29 15:41

文本处理三剑客之grep&正则表达式

grep是一个文本过滤工具，它支持正则表达式，能把搜索匹配到的行打印出来。grep的全称是GlobalRegularExpressionPrint(全局正则表达式)使用权限是所有用户。一、grep作用：按照用户指定的模式对目标进行搜索后输出模式：正则表达式与文本字符按照指定的字符搜索#单引号只是字符串，双引号识别变量、反单引号识别变量识别命令grep"$USER"/etc/passwdgrep'$
Aubin·2021-04-25 22:19

AWK 教程

它仅仅需要几行代码就能够完成复杂的文本处理工作。这个简单强大的工具也使得GNU/Linux变得有意思多了。
极客学院Wiki·2021-04-25 07:39

Docker+Spark+Jupyter=文本数据处理逻辑测试平台容器化

Spark+Jupyter=在线文本数据处理逻辑测试平台”[http://www.jianshu.com/p/bbd4190089e7]这几天要把这玩意儿放到我自己的阿里云上线，供一些正在学习Python文本处理的基友们试用
蔡菜寀·2021-04-25 02:41

2018-03-08 文本处理工具sed

1、sed工具简介sedStreamEDitor,行编辑器工具特性：sed是一种流编辑器，每次处理一行文本内容。工作过程：将当前行储存至内存空间中，称作“模式空间”(patternspace)。在模式空间中对行进行编辑，将处理结果输出至屏幕。一般情况下，清空模式空间内容，然后读入下一行执行下一个循环，如此循环直至文本文件行尾。功能：编辑一个或多个文件，简化对文件的反复操作，编写转换程序等2、用法s
阿丧小威·2021-04-24 11:58

初识文本处理三剑客

1.grep查找行grepa提取含有a的行grep-na提取含有a的行，并标记行号grep-va提取不含有a的行grep-ca显示含有a的行数grep-ia提取含有a或A的行2.sed编辑s：替换sed's/A/B/'A替换成Ba：行下添加sed'aX'在每一行下面添加Xsed‘1,2aA\nB\nC’在1-2行的下边分别添加3行，3行内容分别是A、B、C，\n是换行i：行上添加sed'iX'在每
小洁忘了怎么分身·2021-04-23 14:01

Linux Shell 文本处理工具集锦

本文将介绍Linux下使用Shell处理文本时最常用的工具：find、grep、xargs、sort、uniq、tr、cut、paste、wc、sed、awk；提供的例子和参数都是最常用和最为实用的；对shell脚本使用的原则是命令单行书写，尽量不要超过2行；如果有更为复杂的任务需求，还是考虑python吧；01find文件查找1查找txt和pdf文件find.(-name"*.txt"-o-na
程序员BUG·2021-04-23 08:28

PHP进阶之CMS内容管理系统（下）

CMS内容管理系统具有许多基于模板的优秀设计，可以加快网站开发速度和开发成本，同时易于使用，可开发性强，可分布式管理，CMS的功能并不只限于文本处理，它也可以处理图片、Flash动画、声像流、图像、甚至电子邮件档案等
小太阳会发光诺·2021-04-23 07:03

python3测试工具开发快速入门教程3序列小结与文本处理

[雪峰磁针石博客]python3快速入门教程预计本章简稿完成日期：2018-07-18变量与赋值自己实现求最大值。代码：#!python#!/usr/bin/envpython3#-*-coding:utf-8-*-#Author:xurongzhong#126.comwechat:pythontestingqq:37391319#技术支持钉钉群：21745728(可以加钉钉pythontesti
python测试开发·2021-04-21 15:14

sed介绍

Linux指令中文说明传送入口整理自Linux指令中文说明功能强大的流式文本编辑器sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。
释闲人·2021-04-21 12:25

文本处理工具篇--grep、cut、sort、uniq、

原文链接：Shell编程之文本处理工具（grep、cut、sort、uniq、diff、paste、tr）及bash特性欢迎扫码关注，获取更多优质内容一、文本处理工具1.grep工具grep是行过滤工具
Z景明·2021-04-19 20:55

【基础】学习笔记59-Python3 matplotlib绘图-词云图

词云图代码1：#词云图#最简单的fromwordcloudimportWordCloudimportjiebaimportmatplotlib.pyplotasplt#导入文本数据并进行简单的文本处理#
Alyna_C·2021-04-19 19:24

【linux】单行命令-第1部分：awk基础

文本处理是完成生信项目的基本功，能实现的方法绝对不止一种，最先想到的肯定是你比较熟悉的，这个时候谁能抵过单行命令的诱惑呢？
高大石头·2021-04-19 19:19

Linux系列七之常用命令整理（一）：帮助、目录管理、文件管理、文件内容、文本处理

一、帮助类命令1-1、帮助手册命令：man用法：manCOMMAND例如：manls图片.png如图所示命令后面的数字以及符号代表：1：用户命令(/bin,/usr/bin,/usr/local/bin)2：系统调用3：库用户4：特殊文件(设备文件)5：文件格式(配置文件的语法)6：游戏7：杂项(Miscellaneous)8:管理命令(/sbin,/usr/sbin,/usr/local/sbi
Cehae·2021-04-19 11:06

EXCEL常用函数汇总(Excel2016)

1.文本处理函数1.1Trim函数：作用：除了单词之间的单个空格之外，移除文本中的所有空格。语法：TRIM(text)，Text为必需项，为要移除空格的文本。
mingming00·2021-04-19 00:29

shell之三大文本处理工具grep、sed及awk

grep、sed和awk都是文本处理工具，虽然都是文本处理工具单却都有各自的优缺点，一种文本处理命令是不能被另一个完全替换的，否则也不会出现三个文本处理命令了。
VincentHK·2021-04-15 04:01

Elisp 08：文本跨行提取

上一章：命令行程序界面在上一章的结语里，我说这个教程是否会有第二部分，取决于我是否遇到了新的文本处理问题。结果很快如愿以偿。
·2021-04-08 03:18

Elisp 08：文本跨行提取

上一章：命令行程序界面在上一章的结语里，我说这个教程是否会有第二部分，取决于我是否遇到了新的文本处理问题。结果很快如愿以偿。
·2021-04-07 00:03

Elisp 07：命令行程序界面

我之所以学习Elisp语言，是因为感觉它的长处适合编写文本处理程序，例如上一章所写的一个简单的文本处理程序，它可以将文本由Markdown格式翻译为HTML格式。像这样的文本处理程序，它们的运行通常并
·2021-04-05 11:37

Elisp 06：缓冲区变换

使用Elisp语言编写文本处理程序时，充分利用缓冲区，似乎是着实是在发挥Elisp的一项长处。因而本章要思考和解决的一个现实问题是，缓冲区可以用来做什么。
·2021-04-05 11:36

Elisp 07：命令行程序界面

我之所以学习Elisp语言，是因为感觉它的长处适合编写文本处理程序，例如上一章所写的一个简单的文本处理程序，它可以将文本由Markdown格式翻译为HTML格式。像这样的文本处理程序，它们的运行通常并
·2021-04-05 11:26

Elisp 06：缓冲区变换

使用Elisp语言编写文本处理程序时，充分利用缓冲区，似乎是着实是在发挥Elisp的一项长处。因而本章要思考和解决的一个现实问题是，缓冲区可以用来做什么。
·2021-04-05 11:25
上一页 27 28 29 30 31 32 33 34 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他