python-爬虫学习第5页

python-学习笔记：使用嵌套循环输出菱形

程序实现效果：请输入菱形的行数：9*****************************************程序代码：row=eval(input('请输入菱形的行数：'))whilerow%2==0:#判断行数的奇偶性print('请重新输入菱形的行数：')row=eval(input('请输入菱形的行数：'))#输出菱形top_row=(row+1)//2#上半部分的行数#上半部分fo

jennychary1·2024-01-27 23:40

python-学习笔记：异常处理

BUG：它指的是检测并排除计算机程序/机器中的故障。Bug常见的类型：1、粗心导致的语法错误，解决方案：认真自查2、知识点不熟悉导致的错误，解决方案：不断练习3、思路不清导致的错误，解决方案：使用print()语句和注释4、代码逻辑错误，用户操作不正确导致的错误，解决方案：使用异常处理机制异常处理机制的几种结构：1、try-excepttry...except的语法结构为：try:可能会抛出异常的

jennychary1·2024-01-27 23:38

python3安装pip install报错Could not fetch URL https://pypi.org/simple/pip/: There was a problem confirm

Python3.101.安装编译所需的依赖2.安装Python3.10必需的openssl>=1.1.13.安装Python3.104.添加软链接先查看系统python的位置在哪儿我这里已经软链接了，正常未链接之前是python

坦笑&&life·2024-01-27 20:49

python-自动化篇-运维-监控-简单实例-道出如何使⽤Python进⾏系统监控？

如何使⽤Python进⾏系统监控？使⽤Python进⾏系统监控涉及以下⼀般步骤：选择监控指标：⾸先，确定希望监控的系统指标，这可以包括CPU利⽤率、内存使⽤情况、磁盘空间、⽹络流量、服务可⽤性等。选择监控⼯具：选择适合需求的监控⼯具或库。⼀些常⻅的选择包括：psutil：⼀个Python库，⽤于获取系统资源利⽤率信息，如CPU、内存、磁盘等。Prometheus：⼀个开源监控系统，⽀持多种语⾔，可

fo安方·2024-01-27 10:42

python-格式化（%，format，f-string）输出+输入

1-格式化输出：%1.print(‘我的姓名是%s,身高%scm’%(name,height))2.%s—str();%d–十进制3.传入值的时候一定是个元组，不是列表4.当指定长度时：浮点数：字符串：2-格式化输出：format特性：字符串的format方法1-顺序填坑：{}-坑‘名字是：{}，年龄是：{}’.format(‘tom’,16,170)2-下标填坑：‘名字是：{0}，年龄是：{2}

_Irving·2024-01-27 10:07

python3 爬虫学习第一弹

1.0.使用urllib库在Python2中，有urllib和urllib2两个库来实现请求的发送。而在Python3中，已经不存在urllib2这个库了，统一为urllib，urllib库，它是Python内置的HTTP请求库，也就是说不需要额外安装即可使用它包含如下4个模块。1.request:它是最基本的HTTP请求模块，可以用来模拟发送请求。就像在浏览器里输入网挝然后回车一样，只需要给库方

堕落白天使·2024-01-27 10:48

python-自动化篇-运维-监控-简单实例-道出如何使⽤Python进⾏网络监控？

如何使⽤Python进⾏⽹络监控？使⽤Python进⾏⽹络监控可以帮助实时监视⽹络设备、流量和服务的状态，以便及时识别和解决问题。以下是⼀般步骤，说明如何使⽤Python进⾏⽹络监控：选择监控⼯具和库：选择适合⽹络监控需求的⼯具和库。以下是⼀些常⻅的⽹络监控任务以及相应的⼯具和库：（1）Ping和ICMP监控：使⽤Python的ping3或pythonping库来执⾏PING测试并检查主机的可达性

fo安方·2024-01-27 07:23

python-自动化篇-办公-excel-实例应用（一维转二维）

文章目录准备代码效果准备放根目录代码importopenpyxlwb=openpyxl.load_workbook('业绩表.xlsx')ifnot'二维表'inwb.sheetnames:nws=wb.create_sheet('二维表')ws=wb.worksheets[0]rngs=list(ws.values)[1:]mm=list({m.value:''forminws['b'][1:]

fo安方·2024-01-27 07:22

python-文件操作文件指针

当我们对一个已存在的文件想做继续写入时候，直接写入就会把之前的内容覆盖，所以有了操作类型“a“的出现。这里介绍另一种方法，就是指针，也可以理解为写入的光标//这里引进了os模块的os.SEEK_END,os.SEEK_CUR,os.SEEK_SETimportosf=open('hl7.txt','r+')#r+是先读后写，w+是先写后读print(f.tell())#获取当前指针=》0print

小二哥很二·2024-01-26 19:30

python-自动篇-运维-根据计算机硬盘、主板、CPU生成注册信息

文章目录准备代码效果准备本实例需要使用WMI模块，所以需要安装WMI模块。在安装WMI模块之前，先要安装pywin32模块，WMI模块需要win32api的支持。使用pip安装pywin32模块和WMI模块的代码如下：pipinstallwin32compipinstallwmi代码importwmiimportrandomimportossec="t95p0q2f6dz1cxmowgjensr7

fo安方·2024-01-26 07:08

Python-函数入参和全局变量

Python-函数入参和全局变量0前言1函数入参1.1位置参数1.2默认参数1.3可变参数1.4关键字参数1.5命名关键字参数2不可变参数和可变参数2.1不可变参数2.2可变参数3全局变量3.1使用本文件中全局变量

一ye残雪·2024-01-26 03:23

python-分享篇-测单词

代码#-*-coding:utf-8-*-importrequests,json,time#将Tkinter包的子组件，为其定义别名importtkinterastk#生成root主窗口root=tk.Tk()#新建表,单选表ciku_type=[["GMAT","GMAT"],["NGEE","考研"],["NCEE","高考"],["CET4","四级"],["CET6","六级"],["TE

fo安方·2024-01-24 12:16

python－自动抢票代码

首先附上github地址https://github.com/wlz78096/1230612306购票小助手python版本支持2.7.10-2.7.15依赖库依赖若快若快注册地址：http://www.ruokuai.com/client/index?6726推荐用若快，打码兔平台已经关闭项目依赖包requirements.txt安装方法-Windows:pipinstall-ihttps:/

kevin0016·2024-01-24 11:02

python hack-requests_Python爬虫学习笔记（二）——requests库的使用

准备工作requests库不是python自带的库，可以用pip安装。在使用时导入requests即可。基本用法GET请求r=requests.get(url)print(r.text)其中，网页返回的内容是json格式的字符串类型，所以可以直接调用json()方法得到字典格式的内容print(r.json())此外，如果需要附加额外的信息，可以用params这个参数，示例如下：data={'na

weixin_39832628·2024-01-24 03:29

python爬虫学习笔记(一)——requests库

一.HTTP基本原理1.URL和URIURL是URI的子集，URI还包括URN，在互联网中，我们一般的网页链接可以被称为URL或者URI，大多数人称为URL。2.超文本我们平常在网站浏览的网页就是超文本解析而成的，这些源代码是一系列的HTML代码，如img：显示图片，p：指定显示段落等。HTML可以被称为超文本。3.http和httpsHTTP，HypertextTransferProtocol，

梦独吟·2024-01-24 03:29

Python3爬虫学习——requests库笔记

Python3爬虫学习——requests库笔记前言本笔记用于记录整理requests库的一些基本知识，内容会根据博主自己的认知作增添或压缩。

甲寅Emore·2024-01-24 03:28

Python网络爬虫步骤是什么？新手小白必看！

文末领取全套Python爬虫学习资源python网络爬虫步骤（1）准备所需库我们需要准备一款名为BeautifulSoup（网页解析）的开源库，用于对下载的网页进行解析，我们是用

Python小远·2024-01-23 22:28

Python-爬取页面内容（涉及urllib、requests、UserAgent、Json等）

选择了适合的网络库MonkeyLei：Python-网络基本工具库urllib、urllib2和requests选择？

MonkeyLei·2024-01-23 10:34

python-基础篇-循环-代码

文章目录代码if语句ifelse结构三目运算ifelifelse结构猜拳游戏if嵌套whie循环猜拳游戏计算1-100之间的累加和计算1-100之间偶数的累加和while循环嵌套打印正方形打印三角形for循环for循环嵌套打印正方形打印三角形breakcontinue循环和else代码if语句#1.通过用户键盘输入，获取年龄input()age=input('请输入你的年龄:')#str#需要将字

fo安方·2024-01-23 06:02

python-自动篇-办公-用Excel画画

文章目录代码所遇问题ModuleNotFoundError:Nomodulenamed'xlsxwriter'FileNotFoundError:[Errno2]Nosuchfileordirectory:'111.jpg'效果附件图片excel代码#coding:utf-8fromPILimportImagefromxlsxwriter.workbookimportWorkbookclassEx

fo安方·2024-01-23 06:50

Python-利用resource限制资源使用

一、背景当我们在运行python程序时，如果希望程序所需要的消耗系统资源不能超过一定的量时，例如CPU利用率不能超过N%。可以使用resource。resource模块用于测量和控制程序使用的系统资源的基本机制。安装：需注意在win和mac环境，该模块可能存在问题，建议linux下使用。pipinstallresource官方文档：resource---资源使用信息—Python3.9.17文档二

Rnan-prince·2024-01-22 17:48

【头歌】——数据分析与实践-python-网络爬虫-Scrapy爬虫基础-网页数据解析-requests 爬虫-JSON基础

【头歌】——数据分析与实践-python-网络爬虫-Scrapy爬虫基础-网页数据解析-requests爬虫-JSON基础Pandas初体验第1关爬取网页的表格信息第2关爬取表格中指定单元格的信息第3关将单元格的信息保存到列表并排序第

くらんゆうき·2024-01-22 10:59

Python-爬虫（正则表达式基础、修饰符、元字符、数量修饰符，练习判断身份证是否正确）

文章目录1.正则表达式常见内容修饰符元字符findall函数数量修饰符match、search函数2.练习：用正则表达式判断身份证号是否正确1.正则表达式常见内容修饰符re.I使匹配对大小写不敏感re.L做本地化识别匹配re.L:使用当地locale。(python中有个locale模块，locale代表不同的语言，地区和字符集）由当前语言区域决定\w,\W,\b,\B和大小写敏感匹配。这个标记只

NUC_Dodamce·2024-01-22 07:30

[转载]LeetCode(5)-Python-最长回文子串(longest-palindromic-substring)

题目描述给定一个字符串s，找到s中最长的回文子串。你可以假设s的最大长度为1000。示例1:输入:“babad”输出:“bab”注意:“aba”也是一个有效答案。示例2:输入:“cbbd”输出:“bb”解决思路1回文字符串，就是顺序读取和逆序读取的结果是一样的，比如“上海自来水来自海上”，我们在判断回文字符串的时候，可以认为回文字符串都是有一个中心的，比如“上海自来水来自海上”的中心就是“水”，以

此去经年天问·2024-01-21 19:32

python-分享篇-draw heart

文章目录heart代码效果draw-heart代码效果heart-shape-chart代码效果heart-stitching-by-string代码效果love-you代码效果heart代码importnumpyasnpimportmatplotlib.pyplotaspltfrommpl_toolkits.mplot3dimportAxes3Ddefheart_3d(x,y,z):return

fo安方·2024-01-21 17:40

python-自动篇-办公-案例-一键将word中的表格提取到excel文件中

文章目录代码说明第一步：复制代码使用第二步：将转换文档放到根目录第三步：运行py代码importosfromdocximportDocumentfromopenpyxlimportWorkbook#获取待处理的文件的路径path='word文件'#文件所在文件夹files=[path+"\\"+iforiinos.listdir(path)]#获取文件夹下的文件名,并拼接完整路径forfilein

fo安方·2024-01-21 17:09

python-分享篇-一箭穿心

一箭穿心代码fromturtleimport*color('black','red')pensize(5)begin_fill()penup()goto(50,50)pendown()right(45)goto(100,0)left(90)fd(120)circle(50,225)penup()goto(0,0)pendown()left(135)fd(120)circle(50,225)seth

fo安方·2024-01-21 17:09

Python-基础篇-数据结构-列表、元组、字典、集合

文章目录思维导图❓大抵是何物数据结构切片具体是何物列表list[]自我介绍精神面貌使用说明生理体征增删查改方法汇总元组tuple()自我介绍使用说明精神面貌生理体征增删查改字典dict{}自我介绍1自我介绍2精神面貌使用说明生理体征增删查改集合set{}精神面貌生理体征增删查改✒️技巧专业英语学习角思维导图列表、元组字典、集合❓大抵是何物数据结构正如在现实世界中一样，直到我们拥有足够多的东西，才迫

fo安方·2024-01-21 17:38

全国计算机等级考试二级python相关知识点

PYTHON-计算机二级本文章整理了全国计算机等级考试二级python的相关知识点，还在学习中，疏漏之处请予斧正！2023/9/25考完更新，time库没有考到，序列类型的操作考察较多！

Zosea231·2024-01-21 11:38

Python-基本语法

1.变量不同与其他语言，变量前必须有数据类型的声明。在Python中，不需要进行变量类型的声明，Ta并不是把值存储在变量中，而更像是把名字贴在值的上边。特点：1）每个变量在内存中创建，都包括变量的标识，名称和数据这些信息。2）每个变量在使用前都必须赋值，变量赋值以后该变量才会被创建。（Python没有变量只有“名字”）2.字符串1）字符串拼接'abc'+'efg'输出'abcefg'2）通过下标索

葱花思鸡蛋·2024-01-21 10:55

爬虫学习记录之Python 爬虫实战：某评分网站的Top250的书单详情

永不言弃h·2024-01-21 05:24

爬虫学习记录之Python 爬虫实战：电影 TOP250 循环爬取

【简介】利用Python的requests库实现循环爬取电影TOP250榜单，对每个电影的详细信息进行抓取，并将抓取的数据保存为JSON格式的文件。文章目录1.导入所需库和模块2.构造请求参数并发送请求3.解析数据并保存到文件4.完整代码1.导入所需库和模块本项目使用的是requests库和json库，因此需要导入这两个库。importjsonimportrequests2.构造请求参数并发送请求

永不言弃h·2024-01-21 05:54

爬虫学习记录之Python 爬虫实战：爬取研招网招生信息详情

【简介】本篇博客为爱冲锋，爬取北京全部高校的全部招生信息，最后持久化存储为表格形式，可以用作筛选高校。文章目录1.导入依赖2.代码详解2.1def__init__(self)2.2defSleepTime(self):2.3defGetcode(self):2.4defReadTxt(self,file):2.5defGetDeData(self,page):2.6defGetPage(self)

永不言弃h·2024-01-21 05:23

python爬虫的原理以及步骤-python学习之python爬虫原理

原标题：python学习之python爬虫原理今天我们要向大家详细解说python爬虫原理，什么是python爬虫，python爬虫工作的基本流程是什么等内容，希望对这正在进行python爬虫学习的同学有所帮助

weixin_37988176·2024-01-20 10:03

Python爬虫学习笔记（一）---Python入门

一、pycharm的安装及使用二、python的基础使用1、字符串连接2、单双引号转义3、换行4、三引号跨行字符串5、命名规则6、注释7、优先级not>and>or8、列表（list）9、字典（dictionary）10、元组（tuple）11、迭代12、format方法13、引入模块14、文件15、异常与测试一、pycharm的安装及使用pycharm的安装可以自行去搜索教程。pycharm的使

摩卡摩卡～·2024-01-20 03:31

Python-列表操作(下)

微信公众号-IT赶路人，专注分享与IT相关知识，关注我，一起升职加薪！图片列表是非常常见的一种数据结构，那么Python中，都对列表提供了哪些操作，又如何对列表进行创建，增、删、改、遍历呢？本文就给大家汇总最基本，也是最常用的几种操作。创建列表字符串本质是一个字符列表，但原始字符串并不具备完整的列表性质。以字符串为例，我们来看看如何将字符串转换为列表。这就需要用到list()方法。#list函数，

IT赶路人·2024-01-20 01:49

Python-基础篇-类与对象/面向对象程序设计

文章目录思维导图是何物类定义类class类的成员类的继承性封装性多态性对象面向对象创建对象销毁对象类和对象关系必背必记专业英语学习角思维导图是何物类“类”是物以类聚的“类”类和对象是面向对象编程的两个核心概念类是对一群具有相同特征或者行为的事物的一个统称，是抽象的，不能直接使用特征被称为属性行为被称为方法类就相当于制造飞机时的图纸，是一个模板，是负责创建对象的定义类class虽说将函数放到字典里是

fo安方·2024-01-19 21:23

Python-基础篇-类与对象/面向对象程序设计-py脚本

面向对象基础第一个面向对象classCat:defeat(self):print("小猫爱吃鱼")defdrink(self):print("小猫要喝水")#创建猫对象tom=Cat()tom.eat()tom.drink()print(tom)addr=id(tom)print("%x"%addr)新建两个猫对象classCat:defeat(self):print("小猫爱吃鱼")defdri

fo安方·2024-01-19 21:50

Python-第一阶段-第五章函数

目录函数介绍函数的定义函数的参数函数的返回值函数返回值的定义None类型函数说明文档函数的嵌套调用变量的作用域局部变量全局变量global关键字函数介绍函数：是组织好的，可重复使用的，用来实现特定功能的代码段input()、print()、str()、int()等都是Python的内置函数函数的定义函数的调用：函数名(参数)注意事项：①参数如不需要，可以省略②返回值如不需要，可以省略③函数必须先定

秦慕逸·2024-01-19 18:10

Python-第一阶段-第四章循环语句

目录while循环的基础语法while循环的嵌套应用补充知识-print输出不换行for循环的基础语法基础语法range语句编辑变量作用域for循环的嵌套应用循环中断:break和continuecontinuebreak循环普遍存在于日常生活中，同样，在程序中，循环功能也是至关重要的基础功能。while循环的基础语法只要条件满足会无限循环执行while循环注意点1.while的条件需得到布尔类型

秦慕逸·2024-01-19 18:39

Python-第一阶段-第二章字面量

目录一.字面量1.1常用值的类型1.2注释1.3变量1.4数据类型1.5数据类型转换1.6标识符1.7运算符1.8字符串扩展1.8.1字符串的三种定义方式1.8.2字符串拼接1.8.3字符串格式化1.9数据输入一.字面量在代码中，被写下来的固定的值，称之。1.1常用值的类型Python中常用的6种值（数据）的类型类型描述说明数字（Number）intfloatcomplex（复数）boolint:

秦慕逸·2024-01-19 18:39

【QA】Linux-CentOS-源代码编译安装Python-更改镜像源-创建虚拟环境

文章目录文章概述Python源码下载、安装安装相关依赖安装包下载、解压、编译、安装配置环境变量镜像源替换虚拟环境配置理解profile、bashrc、bash_profile【额外】文章概述Linux系统下进行python开发，若是默认安装的python版本不合适，可以安装新的python版本文章演示的系统：LinuxCentOS，除了yum形式安装依赖包部分不同，其他部分皆可借鉴到ubuntu系

海绵_青年·2024-01-18 14:21

python-清空目录的所有文件(win和Linux通用)

清空文件夹(目录)当我们要用代码直接删除该目录(文件夹)下的所有文件，使得这个目录为空。importshutilfrompathlibimportPathdefclear_directory(directory):dir_path=Path(directory)ifdir_path.exists()anddir_path.is_dir():foritemindir_path.iterdir():i

昂立的狼·2024-01-18 04:10

【Python-随笔】 Python创建多线程

Python创建多线程-随笔Python创建多线程的三种方法_thread模块函数式创建线程threading模块函数式创建线程继承threading类创建线程_thread模块函数式创建线程【说明】调用_thread模块中的start_new_thread()函数来产生新线程；【函数】_thread.start_new_thread(function,args[,kwargs])《参数说明》fu

SUNxRUN·2024-01-17 22:10

Python-字符串str和json格式的转换

str转jsonstr转换为json格式，前提一定需要保证这个str的格式和json是一致的，即左边最外层是大括号，右边的最外层是大括号。如果不一致，推荐用正则进行拆分至和json格式一致1.通过json.loads进行转换importjsonstr='{"key":"wwww","word":"qqqq"}'j=json.loads(str)print(j)print(type(j))但是值得注

Nikon937·2024-01-17 21:46

Python---爬虫学习1

importrequestsimporttimefrombs4importBeautifulSoupimportpandasaspddefget_film(link,headers):#定义一个get_film的函数，接受两个参数：link和headers。link是电影信息的URL，headers是一个字典，包含了发送HTTP请求时需要使用的HTTP头信息res=requests.get(lin

Wanyu677·2024-01-17 21:15

Python---爬虫学习（详细注释/优化）

frombs4importBeautifulSoupimportre#正则表表达式文字匹配importurllib.request,urllib.error#指定url，获取网页数据importxlwtfindlink=re.compile(r'ahref="(.*?)">')#电影链接findImageSrc=re.compile(r'(.*)')#标题findRating=re.compile

Wanyu677·2024-01-17 21:40

python 安居客爬虫_爬虫学习6：爬取安居客的VR房源信息

公司的VR产品在推广前夕，需要做一个较详细的市场分析报告，我们可以从下面几个步骤来深入探讨：1、需要展望整个VR的市场规模有多大，从而论证我们需要面对的市场分量，2、在这个大市场下面，我们面对的细分市场，如何划分，盘子能有多大等等3、产品自身分析和竞品分析，这个是认识自己和别人的部分，从而认识到自己的核心优势以及相比于其他的比较优劣势。4、新机会和风险，我们需要从重重竞争者中，开辟出最适合自己产品

weixin_39600823·2024-01-17 20:50

爬虫学习笔记（十八）—— 点触验证码：超级鹰、12306自动登录

一、打码平台点触验证码是一种常见的反爬手段。解决方案有两种：一种是直接解决，这需要深度学习机器学习等图像处理技术，以大量的数据训练识别模型，最终达到模型足矣识别图片中的文字提示和应该点击的区域之间的对应关系。这需要非常专业的设备，比如TPU运算，和专业的开发和维护人员。因此市面上有专业解决此类问题的OCR解决提供商。也就是第二种间接解决的方案，调用第三方接口。接下来将给大家介绍一款好用的第三方接口

别呀·2024-01-17 10:35

python-并行批量管理远程服务器(110)

#运行方式:python3脚本名称服务器的IP地址文件"要在远程服务器上运行的命令"importsysimportgetpassimportparamiko#基于SSH用于连接远程服务器并执行相关操作importthreadingimportosdefremote_comm(host,pwd,command):ssh=paramiko.SSHClient()ssh.set_missing_host

liao__ran·2024-01-17 07:04

推荐频道

python-爬虫学习