python-爬虫学习

python爬虫学习（1）

1、认识网页结构，分别是html(超文本标记语言)、css(层叠样式表)和JScript(活动脚本语言)。HTMLhtml是整个网页的结构，相当于整个网站的框架，带""都是属于html标签，并且标签是成对出现的。常见标签如下：...表示标记中间的元素是网页...表示用户可见的内容...表示框架...表示段落...表示列表...表示图片...表示标题...表示超链接2、以中国旅游网首页（http:/
乐乐宝贝来了2019·2023-12-28 16:18

python-鸢尾花分类

python-鸢尾花分类importpandasaspddata_iris=pd.read_csv('iris.csv',index_col=0)#绘制直方图importmatplotlib.pyplotaspltdata_iris.hist
q琦一·2023-12-28 15:40

爬虫学习-selenium工具使用

文章目录前言selenium工具使用相关操作窗口跳转无头浏览器(后台运行)超级鹰(破解验证码)处理12306登陆验证总结前言本博客仅做学习笔记，如有侵权，联系后即刻更改科普：参考网址selenium工具使用自动化测试工具：selenium引入首先在pycharm里面下载安装相关模块pipinstallselenium它要启动你电脑上的浏览器,这就需要⼀个驱动程序来辅助Edge驱动安装导航Edge驱
old-handsome·2023-12-28 13:53

python-爬虫-selenium总结

爬虫提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录爬虫前言（使用场景）一、前期准备工作二、基本的操作案例：使用selenium利用验证码识别平台（超级鹰）进行各种类型验证码验证：验证根据图像识别验证码输入类：验证根据图像识别需要点击的地点类：滑块验证类：前言（使用场景）我们在抓取⼀些普通⽹⻚的时候requests基本上是可以满⾜的.但是,如果遇到⼀些特殊的⽹站.它的数据是
B_rownJay·2023-12-28 13:23

python-类及面向对象编程

1.Class语句在Python中，使用class关键字定义一个类。类是一种创建对象的蓝图，它定义了对象的属性和方法。classCar:def__init__(self,make,model):self.make=makeself.model=modeldefdisplay_info(self):print(f"Thiscarisa{self.make}{self.model}.")在这个例子中，
贪心的猫·2023-12-28 13:05

python-模块和包

模块是包含Python代码的文件，它们用来组织和重用代码。模块搜索路径是Python解释器用来查找模块文件的路径列表，包括内置模块、sys.path中列出的目录以及PYTHONPATH环境变量中列出的目录。模块导入是将模块的功能引入到当前代码中的过程，通常使用import语句。Python在模块搜索路径中查找相应的模块文件，并加载其内容，可以在代码中使用模块中定义的函数、类和变量。重新导入模块是指
贪心的猫·2023-12-28 13:05

python-函数和递归

1.函数函数是一段可重复使用的代码块，用于执行特定任务。通过定义函数，可以提高代码的可读性和可维护性.#定义一个简单的函数defgreet(name):return"Hello,"+name#调用函数print(greet("Alice"))在这个示例中，定义了一个名为greet的函数，它接受一个参数name，并返回一个包含问候语的字符串。通过调用函数并提供参数，我们可以获取函数的返回值。2.参数
贪心的猫·2023-12-28 13:35

pyhton爬虫学习

pyhton爬虫学习1.准备工作importbs4#网页解析，获取数据importurllib.request,urllib.error#制定URL，获取网页数据importxlwt#进行excel操作
Echo_Wish·2023-12-27 15:59

python-根据文件名移动已处理的文件

假设NC文件所在的文件夹为"nc_files"，CSV文件所在的文件夹为"csv_files"，目标文件夹为"target_folder"：importosimportshutilnc_folder='nc_files'csv_folder='csv_files'target_folder='target_folder'#获取CSV文件列表csv_files=os.listdir(csv_fold
RS&·2023-12-27 03:44

算法练习Day22 （Leetcode/Python-回溯算法）

39.CombinationSumGivenanarrayofdistinctintegerscandidatesandatargetintegertarget,returnalistofalluniquecombinationsofcandidateswherethechosennumberssumtotarget.Youmayreturnthecombinationsinanyorder.Th
叮叮咚咚响叮咚·2023-12-27 03:12

python-连接oracle查询数据并且把数据保存至excel,然后发送至邮箱

环境准备：python：3.7需要库：cx_Oraclepandas库的下载地址：https://pypi.org/project/pandas/1.0.0/#filesoracle:11.2…0.4本机上与服务器上的oracle客户端不一致，因此下载了instantclient这个东西，配置好tnsnames.ora文件，就可以使用cx_oracle连接oracle下载地址为：https://w
花蹦蹦精他哥·2023-12-26 13:02

《Python-基础》练习笔记：难点与错题分享

1、以下关于Python缩进的描述中，错误的是：A.Python用严格的缩进表示程序的格式框架，所有代码都需要在行前至少加一个空格B.缩进是可以嵌套的，从而形成多层缩进C.缩进表达了所属关系和代码块的所属范围D.判断、循环、函数等都能够通过缩进包含一批代码2、以下代码的输出结果是：x='A\OB\OC'print(len(x))A.5B.3C.7D.63、以下关于Python语言技术特点的描述中，
不吃花椒的兔酱·2023-12-25 23:29

《Python-组合》练习笔记：难点与错题分享

1、以下代码的输出结果是:d={'food':{'cake':1,'egg':5}}print(d.get('cake','nothisfood'))A.eggB.1C.foodD.nothisfood2、以下关于列表变量ls操作的描述中，错误的是:A.ls.reverse():反转列表ls中所有元素B.ls.append(x):在ls最后增加一个元素C.ls.copy():生成一个新列表，复制l
不吃花椒的兔酱·2023-12-25 23:29

《Python-函数》练习笔记：难点与错题分享

1、以下关于Python函数的描述中，错误的是:A.Python程序需要包含一个主函数且只能包含一个主函数B.如果Python程序包含一个函数main()，这个函数与其它函数地位相同C.Python程序可以不包含main函数D.Python程序的main函数可以改变为其他名称2、当用户输入5时，下面代码的输出结果是:try:n=input("请输入一个整数:")defpow2(n):returnn
不吃花椒的兔酱·2023-12-25 23:57

django基于python的疫情数据可视化分析系统--python-计算机毕业设计

项目介绍在Internet高速发展的今天，我们生活的各个领域都涉及到计算机的应用，其中包括疫情数据可视化分析系统的网络应用，在外国线上管理系统已经是很普遍的方式，不过国内的管理系统可能还处于起步阶段。疫情数据可视化分析系统具有疫情数据可视化分析信息管理功能的选择。疫情数据可视化分析系统采用Django框架，基于mysql开发，实现了首页、个人中心、用户管理、员工管理、疫情信息管理、核酸检测管理、检
毕业程序员·2023-12-25 19:47

算法练习Day21 （Leetcode/Python-回溯算法）

216.CombinationSumIIIFindallvalidcombinationsofknumbersthatsumuptonsuchthatthefollowingconditionsaretrue:Onlynumbers1through9areused.Eachnumberisusedatmostonce.Returnalistofallpossiblevalidcombination
叮叮咚咚响叮咚·2023-12-25 02:00

算法练习Day20 （Leetcode/Python-回溯算法）

虽然看似进入了一个新章节，但其实还是前几天二叉树章节的延续。。回溯算法（以下内容摘抄自代码随想录）：回溯法解决的问题都可以抽象为树形结构，是的，我指的是所有回溯法的问题都可以抽象为树形结构！因为回溯法解决的都是在集合中递归查找子集，集合的大小就构成了树的宽度，递归的深度，都构成的树的深度。回溯三部曲：回溯函数模板返回值以及参数defbacktracking(参数)回溯函数终止条件什么时候达到了终止
叮叮咚咚响叮咚·2023-12-25 02:29

Python-蒙特卡罗应用

第1关：蒙特卡洛方法求定积分一任务描述本关任务：用蒙特卡罗方法求函数f(x)=（x/25+1/5），在区间[a,b]中定积分。假设a=0,b=1，即求要求将函数f(x)定义为匿名函数，求出的积分保留5位小数，a,b的值可以自定义。importnumpyasnp#将积分函数f定义成匿名函数###########begin############f=lambdax:x/25+1/5##########
2301_77962063·2023-12-25 00:30

Python-列表和元组

1.概述数据结构是以某种方式组合起来的数据元素（如数字、字符乃至其他数据结构）集合。在Python中，最基本的序列（sequence）数据结构为列表（list）和元组（tuple）。列表中的每个元素都有编号，即位置或索引，其中第一个元素的索引为0，第二个元素的索引为1，依次类推，同时列表中也可以嵌套列表，形成更复杂的数据结构。元组是一种特殊的序列，类似于列表，只是不能修改。2.列表2.1.列表数据
业余程序员plus·2023-12-24 09:00

算法练习Day17 （Leetcode/Python-二叉树）

513.FindBottomLeftTreeValueGiventherootofabinarytree,returntheleftmostvalueinthelastrowofthetree.思路：这题求树的最后一层的最左节点。注意仅仅通过递归求后续遍历的方式找到最左节点是不够的，还要满足在最后一层。所以要选深度最大的最左叶节点。classSolution(object):deffindBott
叮叮咚咚响叮咚·2023-12-24 04:36

算法练习Day18 （Leetcode/Python-二叉树）

236.LowestCommonAncestorofaBinaryTreeGivenabinarytree,findthelowestcommonancestor(LCA)oftwogivennodesinthetree.AccordingtothedefinitionofLCAonWikipedia:“Thelowestcommonancestorisdefinedbetweentwonodes
叮叮咚咚响叮咚·2023-12-24 04:36

算法练习Day11 （Leetcode/Python-堆栈和队列）

239.SlidingWindowMaximumYouaregivenanarrayofintegersnums,thereisaslidingwindowofsizekwhichismovingfromtheveryleftofthearraytotheveryright.Youcanonlyseetheknumbersinthewindow.Eachtimetheslidingwindowmo
叮叮咚咚响叮咚·2023-12-24 04:35

算法练习Day5 （Leetcode/Python-哈希表）

哈希表在python中通常使用dictionary表示。以下是dict相关的一些常用指令my_dictisadictionary1.forkey,valueinmy_dict.items():2.my_dict.values();my_dict.keys()3.my_dict.get(num,0)Timecomplexityofthemy_dict.get()methodinPythondicti
叮叮咚咚响叮咚·2023-12-24 04:05

算法练习Day6 （Leetcode/Python-哈希表）

454.4SumIIGivenfourintegerarraysnums1,nums2,nums3,andnums4alloflengthn,returnthenumberoftuples(i,j,k,l)suchthat:0nums1[0]+nums2[0]+nums3[0]+nums4[1]=1+(-2)+(-1)+2=02.(1,1,0,0)->nums1[1]+nums2[1]+nums3
叮叮咚咚响叮咚·2023-12-24 04:05

算法练习Day7 （Leetcode/Python-字符串）

替换数字卡码网题目链接(opensnewwindow)给定一个字符串s，它包含小写字母和数字字符，请编写一个函数，将字符串中的字母字符保持不变，而将每个数字字符替换为number。例如，对于输入字符串"a1b2c3"，函数应该将其转换为"anumberbnumbercnumber"。对于输入字符串"a5b"，函数应该将其转换为"anumberb"输入：一个字符串s,s仅包含小写字母和数字字符。输出
叮叮咚咚响叮咚·2023-12-24 04:05

算法练习Day19 （Leetcode/Python-二叉树）

108.ConvertSortedArraytoBinarySearchTreeGivenanintegerarraynumswheretheelementsaresortedinascendingorder,convertittoaheight-balancedbinarysearchtree.思路：一个高度平衡二叉树是指一个二叉树每个节点的左右两个子树的高度差的绝对值不超过1。因为是有序数组，
叮叮咚咚响叮咚·2023-12-24 04:02

爬虫学习——（一）Request库请求网页

目录一、requests库常见方式请求网页1.GET请求基本实例添加请求头百度网页http请求实战抓取网页数据抓取二进制数据2.POST请求3.响应在使用之前，确保安装requests库，可以在任务栏cmd里使用pip3来安装：pip3installrequests一、requests库常见方式请求网页importrequestsr=requests.get('https://www.httpbi
59％·2023-12-23 09:32

玩转 Scrapy 框架 (一)：Scrapy 框架介绍及使用入门

注意：Scrapy框架几乎是Python爬虫学习和工作过程中必须掌握的框架，需要好好钻研和掌握。下面是Scr
Amo Xiang·2023-12-22 12:17

scrapy的crawlspider爬虫

scrapy的crawlspider爬虫学习目标：了解crawlspider的作用应用crawlspider爬虫创建的方法应用crawlspider中rules的使用1crawlspider是什么回顾之前的代码中
攒了一袋星辰·2023-12-22 06:30

scrapy_redis原理分析并实现断点续爬以及分布式爬虫

scrapy_redis原理分析并实现断点续爬以及分布式爬虫学习目标了解scrapy实现去重的原理了解scrapy中请求入队的条件掌握scrapy_redis基于url地址的增量式单机爬虫掌握scrapy_redis
攒了一袋星辰·2023-12-22 06:00

Python编程习题（40）：python-列表：统计考试成绩

将一组考试成绩通过键盘输入，计算及格率、平均分、最高分和最低分。输入格式:成绩在一行输入，数据间用空格分隔。输出格式:输出及格率、平均分、最高分、最低分，精确到小数后1位。见样例输入样例:80.590100451565.5输出样例:及格率:66.7%平均分:66.0最高分:100.0最低分:15.0解答代码：score=list(input().split())sum=0max_score=flo
博学者普克尔特·2023-12-22 02:41

python-调用动态链接库dll/so的方法

文章目录一、linux环境1.函数编写2.编译为动态链接库so3.使用python调用4.检查动态链接库中的符号表5.添加extern"C"防止函数名被编译器修饰二、Windows环境1.编写test.cpp2.编译test.dll3.在python中调用4.运行结果可以看到输出了1+3的结果：![在这里插入图片描述](https://img-blog.csdnimg.cn/direct/9b83
flyingrtx·2023-12-21 17:50

Python-基于fastapi实现SSE流式返回（类似GPT）

最近在做大模型对话相关功能，需要将对话内容流式返回给前端页面（类似GPT的效果）。下面直接说下如何实现：1.首先导入fastapi和sse流式返回所需要的包fromfastapiimportAPIRouter,Response,statusfromsse_starlette.sseimportEventSourceResponse2.用EventSourceResponse来调用生成方法，在对话方
萧老板·2023-12-21 16:17

算法练习Day16 （Leetcode/Python-二叉树）

递归何时需要返回值1）搜索一整棵树且不需要处理递归返回值，就不需要返回值2）需要搜索一整棵树且需要处理递归返回值，则需要返回3）搜索其中一条符合条件的路径，就需要返回值，以便在遇到合适的路径时返回。112.PathSumGiventherootofabinarytreeandanintegertargetSum,returntrueifthetreehasaroot-to-leafpathsuch
叮叮咚咚响叮咚·2023-12-21 12:25

【Python-批量修改视频分辨率】

Python-批量修改视频分辨率1使用Python修改视频分辨率2常见的视频编码格式2.1等效的编码格式表示方式2.2常见的编码格式1使用Python修改视频分辨率首先拷贝视频文件并修改后缀，然后修改图片的分辨率
Dymc·2023-12-20 17:34

Python轴承故障诊断 (八)基于EMD-CNN-GRU并行模型的故障分类

EMD分解预处理3基于EMD-CNN-GRU并行模型的轴承故障诊断分类3.1训练数据、测试数据分组，数据分batch3.2定义EMD-CNN-GRU并行分类网络模型3.3设置参数，训练模型往期精彩内容：Python
建模先锋·2023-12-20 09:23

Python-数据分析可视化实例图

Python-数据分析可视化实例图一：3D纹理图运行效果图：Python代码：importmathfromtypingimportUnionimportpyecharts.optionsasoptsfrompyecharts.chartsimportSurface3Ddeffloat_range
温轻舟·2023-12-20 03:49

爬虫学习（认识爬虫）

经过前面的文章的学习，相信大家已经跨过了python的门槛，我们可以运用python做一些有意思的事了。现在我们开始新模块----爬虫。学习爬虫要本着别学太好的态度去学习，不然就很容易从入门到入狱。如果大家爬虫时遇到了很麻烦的反爬机制，请大家学会摆烂，及时住手。因为反爬机制是为了保护敏感数据，这些数据如果乱用可能会触犯法律。所以务必！务必！务必！及时住手！学会放弃！当然，学习爬虫还是有很多用处的，
睇笑·2023-12-20 01:06

爬虫学习（bs4）

一、CSV文件操作csv文件→逗号分隔值文件1、reader的用法（1）打开需要读的csv文件（2）创建文件对象的reader获取文件内容，返回值一个生成器，生成其中的元素就是文件中每一行内容对应的列表fromcsvimportreader,DictReader#打开需要读的csv文件f=open('电影.csv',encoding='utf-8')#创建文件对象的reader获取文件内容，返回值
睇笑·2023-12-20 01:06

爬虫学习笔记（一）

importrequestsURL=’http：//www.douban.com‘data=requests.get（URL）print（data.text）说明：importrequests.#调入需要的库requestsURL：将变量网址URL赋值为网址地址data=requests.get（URL）#利用requests库的get方法，向此URL发起请求，并将服务器返回的内容存入变量data
蛋黄果·2023-12-19 13:55

【python】JSON标准库文件介绍及python中json模块使用

CSDN21天学习挑战赛目录1.JSON简介2.JSON语法格式3.python中的json模块3.1python数据类型与json数据类型转换3.2json模块常用函数3.2.1json.dumps()函数python
小地瓜重新去华容道工作·2023-12-19 09:56

rabbitmq-常见七种消息队列-控制台界面管理-python-实现简单访问

文章目录1.消息的基本概念1.1.生产者和消费者1.2.消息队列(Queue)1.3.交换机(Exchange)1.4.消息确认2.七种队列模式2.1.简单模式(HelloWorld)2.2.工作队列模式(Workqueues)2.3.发布订阅模式(Publish/Subscribe)2.4.路由模式(Routing)2.5.主题模式(Topics)2.6.远程过程调用(RPC)2.7.发布者确认
插件开发·2023-12-19 09:13

Python电能质量扰动信号分类(一)基于LSTM模型的一维信号分类

目录引言1数据集制作与加载1.1导入数据1.2制作数据集2LSTM分类模型和超参数选取2.1定义LSTM分类模型2.2定义模型参数3LSTM模型训练与评估3.1模型训练3.2模型评估往期精彩内容：Python
建模先锋·2023-12-19 04:26

Python-凯斯西储大学（CWRU）轴承数据解读与分类处理

目录1数据集解读1.1振动信号数据通常以时域显示1.2凯斯西储大学轴承数据集描述的是什么数据？1.3实验平台介绍待测轴承：1.4以上三个不同位置的振动数据的区别解读1.5官网数据集介绍2数据集分类与制作2.1数据集分类解读2.2数据集处理与制作3基于Python的故障诊断和分类的研究思路3.1关于轴承故障类型分类的方法探讨3.2重点介绍关于轴承故障数据时频图像分类的方法引言本文深入浅出地讲解经典轴
建模先锋·2023-12-19 04:25

Python-折线图可视化

折线图可视化1.JSON数据格式2.pyecharts模块介绍3.pyecharts快速入门4.创建折线图1.JSON数据格式1.1什么是JSONJSON是一种轻量级的数据交互格式。可以按照JSON指定的格式去组织和封装数据JSON本质上是一个带有特定格式的字符串1.2主要功能json就是一种在各个编程语言中流通的数据格式，负责不同编程语言中的数据传递和交互1.3JSON有什么用各种编程语言存储数
草莓田田圈~·2023-12-18 06:30

Python爬虫学习笔记 (9) [初级] 小练习 爬取慕课网课程清单

更新日期:2021.03.28本节学习内容：练习使用bs4和xlwings-爬取慕课网免费课程清单并存为Excel文件。目录1.目标信息2.爬取步骤3.代码5.几个想法~~1.目标信息目标网站：https://www.imooc.com/目标信息：所有免费课程的名称，链接，方向，分类，讲师，难度，时长等。2020.03.28日慕课网免费课程清单有20个网页,每页有40个课程,点击课程的链接可进一步
Alice·2023-12-18 05:34

python-网络编程-02-进程

基础理论#一操作系统的作用：1：隐藏丑陋复杂的硬件接口，提供良好的抽象接口2：管理、调度进程，并且将多个进程对硬件的竞争变得有序#二多道技术：1.产生背景：针对单核，实现并发现在的主机一般是多核，那么每个核都会利用多道技术有4个cpu，运行于cpu1的某个程序遇到io阻塞，会等到io结束再重新调度，会被调度到4个cpu中的任意一个，具体由操作系统调度算法决定。2.空间上的复用：如内存中同时有多道程
梁正雄·2023-12-17 22:46

Python-类视图和蓝图

目录一.类视图二.蓝图一.类视图在Flask中，可通过视图函数展示视图http://t.csdnimg.cn/r6IFG也可基于类实现，类视图的好处是支持继承。标准类视图是继承flask.views模块中基类View的子类fromflask.viewsimportView该子类中必须重写View类中的dispatch_request()方法。除dispatch_request()方法外，我们也可以
dulu~dulu·2023-12-17 21:55

Python-编写点云处理软件（七）点云按高程、密度和强度着色

目录0简述1高程着色2强度着色3密度着色4结语0简述对于点云数据的可视化，着色是一种非常重要的技术，它可以将数据的关键特征以可视化的方式呈现出来。本篇我们将介绍点云按照高程、强度和密度三种方式进行着色以及它们在不同应用场景下的应用，并将着色方式集成到我们的点云处理软件中。1高程着色应用：高程着色是将点云的颜色根据其高程值进行映射的一种方法。高程值可以表示点云的海拔、高度或者表面的几何形状等信息。在
Auto工程师·2023-12-17 16:54

Python-编写点云处理软件（十五）交互式点云地面点提取

目录0简述1CSF算法原理2具体步骤3点云处理软件实现4效果展示0简述本篇在点云处理软件中实现点云地面点提取功能，通过窗口输入提取参数完成选中的点云对象提取地面点的功能。对于点云地面点滤波，众多传统算法滤波效果容易受到地形特征的影响（通常在复杂场景及陡峭地形区域滤波效果较差）且常常需要用户对数据有较为丰富的先验知识来进行设置滤波器中的各种参数，“布料”滤波算法（CSF）很好的解决了这一问题。1CS
Auto工程师·2023-12-17 16:54
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他