Python基础&爬虫

用Llama Factory单机多卡微调Qwen2.5时报torch.OutOfMemoryError: CUDA out of memory的解决办法

但如果仿照上篇博客，直接运行：llamafactory-clitrainexamples/train_qlora/qwen_lora
蛐蛐蛐·2025-02-12 22:27

关于kafka中的timestamp与offset的对应关系

关于kafka中的timestamp与offset的对应关系@(KAFKA)[storm,kafka,大数据]关于kafka中的timestamp与offset的对应关系获取单个分区的情况同时从所有分区获取消息的情况结论如何指定时间出现
jediael_lu·2025-02-12 21:22

Python网络爬虫笔记（四）——requests与BeautifulSoup

一、requestsrequest是请求库，用来获取页面信息。首先记得导入库啊，这个是第三方库，py没有自带，没有安装的小伙伴可以移步我上一篇安装第三方库教程importrequests介绍几个常用的函数1>请求命令importrequestsurl='https://www.163.com'resp=requests.get(url)get用途其实跟构造函数差不多，它的参数不少，我们这里主要用到
玄黄问道·2025-02-12 18:30

【Python】-- 爬虫及Requests、BeautifulSoup基础

Python爬虫技术，正是在这种背景下应运而生，它能够自动化地从互联网上获取大量数据，为企业和个人提供了巨大的便利。
apwangzitong·2025-02-12 18:54

python中的statistics_第40天： Python statistics 模块

importstatisticsexample_list=[1,2,3,4,5,6]x=statistics.mean(exampl
weixin_39692253·2025-02-12 17:52

python基础入门：附录：常用第三方库推荐（NumPy、Django等）

Python常用第三方库全景指南：从基础到前沿工具集一、数据科学核心套件数值计算三剑客#NumPy数组操作示例importnumpyasnparr=np.arange(1,10).reshape(3,3)print([email protected])#矩阵乘法#Pandas数据分析示例importpandasaspddf=pd.DataFrame({'A':np.random.randn(100),'B':np
赵鑫亿·2025-02-12 16:14

使用AWS CloudFormation部署ECS微服务参考架构

使用AWSCloudFormation部署ECS微服务参考架构ecs-refarch-cloudformationaws-samples/ecs-refarch-cloudformation:是一个用于在
宁烈廷·2025-02-12 16:13

python基础入门：8.1项目1：爬虫与数据分析

Python爬虫与数据分析全流程实战：从数据采集到可视化呈现#综合案例：电商价格监控分析系统importrequestsfrombs4importBeautifulSoupimportpandasaspdimportmatplotlib.pyplotasplt
赵鑫亿·2025-02-12 16:10

ECS 参考架构与 CloudFormation 项目推荐

ECS参考架构与CloudFormation项目推荐ecs-refarch-cloudformationaws-samples/ecs-refarch-cloudformation:是一个用于在AWS上部署和扩展容器化应用程序的参考架构
成婕秀Timothy·2025-02-12 16:39

猫眼电影爬虫和数据分析

记录一下作业，猫眼电影爬虫及分析，爬取猫眼电影数据，并对爬取的数据进行分析和展示。
Xechos·2025-02-12 15:05

如何使用 Python 爬虫获取猫眼电影数据：电影评分与评论分析

本篇博客将详细介绍如何使用Python爬虫技术获取猫眼电影平台上的电影数据，重点关注电影
Python爬虫项目·2025-02-12 14:01

亚马逊云科技-最大化迁移到云端的好处GenAI

亚马逊云科技-最大化迁移到云的好处GenAI关键字:[yt,]本文字数:500,阅读完需:2分钟导读在这场演讲中,JillShavinaStadart和OmaeSampt探讨了亚马逊云科技(亚马逊云科技
taibaili2023·2025-02-12 14:30

在线考试数据爬虫：基于Python的实现与数据分析

本文将介绍如何通过Python编写一个在线考试数据爬虫，自动收集在线教育平台上的考试数据，并通
Python爬虫项目·2025-02-12 13:24

一分钟教你学会Reqable

Reqable是一款强大的跨平台HTTP开发和调试工具，适用于开发、测试、网络、安全以及爬虫等领域的专业人员。下面将用一分钟的时间带你快速了解如何使用Reqable进行基本的抓包和调试操作。
用心去追梦·2025-02-12 12:50

Python爬虫：requests模块的基本使用

学习目标：了解requests模块的介绍掌握requests的基本使用掌握response常见的属性掌握requests.text和content的区别掌握解决网页的解码问题掌握requests模块发送带headers的请求掌握requests模块发送带参数的get请求1为什么要重点学习requests模块，而不是urllibrequests的底层实现就是urllibrequests在python
是Dream呀·2025-02-12 11:14

python爬虫---MongoDB保存爬取的数据

python爬虫scrapy爬虫博客文章，本文章主要是补充爬虫数据的保存。scrapy爬虫流程可以参考一下博文。
他是只猫·2025-02-12 11:12

Rust入门（八）：构建一个命令行程序

初始化项目、读取参数首先使用cargonew初始化一个项目，这个项目需要接收两个参数：文件名和需要搜索的字符串：$cargorunsearchstringexample-filename.tx
摸鱼老萌新·2025-02-12 08:23

animation基础练习源码_读DOTS-Unity.Animation.Samples(1)笔记

林七千：深入了解UnityDOTSSample(六):Animation和Part系统zhuanlan.zhihu.com找到介绍DOTS-Unity.Animation的文章很少，以上是我读过的最重要的一篇
weixin_39712865·2025-02-12 04:24

正则表达式【源码解析+代码例子+图】

正则表达式在爬虫上有所应用，比如我们要爬取一个一个网页上的电话号码，但是网页上有很多中文、英文、时间等等，如果让我们自己
lllsure·2025-02-12 03:15

自动评估基准 | 技巧与提示

测试集采用加密或门控形式，以防被网络爬虫
·2025-02-12 01:00

Golang 清晰架构RESTful API项目实战指南

Golang清晰架构RESTfulAPI项目实战指南golang-clean-web-apiGolangCleanarchitectureRESTAPIexamplewithacomprehensiverealproject.Itusesdocker
郝赢泉·2025-02-12 01:59

软件定义网络--05（ryu +onos 案例目录）

example_switch_13.py说明:OpenFlow1.3版本的示例交换机应用，展示了基本的交换机功能。gui_topology
·2025-02-12 01:22

Python——批量图片转PDF（GUI版本）

完整代码总结专栏导读欢迎来到Python办公自动化专栏—Python处理办公问题，解放您的双手️‍博客主页：请点击——>一晌小贪欢的博客主页求关注该系列文章专栏：请点击——>Python办公自动化专栏求订阅此外还有爬虫专栏
一晌小贪欢·2025-02-11 23:45

python爬虫常用库

示例：importrequestsresponse=requests.get("https://example.com",timeout=5)httpx用途：requests的增强版，支持HTTP/2和异步请求
一念&·2025-02-11 22:37

python--sqlite

importsqlite3#连接到数据库，如果数据库文件不存在则会创建一个新的conn=sqlite3.connect('example.db')#创建一个游标对象，用于执行SQL语句cursor=conn.cursor
一念&·2025-02-11 22:37

Python爬虫--伪装成浏览器

把爬虫伪装成浏览器1.技术原理我们不讲很官方的属于，简单的讲就是，一些论坛啊，博客啊为防止别人爬他们的文章，通常会判断是不是浏览器访问，如果不是那就屏蔽。
余十步·2025-02-11 21:02

python-爬虫基础-lxml.etree(2)

（5）元素包含文本文本包含元素中间文本和末尾文本，例如，中间的文本为中间文本，之后的文本为元素末尾文本。root=etree.Element("root")root.text="TEXT"print(root.text)print(etree.tostring(root))#加html节点html=etree.Element("html")#加body节点body=etree.SubElement
Aldeo·2025-02-11 21:01

【Python基础语法】defaultdict

Python的defaultdict是collections模块中提供的一种特殊的字典类型，它与普通的字典（dict）有着相似的功能，但有一个关键的不同点：当访问一个不存在的键时，defaultdict不会抛出KeyError异常，而是会自动为该键创建一个默认值。这种特性使得在处理需要初始化新键的情况时更加方便。创建defaultdict要使用defaultdict，首先需要从collection
大神神奇奇奇·2025-02-11 21:30

✅毕业设计：python商品推荐系统+协同过滤推荐算法+网络爬虫 2种推荐算法 计算机毕业设计 大数据（附源码）✅

博主介绍：✌全网粉丝10W+,前互联网大厂软件研发、集结硕博英豪成立工作室。专注于计算机相关专业项目实战6年之久，选择我们就是选择放心、选择安心毕业✌>想要获取完整文章或者源码，或者代做，拉到文章底部即可与我联系了。点击查看作者主页，了解更多项目！感兴趣的可以先收藏起来，点赞、关注不迷路，大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助同学们顺利毕业。1、毕业设计：2025年
vx_biyesheji0004·2025-02-11 21:29

一个基于Spring Boot的会员制医疗服务管理系统的案例代码

—1.项目结构src/main/java/com/example/medical├──config/#配置类├──controller/#API控制器│├──MemberController.java│
鹿屿二向箔·2025-02-11 20:20

通过node.js实现简单的爬虫

爬虫,来自百度百科的解释:网络爬虫(又称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动爬取万维网信息的程序或脚本.通俗来讲,假如你需要互联网上的信息,如商品价格
^命铭·2025-02-11 19:16

Python 深度学习项目目录规范

ProjectNameconfigs/settings工程项目配置文件夹config.pydocs工程项目相关文档说明文件夹data工程数据或数据获取代码文件夹demos/examples工程demo或
灰灰灰灰灰发·2025-02-11 19:15

Node.js 实现简单爬虫

介绍爬虫是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。本文将使用Nodejs编写一个简单的爬虫脚本，爬取一个美食网站，获取菜品的标题和图片链接，并以表格的形式输出。
忆宸_1·2025-02-11 18:37

python爬虫抓取91处理网

本人是个爬虫小萌新，看了网上教程学着做爬虫爬取91处理网www.91chuli.com，如果有什么问题请大佬们反馈，谢谢。以下是用lxml来爬取的。
dasein98·2025-02-11 17:00

探索智能时代的娱乐边界：91pron_Python

探索智能时代的娱乐边界：91pron_Python去发现同类优质开源项目:https://gitcode.com/在数字化时代，各种编程项目层出不穷，而是一个独特的Python脚本项目，它利用网络爬虫技术和数据分析
秋或依·2025-02-11 17:57

域名历史是什么？怎么进行域名历史查询？

它将IP地址转换成人类可读的格式，例如www.example.com。域名是互联网的基础，每个网站都需要一个独特的域名以便用户能够访问。什么是域名历史？
·2025-02-11 16:58

python基础实例

1、在Python语言中，对象是通过引用传递的。在赋值时，不管这个对象是新创建的，还是一个已经存在的，都是将该对象的引用（并不是值）赋值给变量。如：x=11这个整形对象被创建，然后将这个对象的引用赋值给x这个变量2、多元赋值，其实就是元组赋值x,y,z=1,2,'string'等价于(x,y,z)=(1,2,'string')利用多元赋值实现的两个变量的值交换>>>x,y=1,2>>>x1>>>y
沐阳zz·2025-02-11 14:13

Python网络爬虫精要

网络爬虫是什么网络爬虫是一种按照一定的规则，自动地抓取网站信息的程序或者脚本。我们都知道Python容易学，但是就是不知道如何去学，
小迪和夫人·2025-02-11 14:41

010-基础入门-HTTP数据包&amp；Postman构造&amp；请求方法&amp；请求头修改&amp；状态码判断

User-Agent:Mozilla/5.0(WindowsNT10.0;Win64;x64;rv:121.0)Gecko/20100101Firefox/121.0Accept:text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,/;q=0.8Accept-Language:zh-CN,zh;q=
2401_84239830·2025-02-11 12:01

Python基础知识10

在Python编程领域，内存模型紧密围绕对象展开，一切数据，无论是数字、字符串，还是列表等复杂结构，均以对象的形式存在于内存之中。透彻理解Python对象的内存管理机制，对于编写高效、稳定且安全的代码而言，具有举足轻重的意义。接下来，让我们深入探讨Python对象内存模型的核心要点、具体示例以及拓展方向。1.对象的基本属性Python对象具备三个至关重要的核心属性：标识（Identity）：这是用
ylfhpy·2025-02-11 12:29

强化学习关键技术：重要性采样深度剖析

目录一、引言二、重要性采样基本原理（一）什么是重要性采样（二）重要性采样在强化学习中的作用三、判断采样好坏的方法（一）偏差（Bias）（二）方差（Variance）（三）有效样本数量（EffectiveSampleSize
进一步有进一步的欢喜·2025-02-11 08:21

使用Python爬虫获取1688 App原数据API接口

一、引言在电商领域，数据是企业决策、市场分析和产品优化的关键要素。1688作为国内领先的B2B电商平台，汇聚了海量的商品信息和交易数据。通过获取1688App的原数据API接口，企业可以精准把握市场动态，了解竞争对手的策略，发现潜在的商业机会。二、Python在数据获取中的优势Python是一种简洁、易学且功能强大的编程语言，它拥有丰富的库和框架，能够高效地处理网络请求和数据解析。在获取1688A
不会玩技术的技术girl·2025-02-11 07:14

谈谈你了解的python_GitHub - hutianli/python_interview_question: 关于python的面试题

Python基础1、文件操作1.1、有一个jsonline格式的文件file.txt大小约为10K1.2、补充缺失的代码？2、模块与包2.1输入日期，判断这一天是这一年的第几天？
weixin_39639686·2025-02-11 05:30

cURL调用各种api接口的方法总结

以下是使用cURL调用各种API接口的方法总结：HTTPGET请求：发送HTTPGET请求获取API接口的数据，例如：bashcurlhttps://api.example.com/usersHTTPPOS
不起眼的Coder·2025-02-11 04:56

Node.js的API之dgram的用法详解

dgram是Node.js提供的一个核心模块，用于实现UDP（UserDatagramProtocol）通信。
小灰灰学编程·2025-02-11 03:17

Python网络爬虫实战:爬取中国散文网青年散文专栏文章

一、引言在当今数字时代,网络爬虫技术已成为获取和分析大规模在线数据的重要工具。本文将介绍一个实际的爬虫项目:爬取中国散文网青年散文专栏的所有文章。
智算菩萨·2025-02-10 23:11

Python爬虫入门教程24：下载某网站付费文档保存PDF(1)

Python爬虫入门教程10：彼岸壁纸爬取Python爬虫入门教程11：新版王者荣耀皮肤图片的爬取Python爬虫入门教程12：英雄联盟皮肤图片的爬取Python爬虫入门教程13：高质量电脑桌面壁纸爬取
好像要长脑子了1·2025-02-10 22:07

Python酷库之旅-第三方库Pandas(146)

目录一、用法精讲661、pandas.Timestamp.value属性661-1、语法661-2、参数661-3、功能661-4、返回值661-5、说明661-6、用法661-6-1、数据准备661-
神奇夜光杯·2025-02-10 22:07

c#中Thread.Join()方法的经典示例

1、经典示例1usingSystem;usingSystem.Threading;publicclassExample{staticThreadthread1,thread2;publicstaticvoidMain
飞由于度·2025-02-10 22:06

B2C API安全警示：爬虫之外，潜藏更大风险挑战

然而，许多企业在关注爬虫攻击这一显性风险的同时，却往往忽视了潜藏在背后的更大风险挑战。一、爬虫攻击：显性风险不容忽视提到B2CAPI的安全威胁，爬虫攻击无疑是一个让人头疼的问题。爬虫通过
真想骂*·2025-02-10 21:58
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他