E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
爬虫基础篇
python
爬虫
——电影天堂电影
一、爬取目标网站数据,关键项不能少于5项。首先需导入requests、BeautifulSoup、xlwt、re第三方库代码如下:importrequestsimportreimportxlwtfrombs4importBeautifulSoupurl='https://www.dygod.net/html/gndy/china/'hd={ 'User-Agent':'Mozilla/5.0(W
969库库库
·
2024-01-26 02:53
python
开发语言
Java面试——
基础篇
目录1、java语言有哪些优点和缺点?2、JVM、JDK和JRE的关系3、为什么说Java语言“编译与解释并存”?4、Java和c++的区别5、基本数据类型5.1、java的8种基本数据类型:5.2、基本类型和包装类型的区别:5.3、包装类型的缓存机制:5.4、自动装箱和自动拆箱:5.5、浮点数运算的精度丢失问题及解决办法:6、变量6.1、成员变量与局部变量的区别?6.2、静态变量有什么作用?6.
我真的很帅阿
·
2024-01-26 00:45
八股文
java
面试
开发语言
Java基础
爬虫
实战3——道客巴巴文档免费下载(使用puppeteer获取canvas标签内容)
之前写过
爬虫
爬取豆丁网的资料,这次轮到了道客巴巴了,但是在写
爬虫
的时候发现其文档资料并不是以图片形式显示的,而是用canvas标签绘制渲染的,于是遇到了瓶颈。
走错说爱你
·
2024-01-25 21:59
[第一章 web入门]信息收集
进行目录扫描:http://641b1a56-4c8b-4b60-a33f-7af1a2b236a2.node5.buuoj.cn:81/存在robots.txt文件,该文件中主要用来记录哪些文件可以
爬虫
carrot11223
·
2024-01-25 20:27
CTF训练营
前端
ctf
信息收集
fofa
爬虫
今天想上fofa找几个网站实战下,fofa高级会员有点贵,用的一个共享号当天请求过多,明天再试,恩,那不调用api了,自己写一个
爬虫
,获取web界面的总行了吧多线程爬取3.8s下面是异步爬取2.16s,
weixin_45111459
·
2024-01-25 20:50
python
2024金三银四java面试这一篇就够了(干货)
前言一、
基础篇
1.1.Java语言有哪些特点1、简单易学、有丰富的类库2、面向对象(Java最重要的特性,让程序耦合度更低,内聚性更高)3、与平台无关性(JVM是Java跨平台使用的根本)4、可靠安全5
豆豆的java之旅
·
2024-01-25 19:52
面试
java
后端
spring
boot
分布式
C#从入门到入坟(原创不易,转载请注明出处)
文章目录C#
基础篇
0环境部署1Helloworld1.1两种框架1.2创建项目的过程1.3项目组成结构1.3.1解决方案和项目1.3.2程序集信息1.3.3引用1.3.4配置文件1.3.5程序入口类1.4
kobe_OKOK_
·
2024-01-25 19:12
c#
windows
microsoft
MySQL(
基础篇
)——SQL
一.SQL分类二.DDL(数据定义语言)1.DDL——数据库操作①查询查询所有数据库SHOWDATABASES查询当前所处数据库SELECTDATABASE()②创建CREATEDATABASE[IFNOTEXISTS]数据库名(通常以db结尾)[DEFAULTCHARSET字符集][COLLATE排序规则]③删除DROPDATABASE[IFEXISTS]数据库名④使用USE数据库名2.DDL—
郭天宇 abfore
·
2024-01-25 18:07
mysql
sql
数据库
MySQL(
基础篇
)——基本概念
一.数据库相关概念1.数据库(DataBaseDB)为了方便数据的存储和管理,将数据按照特定的规则(有组织的)存储起来,就是一个存储数据的数据库。2.数据库管理系统(DataBaseManagementSystem)操纵和管理数据库的大型软件。3.SQL(StructuredQueryLanguage)——结构化查询语言操作关系型数据库的编程语言,定义了一套操作关系型数据库的同意标准。4.关系型数
郭天宇 abfore
·
2024-01-25 18:37
数据库
基于PHP的校园点餐微信小程序--68130(免费领源码+数据库)可做计算机毕业设计JAVA、PHP、
爬虫
、APP、小程序、C#、C++、python、数据可视化、大数据、全套文案
PHP校园点餐小程序摘要随着我国经济迅速发展,人们对手机的需求越来越大,各种手机软件也都在被广泛应用,但是对于手机进行数据信息管理,对于手机的各种软件也是备受用户的喜爱,校园点餐小程序被用户普遍使用,为方便用户能够可以随时进行校园点餐小程序的数据信息管理,特开发了基于PHP校园点餐小程序的管理系统。校园点餐小程序的设计主要是对系统所要实现的功能进行详细考虑,确定所要实现的功能后进行界面的设计,在这
vx_BS81330
·
2024-01-25 17:02
小程序
php
微信小程序
spring
boot
java
servlet
vue.js
基于springboot的少年宫竞赛活动管理系统--67938(免费领源码+数据库)可做计算机毕业设计JAVA、PHP、
爬虫
、APP、小程序、C#、C++、python、数据可视化、大数据、全套文案
目录摘要1绪论1.1课题开发背景与意义1.2国内外研究现状1.3系统开发技术的特色1.4springboot框架介绍1.5论文结构与章节安排22少年宫竞赛活动管理系统系统分析2.1可行性分析2.2系统流程分析2.2.1数据增加流程2.3.2数据修改流程2.3.3数据删除流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3少年宫竞赛活动管理系统总体设计3
vx_BS81330
·
2024-01-25 17:01
spring
boot
java
php
servlet
vue.js
mysql
spring
基于Python的家政服务平台--67846(免费领源码+数据库)可做计算机毕业设计JAVA、PHP、
爬虫
、APP、小程序、C#、C++、python、数据可视化、大数据、全套文案
目录摘要1绪论1.1研究目的和意义1.2研究背景1.3django框架介绍1.4论文结构与章节安排2家政服务平台系统分析2.1可行性分析2.1.1技术可行性分析2.1.2经济可行性分析2.1.3法律可行性分析2.2系统功能分析2.2.1功能性分析2.2.2非功能性分析2.3系统用例分析2.4系统流程分析2.4.1数据流程2.4.2业务流程2.5本章小结3家政服务平台总体设计3.1系统功能模块设计3
vx_BS81330
·
2024-01-25 17:31
python
java
spring
boot
php
servlet
vue.js
mysql
基于SSM的线上办公系统--60327(免费领源码+数据库)可做计算机毕业设计JAVA、PHP、
爬虫
、APP、小程序、C#、C++、python、数据可视化、大数据、全套文
SSM线上办公系统的设计与实现摘要一个企业实现办公自动化的程度是衡量其实现现代化管理的标准。办公自动化就是采用Internet技术,基于工作流的概念,使企业内部人员方便快捷地共享信息,高效协同工作。线上办公系统主要功能模块包括员工管理、部门管理、岗位管理、薪酬管理、任务下达、汇报查看、用品申请、报销申请管理等,采取面对对象的开发模式进行软件的开发和硬体的架设,能很好的满足实际使用的需求,完善了对应
vx_BS81330
·
2024-01-25 17:30
java
spring
boot
php
servlet
vue.js
小程序
基于Springboot的二手校园交易平台--67613(免费领源码+数据库)可做计算机毕业设计JAVA、PHP、
爬虫
、APP、小程序、C#、C++、python、数据可视化、大数据、全套文
目录摘要1绪论1.1研究背景1.2国内外研究现状1.3论文结构与章节安排2二手校园交易平台系统分析2.1可行性分析2.2系统流程分析2.2.1数据流程3.3.2业务流程2.3系统功能分析2.3.1功能性分析2.3.2非功能性分析2.4系统用例分析2.5本章小结3二手校园交易平台总体设计3.1系统架构设计3.2系统功能模块设计3.2.1整体功能模块设计3.2.2用户模块设计3.2.3评论管理模块设计
vx_BS81330
·
2024-01-25 17:58
java
spring
boot
小程序
servlet
php
mysql
spring
Python
爬虫
案例(多线程+消息队列初阶)
目录相关库介绍相关库介绍BeautifulSoupBeautifulSoup是一个用于从HTML或XML文件中提取数据的Python库。它提供了一种非常方便的方式来浏览文档、搜索特定标签或内容,以及对标签进行修改。BeautifulSoup的主要作用是帮助解析和提取HTML/XML文档中的数据,使得在Python中处理Web数据变得更加简单。常用方法:BeautifulSoup(markup,'h
€On my way•£
·
2024-01-25 16:42
Python
python
爬虫
开发语言
网络爬虫
【电商API接口Python实例】100个Python
爬虫
实例
首先,我们来说说什么是
爬虫
。就是通过自动化技术去访问网站上的数据,把需要的信息提取出来,进行数据分析和处理的过程。这种技术可以大规模地获取数据,极大地提高了信息的获取效率。
电商数据girl
·
2024-01-25 16:55
python
爬虫
开发语言
java
php
大数据
json
浅析STL之STL是什么,包含什么,怎么用呢?
初识STL——
基础篇
一、STL到底是什么STL从广义上分为:容器、算法和迭代器。迭代器是容器和算法的粘合剂。又细分为六大组件:容器、算法、迭代器、仿函数、适配器、空间配置器;彼此间可以组合套用。
跟着小宋一起学
·
2024-01-25 15:30
STL学习
C++
STL
python中——requests
爬虫
【中文乱码】的3种解决方法
requests是一个较为简单易用的HTTP请求库,是python中编写
爬虫
程序最基础常用的一个库。而【中文乱码】问题,是最常遇到的问题,对于初学者来说,是很困恼的。
程序员老冉
·
2024-01-25 14:14
python
爬虫
开发语言
教你用Python爬图虫网图片
TuChong_Spider偶然的机会在抖音看到这个APP,发现有很多高质量的手机壁纸和图片,对于一个
爬虫
初学者,这就非常美滋滋了,好多欧美小姐姐啊,哎嘿嘿....图虫网共享图库
爬虫
,通过抓取Ajax获取图片
imorta__
·
2024-01-25 14:32
一文带你快速了解Python史上最快Web框架
长期致力于Python与
爬虫
领域研究与开发工作!【作者推荐】:对JS逆向感兴趣的朋友可以关注《
爬虫
JS逆向实战》,对分布式
爬虫
平台感兴趣的朋友可以关注《分布式
爬虫
平台搭建与
程序员老冉
·
2024-01-25 14:13
python
前端
开发语言
爬虫
模板(附完整代码+案例)
数据清洗,这里大家各有各的办法,依情况而定可以使用re正则表达式,如:可以使用xpath,如:可以使用字典,如:可以使用bs4,如:4、储存5、完整模板代码总结:求关注+收藏+点赞背景像我经常需要使用一些
爬虫
脚本去获取某些网站的信息
一晌小贪欢
·
2024-01-25 14:42
Python爬虫
爬虫
QT
基础篇
(16)QT5单元测试框架
1.QTEstLib框架QTestLib框架是一个用于软件测试的开源框架,是Qt工具套件的一部分。它提供了一组用于编写自动化测试和单元测试的类和函数。QTestLib可以方便地为Qt应用程序编写单元测试,包括测试GUI和非GUI的代码。它提供了一系列断言和辅助函数,用于验证测试的预期结果和处理测试数据。QTestLib的特点包括:支持C++和Qt框架,可以与Qt的信号和槽机制集成。提供了各种断言函
Solitude的学习日记
·
2024-01-25 13:17
qt
单元测试
开发语言
【python
爬虫
】设计自己的
爬虫
4. 封装模拟浏览器 PyppeteerSimulate
Pyppeteer是Puppeteer的Python版实现Pyppeteer的背后实际上有一个类似于Chrome的浏览器–ChromiumclassPyppeteerSimulate(BrowserSimulateBase):def__init__(self):self.browser=Noneself.page=None#启动浏览器#is_headless是否开启无头模式#is_cdp是否使用c
loyd3
·
2024-01-25 13:40
python爬虫
python
爬虫
开发语言
我的战疫日记 | 一个普通人写的日记 |2.22
我能去阳台贪婪呼吸被阳光晒过后的空气中的螨虫香味的机会不多我是那种一旦开工就会停不下来的人因为想做的事情很多想实现的理想也很大一天下来我基本会工作到晚上10点以后比如这是我今天给自己的工作安排营销管理第五章看完BM网站推广视频文案完成领英发试用邀请函知乎回答问题做反链营销情报站第一个店铺
爬虫
公众号文章漫画脚本
大大大大岛主
·
2024-01-25 13:39
20190430 -conscious
1.认识这个词(
基础篇
)词:-conscious英英释义:caringaboutsomethingspecified例句:Service-consciouscustomersareinfavorofHaidilao
chinmanjay
·
2024-01-25 13:40
Java 面试题库
基础篇
面向对象的特征封装(Encapsulation):封装是指将对象的数据(属性)和行为(方法)结合在一起,形成一个独立的实体。对象的数据被隐藏在内部,只能通过定义好的接口(方法)来访问。
拼尽全力前进
·
2024-01-25 12:25
java
面试
开发语言
基于python和定向
爬虫
的商品比价系统实现
目录前言一、系统设计1.系统需求分析2.系统设计思路二、系统实现1.
爬虫
部分2.比价部分3.完整系统代码三、系统优化1.多线程爬取2.引入数据库四、总结前言商品比价系统是一种可以帮助用户快速找到最优价格商品的系统
小文没烦恼
·
2024-01-25 12:42
python
爬虫
开发语言
【Python】01快速上手
爬虫
案例一
文章目录前言一、VSCode+Python环境搭建二、
爬虫
案例一1、爬取第一页数据2、爬取所有页数据3、格式化html数据4、导出excel文件前言实战是最好的老师,直接案例操作,快速上手。
joinclear
·
2024-01-25 12:11
Python
python
爬虫
开发语言
5.Python
爬虫
前的准备工作
知识准备1)Python语言Python
爬虫
作为Python编程的进阶知识,要求具备较好的Python编程基础了解Python语言的多进程与多线程,并熟悉正则表达式语法,也有助于编写
爬虫
程序2)Web前端了解
光头小白
·
2024-01-25 12:10
#
爬虫
爬虫
python
Scrapy
爬虫
在新闻数据提取中的应用
Scrapy是一个强大的
爬虫
框架,广泛用于从网站上提取结构化数据。下面这段代码是Scrapy
爬虫
的一个例子,用于从新闻网站上提取和分组新闻数据。
一勺菠萝丶
·
2024-01-25 12:09
scrapy
爬虫
python
爬虫
实战——自动话获取淘宝商品数据
嗨喽,大家好呀~这里是爱看美女的茜茜呐开发环境:python3.8pycharm专业版三方库:DrissionPage>>>pipinstallDrissionPage如何安装python第三方模块:win+R输入cmd点击确定,输入安装命令pipinstall模块名(pipinstallrequests)回车在pycharm中点击Terminal(终端)输入安装命令更多精彩机密、教程,尽在下方,
茜茜是帅哥
·
2024-01-25 12:39
python爬虫
python
爬虫
开发语言
pycharm
学习
数据分析总结
1.
基础篇
语句含义例句select查询select*fromtable1limit10distinct去重selectdistinctcityfromtable1where限制条件selectdistinctuseridfromtable1wherecity
daydayup8888
·
2024-01-25 12:06
数据分析
hive
数据分析
数据库
sql
【前端基础--1】
为后面
爬虫
打基础使用VisualStudioCode(VSCode)https://code.visualstudio.com/#alt-downloads网页基础创建一个html网页新建一个文件文件名后缀
洛临_
·
2024-01-25 12:22
前端
考研C语言刷题
基础篇
之数组(一)
目录第一题:用数组作为参数实现冒泡排序不用函数的冒泡排序冒泡排序原理:错误的数值传参冒泡排序错误的原因就是什么是数组名正确的数组传参的冒泡排序数组的地址和数组首元素的地址的区别第一题:用数组作为参数实现冒泡排序不用函数的冒泡排序冒泡排序原理:一共经过n-1次排序:相邻之间两两作比较。交换位置//数组作为参数实现冒泡排序intmain(){intarr[]={10,9,8,7,6,5,4,3,2,1
深中笃行
·
2024-01-25 11:09
考研c语言刷题
c语言
开发语言
Spring如何使用自定义注解来实现自动管理事务?
人可以做他(她)想做的,但不能要他(她)想要的一个目录前言业务代码展示手动挡自动挡事务失效的问题代码地址前言在两年半以前,我写了一篇博客:框架的灵魂之注解
基础篇
:在那篇博客的结尾,我埋了一个坑:如今,我练习时长达两年半
古阙月
·
2024-01-25 11:26
SpringBoot
spring
java
后端
【精讲】PCIe
基础篇
——Non-Prefetchable & Prefetchable MMIO
MMIO有两种,Non-PrefetchableMMIO:非预取内存空间PrefetchableMMIO:可预取内存空间PrefetchableMMIO:将MMIO的一个区域设置为可预取的,允许CPU提前获取该区域中的数据,以预测请求者在不久的将来可能需要比实际请求更多的数据。对数据进行这种小规模缓存是安全的,因为读取数据不会改变目标设备上的任何状态信息。也就是说,读取位置的行为没有副作用。例如,
咸鱼弟
·
2024-01-25 11:02
PCIe
pci-e
计算机网络
【精讲】PCIe
基础篇
——BDF与配置空间
BDFPCIe总线中的每一个功能都有一个唯一的标识符与之对应。这个标识符就是BDF(Bus,Device,Function)BUS:总线号,最多可以通过配置软件分配256个总线号。初始总线号,总线0,通常由硬件分配给RootComplex。总线0由一个集成了端点的虚拟PCI总线和一个硬编码的设备号和功能号的虚拟PCI-to-PCI桥(P2P)组成。每个P2P网桥创建一个新的总线,附加的PCle设备
咸鱼弟
·
2024-01-25 11:31
PCIe
pci-e
计算机网络
【精讲】PCIe
基础篇
——BAR(Base Address Register)详解
一、为什么需要BAR系统中的每个设备中,对地址空间的大小和访问方式可能有不同的需求,例如,一个设备可能有256字节的内部寄存器/存储,应该可以通过IO地址空间访问,而另一个设备可能有16KB的内部寄存器/存储,应该可以通过基于MMIO的设备访问。哪些地址应该使用哪种方式(IO或Memory)来访问它们的内部位置,这是系统软件(即BIOS和OS内核)的工作。因此设备必须为系统软件提供一种方法来确定设
咸鱼弟
·
2024-01-25 11:31
PCIe
pci-e
计算机网络
电脑硬件
操作系统
bios
【精讲】PCIe
基础篇
——BAR配置过程
BAR基础介绍请参考【博文连载】PCIe
基础篇
——BAR(BaseAddressRegister)详解本节讲解BAR的填充过程。
咸鱼弟
·
2024-01-25 11:31
PCIe
pci-e
计算机网络
bios
os
硬件
【精讲】PCIe
基础篇
——Memory & IO 地址空间
在早期的PC中,IO设备中的内部寄存器/存储是通过IO地址空间(由Intel定义)来访问的。然而,由于与IO地址空间相关的一些限制和不良影响(我们在这里不讨论),IO地址空间很快就失去了软件和硬件供应商的青睐。这导致IO设备的内部寄存器/存储被映射到内存地址空间(通常称为MemorymappedIO,或MMIO)。然而,由于早期的软件是使用IC地址空间来访问IO设备上的内部寄存器/存储,因此在内存
咸鱼弟
·
2024-01-25 11:31
PCIe
pci-e
计算机网络
bios
轻松学会消息队列之kafka
基础篇
理论Kafka是一款开源的、轻量级的、分布式、可分区和具有复制备份的(Replicated)、基于ZooKeeper协调管理的分布式流平台的功能强大的消息系统。与传统的消息系统相比,Kafka能够很好地处理活跃的流数据,使得数据在各个子系统中高性能、低延迟地不停流转。Kafka定位就是一个分布式流处理平台。作为一个流式处理平台,必须具备以下3个关键特性。•能够允许发布和订阅流数据。从这个角度来讲,
Friends of the wind
·
2024-01-25 10:29
云计算-架构
kafka
分布式
消息队列
linux
centos
网页的解析之正则表达式
在
爬虫
入门到精通第四讲中,我们了解了如何下载网页,这一节就是如何从下载的网页中获取我们想要的内容html=u"""文章的标题h1文字Input"""我们要获取的html如上所示假如我们要获取文章的标题这几个文字
高金01
·
2024-01-25 10:17
requests库的学习及使用
requests
爬虫
的四个步骤:1.指定url2.发起请求3.获取响应数据4.持久化存储importrequestsfromfake_useragentimportUserAgent#defkey_word
cbb25548d873
·
2024-01-25 10:38
爬虫
笔记(二):实战58二手房
第一:给大家推荐一个
爬虫
的网课哈,码起来第二:今夜主题:通过xpath爬取58二手房的title信息,也就是标红的位置~第三:先分析一波title所在的位置打开按下f12打开抓包工具,即可看到网站的源码
学不动了躺叭
·
2024-01-25 10:04
爬虫
笔记
【提效】让GPT帮你写
爬虫
程序,不懂
爬虫
也能行
文章目录1.详细操作步骤2.总结我的
爬虫
背景:基本小白,只知道网页的代码大概长啥样,但是css之类的完全不懂。在这样的背景下,我使用GPT帮我完成了
爬虫
程序。所以本文比较适合
爬虫
小白。
同学小张
·
2024-01-25 09:28
大模型
python
gpt
爬虫
【AI Agent系列】【MetaGPT】8. 一句话订阅专属信息 - 订阅智能体进阶,实现一个更通用的订阅智能体
文章目录0.前置推荐阅读1.本文内容2.解析用户指令(分析用户需求)2.1完整代码及注释2.2运行结果3.利用大模型写
爬虫
代码3.1对html内容进行精简3.2利用大模型写
爬虫
代码3.3补充代码,测试本节程序
同学小张
·
2024-01-25 09:58
python
大模型
人工智能
python
笔记
经验分享
chatgpt
AI写作
AI编程
Python期末实训,
爬虫
实验报告
Python爬取豆瓣电影版权声明:本文为博主原创文章,遵循CC4.0BY-SA版权协议,转载请附上原文出处链接和本声明。本文链接:https://blog.csdn.net/qq_45774645/article/details/118071499简介:Python中有很多第三方库,可以快速处理网页,我们使用四个库来爬取网页,并且保存数据importurllib.request#获取整个网页内容f
等待花开I
·
2024-01-25 09:47
python
python
正则表达式
爬虫
程序媛的mac修炼手册-- 如何用Python节省WPS会员费
上篇分享了如何用微博
爬虫
,咱举例爬了女明星江疏影的微博数据。今天就用这些数据,给大家安利一下怎么用Python实现WPS中部分Excel付费功能。
灵韵aura
·
2024-01-25 09:43
macos
wps
如何有效防
爬虫
?一文讲解反
爬虫
策略
在众多攻击手段中,网络
爬虫
是企业面临的主要安全挑战。恶意
爬虫
活动可能导致数据滥用、盗窃商业机密等问题,损害用户隐私和数据安全。那么如何防
爬虫
,在攻防之战中占据主动地位?今天为大家讲解有效的反
爬虫
策略。
hanniuniu13
·
2024-01-25 08:50
爬虫
爬虫
系列:读取 CSV、PDF、Word 文档
上一期我们讲解了使用Python读取文档编码的相关问题,本期我们讲解使用Python处理CSV、PDF、Word文档相关内容。CSV我们进行网页采集的时候,你可能会遇到CSV文件,也可能项目需要将数据保存到CSV文件。Python有一个超赞的标准库可以读写CSV文件。虽然这个库可以处理各种CSV文件,但是我们这里重点介绍标准CSV格式。读取CSV文件Python的CSV主要是面向本地用户,也就是说
pdflibr
·
2024-01-25 08:10
上一页
37
38
39
40
41
42
43
44
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他