多线程爬虫

Java爬虫与SSL代理：实际案例分析与技术探讨

前言网络爬虫成为获取互联网数据的重要工具之一,然而，随着网络安全意识的提高，许多网站开始采用SSL加密来保护数据传输的安全性。
小白学大数据·2024-01-30 13:14

ZooKeeper 分布式锁-原理&简单代码实现

操作-CuratorWatch事件监听零、本文纲要一、分布式锁二、ZooKeeper实现分布式锁三、分布式锁的代码实现一、分布式锁单机单机应用同一个JVM，使用synchronized或者Lock来解决多线程代码同步问题
石头耳东·2024-01-30 12:44

ConcurrentHashMap详解

这是一个在多线程环境下高效操作的线程安全的哈希表，让我们一起来了解它的使用和原理。ConcurrentHashMap简介ConcurrentHashMap是Java集合框架中的一个类，位于java.u
u010405836·2024-01-30 12:43

Java技术体系(韩顺平老师整理)

封装继承多态数组JavaAPI异常以及处理集合泛型IO反射网络通信MySQL基础SQLJDBCPreparedStatementJDBCUtils事务连接池c3p0DBCPDruid第二部分：Java高级Java多线程
Hacoj·2024-01-30 11:07

java基础 -10 Set之ConcurrentSkipListSet、EnumSet

ConcurrentSkipListSetConcurrentSkipListSet是java中的集合类，是在多线程的环境中使用的，实现Set接口，它基于跳表(skipList)的数据结构。
Miaow.Y.Hu·2024-01-30 11:23

线程&锁&多线程的复习

线程实现方式3种乐观锁&悲观锁线程池线程池总结进程:是正在运行的程序线程:是进程中的单个顺序控制流,是一条执行路径实现方式3种1.Thread//步骤一:定义一个继承Thread的类//步骤二:再定义的类中重写run()方法//步骤三:创建定义类对象//步骤四:启动线程classMyThreadextendsThread{@Overridepublicvoidrun(){System.out.pr
滑上又滑落 一收和一放·2024-01-30 11:41

iOS 多线程的理解

代码为主，为了方便加深自己记忆，且主要一GCD为主，因为最为常用CGD队列串行队列//串行队列dispatch_queue_tqueueSync=dispatch_queue_create("queueSync",DISPATCH_QUEUE_SERIAL);//项目中提供的主队列就是串行队列dispatch_queue_tmainQueue=dispatch_get_main_queue();并
陈贤森·2024-01-30 11:00

实战教程：如何用Spring Boot和MySQL存储共享单车数据

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-01-30 11:08

菜谱的未来：SpringBoot, Vue与MySQL的智能推荐系统设计

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-01-30 11:37

JVM篇：垃圾回收器

串行垃圾回收器单线程实现垃圾回收，适合堆内存比较小的场景，如个人电脑吞吐量优先多线程实现，适合堆内存比较大的场景（服务器）优点：让单位时间内，垃圾回收的时间尽可能短（比如一个小时内进行了2次垃圾回收，一次回收需要
zmbwcx2003·2024-01-30 11:07

【JS逆向实战-入门篇】某gov网站加密参数分析与Python算法还原

长期致力于Python与爬虫领域研究与开发工作！
吴秋霖·2024-01-30 11:36

详解Java、SpringBoot、Vue和MySQL在线考试系统的设计与实现

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-01-30 11:06

轻松爬取网页数据：低代码&零编程技巧的自动化爬虫神器！

前言在以前的文章中，我们学习了通过playwright+python+requests可以实现绕过浏览器鉴权进行接口请求。在曾经的一次数据爬取的时候，我尝试去获取Boss直聘的岗位信息，可是很不巧，boss直聘的反爬机制把我的IP直接封了，妙啊。在这里给大家推荐一款工具：亮数据。他可以使用真实IP进行代理，从而对目标网站数据进行获取。注册注册地址：点击注册免费试用进入中文版首页页面如下：我们填写相
梦无矶·2024-01-30 11:29

C++ std::thread 的基本使用方法&&Linux强制结束进程

std::thread是C++11中的一个多线程库，用于创建和管理线程。使用std::thread，可以将一个函数或可调用对象作为参数，创建一个新的线程来运行该函数或对象。
淋雨的蜗牛·2024-01-30 10:18

并发无锁的艺术

前言在并发编程中，多线程的共享资源的修改往往会造成严重的线程安全问题，解决这种问题简单暴力的方式就是加锁，加锁的方式使用简单易理解，但常常会因为阻塞导致性能问题有没有可能做到无锁还保证线程安全呐？
pq217·2024-01-30 10:24

python爬虫+虚拟机centos7+pyqt5+mapreduce实现微博舆情分析系统

记录一下自己做的一个简单的微博舆情分析系统，但是mapreduce实际就是单独的一个模块，不属于系统的一个部分，还有很多的不足之处，第一次学习这方面的知识做的。后续希望进行改进。1.需求分析1.1引言随着互联网的快速发展，越来越多的人习惯于在网络上发表自己的观点。作为中国一大社交媒体平台，微博每天都会产生各类信息，其中的热搜更是会引导大众的视线和态度，有时甚至会达到难以控制的地步。由于活跃用户众多
deleteeee·2024-01-30 08:53

day12 线程状态

线程强制执行-joinJDK帮助文档查看Thread、Thread.State：Thread(JavaPlatformSE8)(oracle.com)线程状态参考：线程的五种状态_线程的状态-CSDN博客多线程之线程的状态
mollzz·2024-01-30 08:07

day13+14 线程同步

文章目录1.线程同步2.不安全案例3.1同步方法3.2同步块4.死锁5.LOCK(锁)1.线程同步（多个线程操作同一个资源）并发：同一个对象被多个线程同时操作处理多线程问题时，多个线程访问同一个对象，并且某个线程还想修改这个对象
mollzz·2024-01-30 08:07

程序员必备技能——正则表达式

*六、不同语言的正则表达式6.1Python示例6.2C#示例6.3Golang示例总结写在后面前言当我们在通过爬虫抓取网页数据的时候，请求回来的网页数据其实是一个很长很长的字符串。
攻城狮白玉·2024-01-30 08:24

多线程工具类

组里的人多线程用的乱七八糟的，甚至每使用一个多线程就多一个Callable类。还有线程池也用的不是同一个，风险比较大。
从心归零·2024-01-30 07:53

QT环境下使用OPenCV(基于TCP实现摄像头图像数据的多线程传输)

1.说明通常情况下对于图像数据的采集可以放在后端进行，采集到的图像数据如果有需要可以通过通信将数据传输到前端进行显示，这其中需要使用到TCP数据传输协议和QT下的多线程开发技术。
山间点烟雨·2024-01-30 07:12

【Qt 多线程+opencv 读取和显示图像】

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言工程需要Qt多线程+opencv结合信号与槽读取和显示图像一、例程二、线程的开启和关闭三、判断线程是否还在运行总结前言提示：这里可以添加本文要记录的大概内容
Winner1300·2024-01-30 07:40

playwright网络爬虫实战案例分享

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤不寝听金钥，因风想玉珂。大家好，我是Python进阶者。
Python进阶者·2024-01-30 07:05

网络爬虫详解

网络爬虫（WebCrawler）是一种自动化程序，用于在互联网上获取和提取数据。它们可以遍历互联网上的网页、收集数据，并进行处理和分析。网络爬虫也被称为网络蜘蛛、网络机器人等。
诗雅颂·2024-01-30 07:33

百度百家号旋转验证码识别代码分享

1、效果演示2、如何识别2.1准备数据集首先需要使用爬虫，对验证码图片进行采集，尽量每一种类型都要采集到。
Dxy1239310216·2024-01-30 07:31

【Python】03快速上手爬虫案例三：搞定药师帮

文章目录前言1、破解验证码2、获取数据前言流程：通过用户名、密码、搞定验证码，登录进药师帮网站，然后抓取想要的数据。爬取数据，最终效果图：1、破解验证码使用药师帮测试系统：https://dianrc.ysbang.cn/#/home引入打码平台进行破解，我这里使用的是云码。代码如下：code_result.pyimportjsonimportrequestsimportbase64classYd
joinclear·2024-01-30 07:59

GUI组件截取log4j日志并输出到

这几天在为自己写的一个消息发送工具加一个UI控制界面，之前的爬虫核心是以命令行启动的，所以日志信息由log4j直接输出的控制台，可是现在有了UI，就不能再将日志信息输出到控制台了，必须将日志信息以某种方式截取
zhanglu5116·2024-01-30 06:41

多线程

多线程多线程多线程0、简介1、特性2、实现线程的方式2、1通过继承Thread类的方法创建2、2通过实现Runable接口的方法创建2、3通过Callable和FutureTask创建线程2、4通过线程池创建线程
咕噜咕噜~噜噜噜·2024-01-30 06:10

Java多线程相关学习

Java多线程文章目录Java多线程线程状态线程切换状态图线程终止内存屏障和CPU缓存CPU的优化手段-缓存缓存同步协议运行时指令重排CPU存在的两个问题内存屏障解决上两个问题线程通信通信的方式API-
许水愿·2024-01-30 06:39

java 多线程编程面试_Java 多线程并发编程面试笔录一览

知识体系图：1、线程是什么？线程是进程中独立运行的子任务。2、创建线程的方式方式一：将类声明为Thread的子类。该子类应重写Thread类的run方法方式二：声明实现Runnable接口的类。该类然后实现run方法推荐方式二，因为接口方式比继承方式更灵活，也减少程序间的耦合。3、获取当前线程信息？Thread.currentThread()4、线程的分类线程分为守护线程、用户线程。线程初始化默认
INONNTANNC·2024-01-30 06:08

JAVA多线程知识总结

目录JAVA多线程进程、线程、协程线程上下文切换Java中的线程调度算法守护线程线程的生命周期5种基本状态5种状态的转换线程间通信线程安全什么是线程安全？java中如何保证多线程的运行安全？
小猫突击_·2024-01-30 06:35

多线程收尾

目录其他关于锁的概念1，单例模式2，智能指针，STL3，其他锁读者写者问题读者写者的321原则常用接口基于读写锁的三种实现方式自旋锁自旋锁的接口trylock其他关于锁的概念1，单例模式单例模式。scottmeyer-单例模式和双检查2，智能指针，STL智能指针STL中的容器、只能指针都不是线程安全的。原因是,STL的设计初衷是将性能挖掘到极致,而一旦涉及到加锁保证线程安全,会对性能造成巨大的影响
programing菜鸟·2024-01-30 06:35

【Linux】-同步互斥的另一种办法-信号量

文章目录前言一、信号量的概念二、POSIX信号量三、总结前言今天我们来讲解一下信号量，相比较之前学习的多线程中的互斥锁来说，信号量的概念比互斥锁要难理解，但是博主会使用生活中的例子，来给大家讲解，最后会得出互斥锁
橘柚！·2024-01-30 06:35

Java学习之多线程并发

简介到此为止，我们学到的基本上都是有关顺序编程的知识，即程序中所有事物在任意时刻都只能执行一个步骤。编程问题中相当大的一部分都可以通过使用顺序编程来解决。然而，对于某些问题，如果能够并发地执行程序中的多个部分，则会变得非常方便。并发编程可以使得程序的处理速度得到极大的提高。但是在得到提高的同时，并发也会带来一些问题，当并行执行的任务彼此开始互相干涉时，时机的并发问题就会接踵而至。了解并发可以使我们
原来是肖某人·2024-01-30 06:33

Java多线程并发编程一览笔录

知识体系图：1、线程是什么？线程是进程中独立运行的子任务。2、创建线程的方式方式一：将类声明为Thread的子类。该子类应重写Thread类的run方法方式二：声明实现Runnable接口的类。该类然后实现run方法推荐方式二，因为接口方式比继承方式更灵活，也减少程序间的耦合。3、获取当前线程信息？Thread.currentThread()4、线程的分类线程分为守护线程、用户线程。线程初始化默认
花2不谢·2024-01-30 06:33

面试复习 - 《并发与多线程》

锁线程与锁锁一、CAS(compareandswap)java中锁的类别1、乐观锁和悲观锁2.共享锁、排它锁3.公平锁VS非公平锁4.可重入锁VS非可重入锁三、Synchronized1、基本使用Synchronized2.同步原理3.Synchronized的优化（锁升级过程）3.1Java对象头3.2锁升级过程4.用synchronized还是Lock呢？(或者说reentrantLock)5
m0_37989039·2024-01-30 06:31

【Java面试题总结 3】Java多线程篇，java线程池原理图

结论：yield()从未导致线程转到等待/睡眠/阻塞状态。在大多数情况下，yield()将导致线程从运行状态转到可运行状态，但有可能没有效果。八、为什么说Synchronized是非公平锁？当锁被释放后，任何一个线程都有机会竞争得到锁，这样做的目的是提高效率，但缺点是可能产生线程饥饿现象。九、请谈谈volatile有什么特点，为什么它能保证变量对所有线程的可见性？volatile只能作用于变量，保
Huawei开源分享·2024-01-30 06:31

Java 多线程，并发编程

一、创建线程有几种方式看了好多博文，都说三种或者三种之上的，其实本质只有两种，有Java源码Thread类的上面的注释为证:Therearetwowaystocreateanewthreadofexecution.OneistodeclareaclasstobeasubclassofThread....Theotherwaytocreateathreadistodeclareaclassthati
AllenC6·2024-01-30 06:00

Java多线程-并发编程概述

本文转自https://my.oschina.net/langxSpirit/blog/8252901、线程是什么？线程是进程中独立运行的子任务。2、创建线程的方式方式一：将类声明为Thread的子类。该子类应重写Thread类的run方法方式二：声明实现Runnable接口的类。该类然后实现run方法推荐方式二，因为接口方式比继承方式更灵活，也减少程序间的耦合。3、获取当前线程信息？Thread
端木尋歡·2024-01-30 06:58

java多线程-5-Lock

概述对象锁一般指synchronized，和对象有关每个对象都有个隐形的监视器，用于线程的同步线程状态：创建(new)->就绪(start)->运行(run)->阻塞(lock/wait/join/sleep)->销毁ReentrantLock互斥锁可重入Condition实现wait，notify，notifyAll的功能ReadWriteLock-ReentrantReadWriteLock共
浪迹天涯的咸鱼·2024-01-30 06:13

【Linux】-多线程的知识都收尾（线程池，封装的线程，单例模式，自旋锁）

作者：小树苗渴望变成参天大树作者宣言：认真写好每一篇博客作者gitee:gitee✨作者专栏：C语言,数据结构初阶,Linux,C++动态规划算法如果你喜欢作者的文章，就给作者点点关注吧！文章目录前言一、线程池二、单例模式三、STL,智能指针和线程安全四、其他常见的各种锁五、总结前言今天我们讲解线程的收尾工作，前面博主花了很长时间给大家讲解线程，确实线程这部分要将的东西太多了，大家把前面的掌握好了
橘柚！·2024-01-30 06:55

多线程处理集合对象，批量插入

Param("list")Listlist);XML文件：updatetablenamesettask_status=#{item.task_status}whereid=#{item.id}使用最简单的多线程批量更新
zhanghe687·2024-01-30 06:11

爬虫整理（三）Requests

Requests是一个Python的外部模块,需要手动安装.使用pip安装就好了.importrequestsimportwebbrowser#使用浏览器打开param={"wd":"itswl.github"}#搜索的信息r=requests.get('https://www.baidu.com/s',params=param)print(r.url)#用get方式webbrowser.open
Wei_Lai·2024-01-30 05:41

网络图片批量下载，爬虫，Py小工具

类似的很多人都做过了，不过这种东西本来就是老生常谈的玩意。直接上问题今天看高等数学偶然间看到这个，今天教大家怎么把网络上的图片批量整下来。第一步数据收集：我们这边直接看网页的源码然后cv到txt里面第二步数据清洗，清洗出我们需要的数据，就是图片的链接，那些html代码是不需要的。这边使用split直接选"分割，然后数组的第二个就是图片的链接。将它添加到list中去。第三步数据分析，这里直接上一个代
　方雄·2024-01-30 04:37

JVM篇----第十三篇

系列文章目录文章目录系列文章目录前言一、ParallelOld收集器（多线程标记整理算法）二、CMS收集器（多线程标记清除算法）三、G1收集器前言前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默
数据大魔王·2024-01-30 04:04

JVM篇----第十二篇

系列文章目录文章目录系列文章目录前言一、Serial垃圾收集器（单线程、复制算法）二、ParNew垃圾收集器（Serial+多线程）三、ParallelScavenge收集器（多线程复制算法、高效）四、
数据大魔王·2024-01-30 04:34

sqlmap 结构与原理

更进一步，提高POC/EXP的质量，并在程序中加入多线程。等我们厉害了，加入绕过等的功能。
藤原千花的败北·2024-01-30 04:58

爬虫基础-前端基础

Html是骨骼、css是皮肤、js是肌肉，三者之间的关系可以简单理解为m(html)-v(css)-c(js)浏览器的加载过程构建dom树子资源加载-加载外部的css、图片、js等外部资源样式渲染-css执行DOM树ajax、json、xmlAJAX是一种在无需重新加载整个网页的情况下，能够更新部分网页的技术。AJAX=异步JavaScript和XML。AJAX是一种用于创建快速动态网页的技术。j
小旺不正经·2024-01-30 04:24

Python实战：将爬虫获取到的数据存到数据库中

在前几篇Python实战中，我们直接把爬虫获取到的数据存储到excel文件或者csv文件中。今天，我们将爬虫获取到的数据存储到数据库中。
程序员coding·2024-01-30 04:49

Java多线程基础-18：线程安全的集合类与ConcurrentHashMap

Java标准库提供了很多集合类，但有一些集合类是线程不安全的，也就是说，在多线程环境下可能会出问题的。
碳基肥宅·2024-01-30 04:38
上一页 42 43 44 45 46 47 48 49 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他