- Python网络爬虫与数据处理工具大全:从入门到精通
俞凯润
Python网络爬虫与数据处理工具大全:从入门到精通awesome-web-scrapingListoflibraries,toolsandAPIsforwebscrapinganddataprocessing.项目地址:https://gitcode.com/gh_mirrors/aw/awesome-web-scraping本文基于知名Python网络爬虫资源库lorien/awesome-w
- 正则表达式
运用正则表达式进行爬虫就是把想要得到的信息爬取出来贪婪爬取和非贪婪爬取replace(正则表达式,新的内容)符合正则表达式的被替换成新的内容(返回值是String)split(正则表达式)按照正则表达式规则切割字符串(返回值是String[]),遍历数组就可以得到了分组其实就是把内容分组,然后用组号代替内容复制,这样就不用多写几遍练习:其实正则表达式不用背,以后要用的时候直接右键选择插件下载的选择
- Java基础流程控制习题练习示例含代码
InnovatorX
#Java基础进阶java开发语言intellij-idea算法
1、【嵌套循环】使用双层for循环,在控制台打印出一个四行五列的长方形,效果如下:@@@@@@@@@@@@@@@@@@@@publicclassDemo1{publicstaticvoidmain(String[]args){for(inti=0;i1500?"可以":"不可以";System.out.println("李雷"+want+"以旧换新");}}6、【三元运算符】让用户依次录入三个整数
- MacOS无意关闭openVPN守护进程
青木川崎
macos
问题原本打开就可以直接连接上公司的内网,有一天因为关闭多余进程的时候把open的守护进行不小心给关闭了。导致再次打开open后无法正常连接。解决方法执行该命令查看是否有信息返回sudolaunchctllist|greporg.open.client若无信息返回则是因为openVPN的守护进程未启动。启动openVPN守护进程sudolaunchctlload/Library/LaunchDaem
- MySQL 8.0 OCP 1Z0-908 题目解析(19)
一只fish
MYSQLOCPmysql数据库
题目73Choosetwo.WhichtwoarefeaturesofMySQLEnterpriseFirewall?□A)blockingofpotentialthreatsbyconfiguringpre-approvedwhitelists□B)modifyingSQLstatementdynamicallywithsubstitutions□C)recordingincomingSQLst
- BM2 链表内指定区间反转
目录题目链接题目解题思路代码题目链接链表内指定区间反转_牛客题霸_牛客网题目解题思路只是比第一题多了一个范围,有两个思路一:先移动到要逆序的位置前一个固定,然后逐个往后移动并且讲当前位置的指针移动到固定位置的相邻就近的后面即可二:拼接的方法,截图前面不需要逆序的,中间的调用逆序方法,截取后面需要逆序的最后拼接即可代码法一importjava.util.*;/**publicclassListNod
- php 魔术常量、魔术函数 和 $_SERVER变量
戴国进
#php笔试面试题
魔术常量__FILE__$_SERVER['SCRIPT_FILENAME']反映的是当前执行程序的绝对路径及文件名;__FILE__反映的是原始文件(被包含文件)的绝对路径及文件名。__LINE____CLASS____FUNCTION____METHOD__魔术函数__autoLoad()__clone()__toString()__GET()__SET()__CALL()//当对象访问不存在
- c++ 的标准库 --- std::
消失的旧时光-1943
NDKc++jni
在C++的标准库(std)里,除了std::string,还有很多常用的类型和工具。下面列举一些最常用的:常用的std::标准库类型1.容器类(用来存放一组数据)std::vector //动态数组,类似Java的ArrayListstd::list //双向链表std::deque //双端队列std::map //键值对映射,类似Java的TreeMapstd::unordered
- Python—快速入门
H.ZWei
Pythonpython开发语言
文章目录简介变量声明控制语句条件控制语句循环语句集合ListDictSetTuple函数定义全局变量和局部变量类模块异常处理生成器简介Python作为一门解释型语言,在运行时逐行解释执行代码,无需编译成二进制文件,这一点和JavaScript类似。它属于弱类型语言,变量类型无需提前声明,赋予了代码极高的灵活性。正因这些特性,Python门槛较低,新手很容易上手。变量声明没有关键字修饰变量名,如下:
- 解决sysrepo无法启动问题 [ERR] Module “yang“ was not found in sysrepo.
[ERR]Module“yang”wasnotfoundinsysrepo.问题表现出现问题时,命令输出如下。sysrepoctl-l提示yang模块不存在$sysrepoctl-l[ERR]Module"yang"wasnotfoundinsysrepo.sysrepoctlerror:Failedtolistmodules(Itemnotfound)Formoredetailsyoumaytr
- 实训项目记录 | 7.3
敲代码娶不了六花
springcloudmybatisspringbootjavamavenintellijidea
7.3.10:14在发送邮件类SendMess添加自动获取ip和端口方法//获取服务器地址(本机IP+端口)privateStringgetServerAddress()throwsException{if(cachedIpAddr!=null)returncachedIpAddr;//已经算过直接用Stringip=null;//遍历所有网卡,找到一个非回环、非虚拟机、非docker的有效IPE
- 靶机 New 复盘
Bulestar_xx
渗透实验linux安全
打点目录扫描gobusterdir-u$URL-w/usr/share/seclists/Discovery/Web-Content/raft-large-words.txt-k-t30-xphp,html,txt,xml-b"404,500,403"-t20/admin(Status:302)[Size:0][-->http://new.dsz/wp-admin/]/login(Status:3
- 渗透靶机 Doctor 复盘
https://vulnyx.com/打点nmap$IP==>22,80端口gobusterdir-u$URL-w/usr/share/seclists/Discovery/Web-Content/raft-large-words.txt得到一些目录信息,看了一下没发现什么框架看不出什么看一下源码是否存在敏感信息硬编码,太多了,似乎没有开发者控制台全局搜索敏感字段或者路由http://phpapi
- c#VB.NET 中使用当前时间戳或随机数来生成一个动态参数
在VB.NET中,你可以使用当前时间戳或随机数来生成一个动态参数,确保每次请求的URL不同,从而避免缓存。以下是几种常用的实现方法:1.使用当前时间戳(毫秒级)vbDimurlAsString="https://example.com/api/data"DimtimestampAsString=DateTimeOffset.UtcNow.ToUnixTimeMilliseconds().ToStr
- 7、垃圾回收调优
很小心的小新
jvmjava笔记垃圾回收调优
查看虚拟机参数:java-XX:PrintFlagsFinal-verson|findstr“GC”调优领域:内存锁竞争cpu占用io确定目标:低延迟还是高吞吐量,选择适合的回收器响应时间优先:CMS、G1,ZGC高吞吐量:PArallelGC最快的GC是不发生GC查看FullGC前后的内存占用,考虑下面几个问题数据是不是太多了resultSet=statement。executeQuery(“s
- Hbase和关系型数据库、HDFS、Hive的区别
别这么骄傲
hivehbase数据库
目录1.Hbase和关系型数据库的区别2.Hbase和HDFS的区别3.Hbase和Hive的区别1.Hbase和关系型数据库的区别关系型数据库Hbase存储适合结构化数据,单机存储适合结构化和半结构数据的松散数据,分布式存储功能(1)支持ACID(2)支持join(3)使用主键PK(4)数据类型:int、varchar等(1)仅支持单行事务(2)不支持join,把数据糅合到一张大表(3)行键ro
- js加减乘除出现很多小数
木头没有瓜
javascript开发语言ecmascript
计算购物车支付价格价格if(that.cartList.length){that.cartList.forEach(v=>{v.sku.price=(v.sku.price/100).toFixed(2);v.sku.price=v.sku.price.toLocaleString();}lettotalPrice=0;list.forEach(item=>{totalPrice+=item.sk
- 用自定义注解解决excel动态表头导出的问题
Java知识技术分享
java技术exceljavaintellij-idea数据库
导入的excel有固定表头+动态表头如何解决自定义注解:importjava.lang.annotation.*;/***自定义注解,用于动态生成excel表头*/@Target(ElementType.FIELD)@Retention(RetentionPolicy.RUNTIME)public@interfaceFieldLabel{//字段中文Stringlabel();//字段顺序into
- Python脚本,音频格式转换 和 视频格式转换
一、音频格式转换完整代码frompydubimportAudioSegmentimportosdefconvert_audio(input_dir,output_dir,target_format):ifnotos.path.exists(output_dir):os.makedirs(output_dir)forfilenameinos.listdir(input_dir):iffilename
- 自定义注解的使用
Java知识技术分享
java技术javaspring后端
自定义注解/***自定义注解*/@Target(ElementType.FIELD)@Retention(RetentionPolicy.RUNTIME)public@interfaceFieldLabel{//字段中文Stringlabel();//字段顺序intorder()default0;//分组标识Stringgroup()default"default";}解析自定义注解://1、获取
- 详解java的StringBuilder类
lanbing
Java知识必知必会java开发语言
在Java中,StringBuilder是一个非常常用且高效的类,用于操作可变字符串(mutablestring)。与String类不同的是,String是不可变的(immutable),每次对字符串进行拼接、修改等操作时都会创建一个新的对象,而StringBuilder则可以在原有对象上进行修改,从而提高性能。✅什么是newStringBuilder()?StringBuildersb=newS
- 字符串接龙 /单词接龙 (BFs C#
毕竟秋山澪
算法
卡码网110和力扣127和LCq108题都是一个解法这两道题乍一看在结果处可能不一样力扣要求字符串里边必须包含对应的最后一个字符而110不需要最后一个字符但是在实验逻辑上是一致的只是110需要把如果在set中找不到最后一个字符就直接返回0的逻辑删去就可以了这就是两道题的区别110.字符串接龙题目描述字典strList中从字符串beginStr和endStr的转换序列是一个按下述规格形成的序列:1.
- Redis 实现消息队列
先睡
redis数据库缓存
Redis提供了多种数据结构来实现消息队列,主要包括List和Stream。以下是两种实现方式的详细说明:1.基于List实现消息队列实现方式:生产者:使用LPUSH或RPUSH命令将消息推入队列。消费者:使用RPOP或LPOP命令从队列中获取消息。为了提高可靠性,可以使用BRPOPLPUSH或BLMOVE命令,这些命令可以在获取消息的同时将其移动到另一个队列(如Pending队列),以确保消息在
- 【C#中路径相关的概念】
在C#程序中,理解路径相关的概念(如基目录、可执行程序路径等)对于文件操作和资源管理至关重要。以下是这些概念的详细解释:1.基目录(BaseDirectory)定义:基目录是应用程序的“根”目录,通常是程序启动时所在的目录。对于大多数应用程序,它是包含可执行文件(.exe)的目录,但在某些部署场景(如ASP.NET应用)中可能不同。获取方式:stringbaseDir=AppDomain.Curr
- JMeter InfluxDB v2 Listener Plugin 常见问题解决方案
柏滢凝Wayne
JMeterInfluxDBv2ListenerPlugin常见问题解决方案jmeter-influxdb2-listener-pluginInfluxDBv2.0listenerpluginforApacheJMeter.Providesthepossibilitytoseetheonlinedashboard(aggregationtable,errors,theresponsebodyoff
- java综合练习之复制数组
weixin_46075877
javajava算法jvm
publicclassdemo2{/*需求:复制一个数组元素到一个新的数组当中去比如a数组{1,2,3,4,5}那么b数组也应该是{1,2,3,4,5}*/publicstaticvoidmain(String[]args){//生成一个老数组int[]arr={1,2,3,4,5};//生成一个新数组int[]newArr=newint[arr.length];//int[x]x代表数组长度不是
- jfinal结合easyui完成基本的增删改查操作
顽疲
jfinal学习jfinaljavaeasyuicrud
jfinal结合easyui完成增删改查操作创建jfinal项目,具体不多说,下面会放出源码。请结合jfinal官网创建一个jfinal项目,加深印象。什么是jfinal?JFinal是基于Java语言的极速web开发框架。重点在于easyui的分页下面贴出部分代码publicvoiduserList(){Stringsql="fromuserorderbyiddesc";Pagepaginate
- input 获取焦点时全选
肖肖肖丽珠
vue.js前端javascript
这样的一个状态。这样编辑的时候就直接覆盖掉原来的。在main.js里面自定义指令//input框获取焦点时全选。注意input类型是textarea时Vue.directive("select-on-focus",{inserted(el){constinput=el.querySelector('input')||el.querySelector('textarea');if(input){in
- 代码随想录算法训练营第二十二天|LeetCode 77 组合,LeetCode 216 组合总和 III,LeetCode 450 删除二叉搜索树中的节点
二师兄呀1001
代码随想录算法训练营算法leetcode职场和发展
1.LeetCode77组合题目链接:77.组合classSolution:defcombine(self,n:int,k:int)->List[List[int]]:defbacktracking(n,k,startIndex,path,result):iflen(path)==k:result.append(path[:])returnforiinrange(startIndex,n-(k-l
- jQuery CSS 类
jQueryCSS类引言jQuery是一个快速、小型且功能丰富的JavaScript库,它极大地简化了HTML文档遍历、事件处理、动画和Ajax操作。在jQuery中,CSS类的使用是处理样式和美化网页的关键组成部分。本文将深入探讨jQueryCSS类的使用方法,包括如何添加、移除、切换和检查CSS类,以及如何通过CSS类实现动态样式变化。jQueryCSS类的基本概念CSS类是HTML元素的一个
- 多线程编程之卫生间
周凡杨
java并发卫生间线程厕所
如大家所知,火车上车厢的卫生间很小,每次只能容纳一个人,一个车厢只有一个卫生间,这个卫生间会被多个人同时使用,在实际使用时,当一个人进入卫生间时则会把卫生间锁上,等出来时打开门,下一个人进去把门锁上,如果有一个人在卫生间内部则别人的人发现门是锁的则只能在外面等待。问题分析:首先问题中有两个实体,一个是人,一个是厕所,所以设计程序时就可以设计两个类。人是多数的,厕所只有一个(暂且模拟的是一个车厢)。
- How to Install GUI to Centos Minimal
sunjing
linuxInstallDesktopGUI
http://www.namhuy.net/475/how-to-install-gui-to-centos-minimal.html
I have centos 6.3 minimal running as web server. I’m looking to install gui to my server to vnc to my server. You can insta
- Shell 函数
daizj
shell函数
Shell 函数
linux shell 可以用户定义函数,然后在shell脚本中可以随便调用。
shell中函数的定义格式如下:
[function] funname [()]{
action;
[return int;]
}
说明:
1、可以带function fun() 定义,也可以直接fun() 定义,不带任何参数。
2、参数返回
- Linux服务器新手操作之一
周凡杨
Linux 简单 操作
1.whoami
当一个用户登录Linux系统之后,也许他想知道自己是发哪个用户登录的。
此时可以使用whoami命令。
[ecuser@HA5-DZ05 ~]$ whoami
e
- 浅谈Socket通信(一)
朱辉辉33
socket
在java中ServerSocket用于服务器端,用来监听端口。通过服务器监听,客户端发送请求,双方建立链接后才能通信。当服务器和客户端建立链接后,两边都会产生一个Socket实例,我们可以通过操作Socket来建立通信。
首先我建立一个ServerSocket对象。当然要导入java.net.ServerSocket包
ServerSock
- 关于框架的简单认识
西蜀石兰
框架
入职两个月多,依然是一个不会写代码的小白,每天的工作就是看代码,写wiki。
前端接触CSS、HTML、JS等语言,一直在用的CS模型,自然免不了数据库的链接及使用,真心涉及框架,项目中用到的BootStrap算一个吧,哦,JQuery只能算半个框架吧,我更觉得它是另外一种语言。
后台一直是纯Java代码,涉及的框架是Quzrtz和log4j。
都说学前端的要知道三大框架,目前node.
- You have an error in your SQL syntax; check the manual that corresponds to your
林鹤霄
You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'option,changed_ids ) values('0ac91f167f754c8cbac00e9e3dc372
- MySQL5.6的my.ini配置
aigo
mysql
注意:以下配置的服务器硬件是:8核16G内存
[client]
port=3306
[mysql]
default-character-set=utf8
[mysqld]
port=3306
basedir=D:/mysql-5.6.21-win
- mysql 全文模糊查找 便捷解决方案
alxw4616
mysql
mysql 全文模糊查找 便捷解决方案
2013/6/14 by 半仙
[email protected]
目的: 项目需求实现模糊查找.
原则: 查询不能超过 1秒.
问题: 目标表中有超过1千万条记录. 使用like '%str%' 进行模糊查询无法达到性能需求.
解决方案: 使用mysql全文索引.
1.全文索引 : MySQL支持全文索引和搜索功能。MySQL中的全文索
- 自定义数据结构 链表(单项 ,双向,环形)
百合不是茶
单项链表双向链表
链表与动态数组的实现方式差不多, 数组适合快速删除某个元素 链表则可以快速的保存数组并且可以是不连续的
单项链表;数据从第一个指向最后一个
实现代码:
//定义动态链表
clas
- threadLocal实例
bijian1013
javathreadjava多线程threadLocal
实例1:
package com.bijian.thread;
public class MyThread extends Thread {
private static ThreadLocal tl = new ThreadLocal() {
protected synchronized Object initialValue() {
return new Inte
- activemq安全设置—设置admin的用户名和密码
bijian1013
javaactivemq
ActiveMQ使用的是jetty服务器, 打开conf/jetty.xml文件,找到
<bean id="adminSecurityConstraint" class="org.eclipse.jetty.util.security.Constraint">
<p
- 【Java范型一】Java范型详解之范型集合和自定义范型类
bit1129
java
本文详细介绍Java的范型,写一篇关于范型的博客原因有两个,前几天要写个范型方法(返回值根据传入的类型而定),竟然想了半天,最后还是从网上找了个范型方法的写法;再者,前一段时间在看Gson, Gson这个JSON包的精华就在于对范型的优雅简单的处理,看它的源代码就比较迷糊,只其然不知其所以然。所以,还是花点时间系统的整理总结下范型吧。
范型内容
范型集合类
范型类
- 【HBase十二】HFile存储的是一个列族的数据
bit1129
hbase
在HBase中,每个HFile存储的是一个表中一个列族的数据,也就是说,当一个表中有多个列簇时,针对每个列簇插入数据,最后产生的数据是多个HFile,每个对应一个列族,通过如下操作验证
1. 建立一个有两个列族的表
create 'members','colfam1','colfam2'
2. 在members表中的colfam1中插入50*5
- Nginx 官方一个配置实例
ronin47
nginx 配置实例
user www www;
worker_processes 5;
error_log logs/error.log;
pid logs/nginx.pid;
worker_rlimit_nofile 8192;
events {
worker_connections 4096;}
http {
include conf/mim
- java-15.输入一颗二元查找树,将该树转换为它的镜像, 即在转换后的二元查找树中,左子树的结点都大于右子树的结点。 用递归和循环
bylijinnan
java
//use recursion
public static void mirrorHelp1(Node node){
if(node==null)return;
swapChild(node);
mirrorHelp1(node.getLeft());
mirrorHelp1(node.getRight());
}
//use no recursion bu
- 返回null还是empty
bylijinnan
javaapachespring编程
第一个问题,函数是应当返回null还是长度为0的数组(或集合)?
第二个问题,函数输入参数不当时,是异常还是返回null?
先看第一个问题
有两个约定我觉得应当遵守:
1.返回零长度的数组或集合而不是null(详见《Effective Java》)
理由就是,如果返回empty,就可以少了很多not-null判断:
List<Person> list
- [科技与项目]工作流厂商的战略机遇期
comsci
工作流
在新的战略平衡形成之前,这里有一个短暂的战略机遇期,只有大概最短6年,最长14年的时间,这段时间就好像我们森林里面的小动物,在秋天中,必须抓紧一切时间存储坚果一样,否则无法熬过漫长的冬季。。。。
在微软,甲骨文,谷歌,IBM,SONY
- 过度设计-举例
cuityang
过度设计
过度设计,需要更多设计时间和测试成本,如无必要,还是尽量简洁一些好。
未来的事情,比如 访问量,比如数据库的容量,比如是否需要改成分布式 都是无法预料的
再举一个例子,对闰年的判断逻辑:
1、 if($Year%4==0) return True; else return Fasle;
2、if ( ($Year%4==0 &am
- java进阶,《Java性能优化权威指南》试读
darkblue086
java性能优化
记得当年随意读了微软出版社的.NET 2.0应用程序调试,才发现调试器如此强大,应用程序开发调试其实真的简单了很多,不仅仅是因为里面介绍了很多调试器工具的使用,更是因为里面寻找问题并重现问题的思想让我震撼,时隔多年,Java已经如日中天,成为许多大型企业应用的首选,而今天,这本《Java性能优化权威指南》让我再次找到了这种感觉,从不经意的开发过程让我刮目相看,原来性能调优不是简单地看看热点在哪里,
- 网络学习笔记初识OSI七层模型与TCP协议
dcj3sjt126com
学习笔记
协议:在计算机网络中通信各方面所达成的、共同遵守和执行的一系列约定 计算机网络的体系结构:计算机网络的层次结构和各层协议的集合。 两类服务: 面向连接的服务通信双方在通信之前先建立某种状态,并在通信过程中维持这种状态的变化,同时为服务对象预先分配一定的资源。这种服务叫做面向连接的服务。 面向无连接的服务通信双方在通信前后不建立和维持状态,不为服务对象
- mac中用命令行运行mysql
dcj3sjt126com
mysqllinuxmac
参考这篇博客:http://www.cnblogs.com/macro-cheng/archive/2011/10/25/mysql-001.html 感觉workbench不好用(有点先入为主了)。
1,安装mysql
在mysql的官方网站下载 mysql 5.5.23 http://www.mysql.com/downloads/mysql/,根据我的机器的配置情况选择了64
- MongDB查询(1)——基本查询[五]
eksliang
mongodbmongodb 查询mongodb find
MongDB查询
转载请出自出处:http://eksliang.iteye.com/blog/2174452 一、find简介
MongoDB中使用find来进行查询。
API:如下
function ( query , fields , limit , skip, batchSize, options ){.....}
参数含义:
query:查询参数
fie
- base64,加密解密 经融加密,对接
y806839048
经融加密对接
String data0 = new String(Base64.encode(bo.getPaymentResult().getBytes(("GBK"))));
String data1 = new String(Base64.decode(data0.toCharArray()),"GBK");
// 注意编码格式,注意用于加密,解密的要是同
- JavaWeb之JSP概述
ihuning
javaweb
什么是JSP?为什么使用JSP?
JSP表示Java Server Page,即嵌有Java代码的HTML页面。使用JSP是因为在HTML中嵌入Java代码比在Java代码中拼接字符串更容易、更方便和更高效。
JSP起源
在很多动态网页中,绝大部分内容都是固定不变的,只有局部内容需要动态产生和改变。
如果使用Servl
- apple watch 指南
啸笑天
apple
1. 文档
WatchKit Programming Guide(中译在线版 By @CocoaChina) 译文 译者 原文 概览 - 开始为 Apple Watch 进行开发 @星夜暮晨 Overview - Developing for Apple Watch 概览 - 配置 Xcode 项目 - Overview - Configuring Yo
- java经典的基础题目
macroli
java编程
1.列举出 10个JAVA语言的优势 a:免费,开源,跨平台(平台独立性),简单易用,功能完善,面向对象,健壮性,多线程,结构中立,企业应用的成熟平台, 无线应用 2.列举出JAVA中10个面向对象编程的术语 a:包,类,接口,对象,属性,方法,构造器,继承,封装,多态,抽象,范型 3.列举出JAVA中6个比较常用的包 Java.lang;java.util;java.io;java.sql;ja
- 你所不知道神奇的js replace正则表达式
qiaolevip
每天进步一点点学习永无止境纵观千象regex
var v = 'C9CFBAA3CAD0';
console.log(v);
var arr = v.split('');
for (var i = 0; i < arr.length; i ++) {
if (i % 2 == 0) arr[i] = '%' + arr[i];
}
console.log(arr.join(''));
console.log(v.r
- [一起学Hive]之十五-分析Hive表和分区的统计信息(Statistics)
superlxw1234
hivehive分析表hive统计信息hive Statistics
关键字:Hive统计信息、分析Hive表、Hive Statistics
类似于Oracle的分析表,Hive中也提供了分析表和分区的功能,通过自动和手动分析Hive表,将Hive表的一些统计信息存储到元数据中。
表和分区的统计信息主要包括:行数、文件数、原始数据大小、所占存储大小、最后一次操作时间等;
14.1 新表的统计信息
对于一个新创建
- Spring Boot 1.2.5 发布
wiselyman
spring boot
Spring Boot 1.2.5已在7月2日发布,现在可以从spring的maven库和maven中心库下载。
这个版本是一个维护的发布版,主要是一些修复以及将Spring的依赖提升至4.1.7(包含重要的安全修复)。
官方建议所有的Spring Boot用户升级这个版本。
项目首页 | 源