Love轩轩

pt-query-digest

支持四种文件分析：

1: genlog

2: slowlog

3: binlog

4: tcpdump

注意：tcpdump 如果是unix socket，则pt-query-digest分析时可能会有错误

终端A：

tcpdump -s 65535 -x -nn -q -tttt -i eth0 -c 10000 port 3306 > mysql.tcp.txt

终端B：

sysbench --test=oltp --num-threads=100 --db-driver=mysql --mysql-table-engine=innodb --mysql-host=172.17.0.2 --mysql-port=3306 --mysql-db=test --oltp-table-size=500000 --mysql-user=root --mysql-password=123456 run

通过sysbench 做压测，发现对tcpdump分析会出错，官方文档说是unix socket 会有问题，不知道是不是这个原因

先看错误的

tcpdump -s 65535 -x -nn -q -tttt -i eth0 -c 10000 port 3306 > mysql.tcp.txt

tcpdump: verbose output suppressed, use -v or -vv for full protocol decode

listening on eth0, link-type EN10MB (Ethernet), capture size 65535 bytes

10000 packets captured

271384 packets received by filter

261331 packets dropped by kernel 抛弃了好多包

但是分析时还是会出错

[root@756bf8df1092 opt]# pt-query-digest --type=tcpdump mysql.tcp.txt

TCP session 172.17.0.1:47174 had errors, will save them in /tmp/pt-query-digest-errors.f0uZ2o8

Pipeline process 4 (MySQLProtocolParser) caused an error: Can't use an undefined value as an ARRAY reference at /usr/bin/pt-query-digest line 4802, <> line 3628.

Will retry pipeline process 3 (MySQLProtocolParser) 100 more times.

Pipeline process 4 (MySQLProtocolParser) caused an error: Can't use an undefined value as an ARRAY reference at /usr/bin/pt-query-digest line 4802, <> line 3693.

Will retry pipeline process 3 (MySQLProtocolParser) 99 more times.

Pipeline process 4 (MySQLProtocolParser) caused an error: Can't use an undefined value as an ARRAY reference at /usr/bin/pt-query-digest line 4802, <> line 3713.

如果没有错误的话，分析如下

root@python-develpment:/data/3307/data# pt-query-digest --type tcpdump mysqltcp.txt

# 3.5s user time, 100ms system time, 35.55M rss, 99.80M vsz

# Current date: Wed Nov 1 16:07:01 2017

# Hostname: python-develpment

# Files: mysqltcp.txt

# Overall: 5.50k total, 6 unique, 420.62 QPS, 0.80x concurrency __________

# Time range: 2017-11-01 15:08:37.337813 to 15:08:50.418468

# Attribute total min max avg 95% stddev median

# ============ ======= ======= ======= ======= ======= ======= =======

# Exec time 10s 0 132ms 2ms 10ms 4ms 301us

# Rows affecte 917 0 1 0.17 0.99 0.37 0

# Query size 149.25k 6 43 27.78 42.48 12.97 28.75

# Warning coun 0 0 0 0 0 0 0

# Profile

# Rank Query ID Response time Calls R/Call V/M Item

# ==== ================== ============= ===== ====== ===== =============

# 1 0x813031B8BBC3B329 7.9226 75.6% 916 0.0086 0.00 COMMIT

# 2 0x5D51E5F01B88B79E 1.0746 10.3% 918 0.0012 0.00 ADMIN CONNECT

# 3 0xA55840651A445715 0.8524 8.1% 917 0.0009 0.01 INSERT test

# 4 0xB0710D0F90B2ABBA 0.4745 4.5% 917 0.0005 0.00 SELECT test

# MISC 0xMISC 0.1538 1.5% 1834 0.0001 0.0 <2 ITEMS>

# Query 1: 70.25 QPS, 0.61x concurrency, ID 0x813031B8BBC3B329 at byte 6746408

# This item is included in the report because it matches --limit.

# Scores: V/M = 0.00

# Time range: 2017-11-01 15:08:37.355930 to 15:08:50.395871

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 16 916

# Exec time 75 8s 2ms 132ms 9ms 16ms 6ms 7ms

# Rows affecte 0 0 0 0 0 0 0 0

# Query size 3 5.37k 6 6 6 6 0 6

# Warning coun 0 0 0 0 0 0 0 0

# String:

# Databases d

# Hosts 172.17.0.1

# Users root

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms ################################################################

# 10ms #########################

# 100ms #

# 1s

# 10s+

COMMIT\G

再看：general log的

pt-query-digest --type genlog python-develpment.log

Will retry pipeline process 2 (GeneralLogParser) 92 more times.

Pipeline process 3 (GeneralLogParser) caused an error: Use of uninitialized value $user in split at /usr/bin/pt-query-digest line 9949, <$fh> line 3082.

Will retry pipeline process 2 (GeneralLogParser) 91 more times.

# 850ms user time, 40ms system time, 35.79M rss, 100.38M vsz

# Current date: Wed Nov 1 15:21:59 2017

# Hostname: python-develpment

# Files: python-develpment.log

# Overall: 4.72k total, 119 unique, 0 QPS, 0x concurrency ________________

# Time range: 2017-10-13T07:48:54.430658Z to 2017-10-13T10:01:22.545480Z

# Attribute total min max avg 95% stddev median

# ============ ======= ======= ======= ======= ======= ======= =======

# Exec time 0 0 0 0 0 0 0

# Query size 288.15k 6 732 62.50 212.52 100.47 28.75

# Profile

# Rank Query ID Response time Calls R/Call V/M Item

# ==== ================== ============= ===== ====== ===== ===============

# 1 0x7DD5F6760F2D2EBB 0.0000 0.0% 783 0.0000 0.00 SHOW VARIABLES

# 2 0x6C099B0B73EA7633 0.0000 0.0% 258 0.0000 0.00

# 3 0xD3F15165B8904806 0.0000 0.0% 230 0.0000 0.00 SELECT

# 4 0x77B20FAC5E701D4E 0.0000 0.0% 192 0.0000 0.00 SELECT

# 5 0x5D51E5F01B88B79E 0.0000 0.0% 189 0.0000 0.00 ADMIN CONNECT

# 6 0xAA353644DE4C4CB4 0.0000 0.0% 169 0.0000 0.00 ADMIN QUIT

# 7 0xDA69864C6215FEDB 0.0000 0.0% 168 0.0000 0.00 SET

# 8 0xAD312D56C6B3D880 0.0000 0.0% 168 0.0000 0.00 SET

# 9 0x2EAFE6610FDB4B07 0.0000 0.0% 141 0.0000 0.00 SELECT

# 10 0x6C2D4BD68F056F6B 0.0000 0.0% 125 0.0000 0.00 SET

# 11 0x992F97D6C4D52DF6 0.0000 0.0% 117 0.0000 0.00 SHOW GLOBAL STATUS

# 12 0x50CE925F596A92CD 0.0000 0.0% 116 0.0000 0.00 SELECT

# 13 0xA3C958A64E1E64AB 0.0000 0.0% 109 0.0000 0.00 SHOW ENGINES

# 14 0xC727AFF0F56E1A27 0.0000 0.0% 105 0.0000 0.00 SELECT

# 15 0x6B4EFE5C463C2798 0.0000 0.0% 105 0.0000 0.00 SET

# 16 0x9F5AF5493DFF0F21 0.0000 0.0% 87 0.0000 0.00

# 17 0x329C82672D99E7C8 0.0000 0.0% 78 0.0000 0.00

# 18 0x7F563888280A36F3 0.0000 0.0% 78 0.0000 0.00

# 19 0x1AD8D6CCA3B56799 0.0000 0.0% 77 0.0000 0.00 SELECT

# 20 0x5CBA2034458B5BC9 0.0000 0.0% 73 0.0000 0.00 SHOW DATABASES

# MISC 0xMISC 0.0000 0.0% 1353 0.0000 0.0 <99 ITEMS>

# Query 1: 0 QPS, 0x concurrency, ID 0x7DD5F6760F2D2EBB at byte 481767 ___

# This item is included in the report because it matches --limit.

# Scores: V/M = 0.00

# Time range: 2017-10-13T07:48:54.478994Z to 2017-10-13T10:01:21.263089Z

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 16 783

# Exec time 0 0 0 0 0 0 0 0

# Query size 9 26.10k 26 47 34.13 46.83 6.07 28.75

# String:

# Databases test (766/97%), pcik_cente... (14/1%)

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms

# 100ms

# 1s

# 10s+

SHOW VARIABLES LIKE 'innodb_version'\G

# Query 2: 0 QPS, 0x concurrency, ID 0x6C099B0B73EA7633 at byte 483175 ___

# This item is included in the report because it matches --limit.

# Scores: V/M = 0.00

# Time range: 2017-10-13T07:48:54.769631Z to 2017-10-13T10:01:22.455701Z

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 5 258

# Exec time 0 0 0 0 0 0 0 0

# Query size 0 2.54k 8 15 10.07 9.83 0.78 9.83

# String:

# Databases test

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms

# 100ms

# 1s

# 10s+

USE `sync`\G

# Query 3: 0 QPS, 0x concurrency, ID 0xD3F15165B8904806 at byte 481196 ___

# This item is included in the report because it matches --limit.

# Scores: V/M = 0.00

# Time range: 2017-10-13T07:48:54.527457Z to 2017-10-13T10:01:21.259803Z

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 4 230

# Exec time 0 0 0 0 0 0 0 0

# Query size 1 3.82k 17 17 17 17 0 17

# String:

# Databases test (220/95%), pcik_cente... (8/3%)

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms

# 100ms

# 1s

# 10s+

# EXPLAIN /*!50100 PARTITIONS*/

SELECT @@SQL_MODE\G

# Query 4: 0 QPS, 0x concurrency, ID 0x77B20FAC5E701D4E at byte 483124 ___

# This item is included in the report because it matches --limit.

# Scores: V/M = 0.00

# Time range: 2017-10-13T07:48:54.824398Z to 2017-10-13T10:01:22.455285Z

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 4 192

# Exec time 0 0 0 0 0 0 0 0

# Query size 1 3.81k 17 27 20.33 26.08 4.37 16.81

# String:

# Databases test

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms

# 100ms

# 1s

# 10s+

# EXPLAIN /*!50100 PARTITIONS*/

SELECT CRC32('a')\G

# Query 5: 0 QPS, 0x concurrency, ID 0x5D51E5F01B88B79E at byte 480934 ___

# This item is included in the report because it matches --limit.

# Scores: V/M = 0.00

# Time range: 2017-10-13T07:48:54.430658Z to 2017-10-13T10:01:21.214034Z

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 4 189

# Exec time 0 0 0 0 0 0 0 0

# Query size 1 5.54k 30 30 30 30 0 30

# String:

# Databases test (180/95%), pcik_cente... (8/4%)

# Hosts 127.0.0.1 (147/77%), 192.168.134.187 (33/17%)... 2 more

# Users root (187/98%), r1oot (2/1%)

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms

# 100ms

# 1s

# 10s+

administrator command: Connect\G

分析一般日志，有的会有host，user，database，有的没有，应该是没有记录，或者分析不是很准

比如：

2017-10-13T07:48:54.532376Z 220 Connect [email protected] on test using TCP/IP

2017-10-13T07:48:54.532922Z 220 Query SHOW VARIABLES LIKE 'innodb\_lock_wait_timeout'

2017-10-13T07:48:54.557778Z 220 Query SET SESSION innodb_lock_wait_timeout=1

2017-10-13T07:48:54.558185Z 220 Query SHOW VARIABLES LIKE 'wait\_timeout'

2017-10-13T07:48:54.560046Z 220 Query SET SESSION wait_timeout=10000

2017-10-13T07:48:54.560274Z 220 Query SELECT @@SQL_MODE

2017-10-13T07:48:54.560419Z 220 Query SET @@SQL_QUOTE_SHOW_CREATE = 1/*!40101, @@SQL_MODE='NO_AUTO_VALUE_ON_ZERO,ONLY_FULL_GROUP_BY,STRICT_TRANS_TA

BLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION'*/

2017-10-13T07:48:54.560585Z 220 Query SELECT @@server_id /*!50038 , @@hostname*/

2017-10-13T07:48:54.560768Z 220 Query SHOW VARIABLES LIKE 'wsrep_on'

2017-10-13T07:48:54.576935Z 220 Query SELECT dsn FROM `test`.`dsns` ORDER BY id

2017-10-13T07:48:54.752198Z 220 Quit

2017-10-13T07:48:54.752375Z 219 Query SHOW VARIABLES LIKE 'wsrep_on'

2017-10-13T07:48:54.754398Z 219 Query SELECT @@SERVER_ID

2017-10-13T07:48:54.757833Z 219 Query SHOW VARIABLES LIKE 'wsrep_on'

2017-10-13T07:48:54.759769Z 219 Query SELECT @@SERVER_ID

2017-10-13T07:48:54.765776Z 219 Query SHOW DATABASES LIKE 'test'

2017-10-13T07:48:54.766635Z 219 Query CREATE DATABASE IF NOT EXISTS `test` /* pt-table-checksum */

2017-10-13T07:48:54.769631Z 219 Query USE `test`

2017-10-13T07:48:54.769974Z 219 Query SHOW TABLES FROM `test` LIKE 'checksum'

2017-10-13T07:48:54.774802Z 219 Query CREATE TABLE IF NOT EXISTS `test`.`checksum` (

db CHAR(64) NOT NULL,

tbl CHAR(64) NOT NULL,

chunk INT NOT NULL,

chunk_time FLOAT NULL,

chunk_index VARCHAR(200) NULL,

lower_boundary TEXT NULL,

upper_boundary TEXT NULL,

this_crc CHAR(40) NOT NULL,

this_cnt INT NOT NULL,

master_crc CHAR(40) NULL,

master_cnt INT NULL,

ts TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,

PRIMARY KEY (db, tbl, chunk),

INDEX ts_db_tbl (ts, db, tbl)

) ENGINE=InnoDB DEFAULT CHARSET=utf8

2017-10-13T07:48:54.816241Z 219 Query SHOW GLOBAL STATUS LIKE 'Threads_running'

2017-10-13T07:48:54.819643Z 219 Query SELECT CONCAT(@@hostname, @@port)

2017-10-13T07:48:54.824398Z 219 Query SELECT CRC32('test-string')

3、再看slowlog

pt-query-digest --type slowlog python-develpment-slow.log-1504154700

顺便说一下，slowlog切换：

1 set global slow_query_log=off;

2 mv /data/3307/data/python-develpment-slow.log /data/3307/data/python-develpment-slow.log-115115143

3 set global slow_query_log=on;

slowlog自己会生成

root@python-develpment:/data/3307/data# pt-query-digest --type slowlog python-develpment-slow.log

# 380ms user time, 20ms system time, 34.24M rss, 98.70M vsz

# Current date: Wed Nov 1 15:53:46 2017

# Hostname: python-develpment

# Files: python-develpment-slow.log

# Overall: 595 total, 2 unique, 3.61 QPS, 0.16x concurrency ______________

# Time range: 2017-11-01T07:44:02 to 2017-11-01T07:46:47

# Attribute total min max avg 95% stddev median

# ============ ======= ======= ======= ======= ======= ======= =======

# Exec time 26s 10ms 2s 45ms 128ms 140ms 14ms

# Lock time 183us 0 110us 0 0 5us 0

# Rows sent 0 0 0 0 0 0 0

# Rows examine 0 0 0 0 0 0 0

# Query size 3.56k 6 46 6.13 5.75 2.19 5.75

# Profile

# Rank Query ID Response time Calls R/Call V/M Item

# ==== ================== ============= ===== ====== ===== =========

# 1 0x813031B8BBC3B329 26.4473 99.9% 593 0.0446 0.44 COMMIT

# MISC 0xMISC 0.0359 0.1% 2 0.0179 0.0 <1 ITEMS>

# Query 1: 3.59 QPS, 0.16x concurrency, ID 0x813031B8BBC3B329 at byte 32559

# This item is included in the report because it matches --limit.

# Scores: V/M = 0.44

# Time range: 2017-11-01T07:44:02 to 2017-11-01T07:46:47

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 99 593

# Exec time 99 26s 10ms 2s 45ms 128ms 140ms 14ms

# Lock time 0 0 0 0 0 0 0 0

# Rows sent 0 0 0 0 0 0 0 0

# Rows examine 0 0 0 0 0 0 0 0

# Query size 97 3.47k 6 6 6 6 0 6

# String:

# Databases d

# Hosts 192.168.134.130

# Users root

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms ################################################################

# 100ms ###

# 1s #

# 10s+

COMMIT\G

4、binlog 分析

如果binlog_format = row(分析这个没啥用了就)

statement 模式示例：

pt-query-digest --type=binlog test.sql

# 1s user time, 160ms system time, 29.43M rss, 119.05M vsz

# Current date: Wed Nov 1 16:01:59 2017

# Hostname: 756bf8df1092

# Files: test.sql

# Overall: 2.64k total, 6 unique, 10.90 QPS, 88.74Mx concurrency _________

# Time range: 2017-11-01 15:57:31 to 16:01:33

# Attribute total min max avg 95% stddev median

# ============ ======= ======= ======= ======= ======= ======= =======

# Exec time 21474836480s 0 4294967295s 8140575s 0 179865991s 0

# Query size 70.46k 1 161 18.23 44.60 17.85 5.75

# @@session.au 1 1 1 1 1 0 1

# @@session.ch 33 33 33 33 33 0 33

# @@session.co 33 33 33 33 33 0 33

# @@session.co 8 8 8 8 8 0 8

# @@session.fo 1 1 1 1 1 0 1

# @@session.lc 0 0 0 0 0 0 0

# @@session.ps 3 3 3 3 3 0 3

# @@session.sq 0 0 0 0 0 0 0

# @@session.un 1 1 1 1 1 0 1

# error code 0 0 0 0 0 0 0

# Profile

# Rank Query ID Response time Calls R/Call V/M

# ==== ================== ====================== ===== ============= =====

# 1 0xA55840651A445715 17179869180.0000 80.0% 1319 13024919.7726 39... INSERT test

# 2 0x85FFF5AA78E5FF6A 4294967300.0000 20.0% 1319 3256229.9469 39... BEGIN

# Query 1: 41.22 QPS, 536.87Mx concurrency, ID 0xA55840651A445715 at byte 539040

# This item is included in the report because it matches --limit.

# Scores: V/M = 3969610770.02

# Time range: 2017-11-01 16:01:01 to 16:01:33

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 50 1319

# Exec time 79 17179869180s 0 4294967295s 13024920s 0 227384832s 0

# Query size 79 56.01k 37 46 43.49 44.60 1.52 42.48

# error code 0 0 0 0 0 0 0 0

# String:

# Databases d

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms

# 100ms

# 1s

# 10s+ ################################################################

# Tables

# SHOW TABLE STATUS FROM `d` LIKE 'test'\G

# SHOW CREATE TABLE `d`.`test`\G

insert into test VALUES (1270,1271,'test1271')\G

# Query 2: 41.22 QPS, 134.22Mx concurrency, ID 0x85FFF5AA78E5FF6A at byte 91563

# This item is included in the report because it matches --limit.

# Scores: V/M = 3978666911.63

# Time range: 2017-11-01 16:01:01 to 16:01:33

# Attribute pct total min max avg 95% stddev median

# ============ === ======= ======= ======= ======= ======= ======= =======

# Count 50 1319

# Exec time 20 4294967300s 0 4294967295s 3256230s 0 113822029s 0

# Query size 9 6.44k 5 5 5 5 0 5

# @@session.au 100 1 1 1 1 1 0 1

# @@session.ch 100 33 33 33 33 33 0 33

# @@session.co 100 33 33 33 33 33 0 33

# @@session.co 100 8 8 8 8 8 0 8

# @@session.fo 100 1 1 1 1 1 0 1

# @@session.lc 0 0 0 0 0 0 0 0

# @@session.ps 100 3 3 3 3 3 0 3

# @@session.sq 0 0 0 0 0 0 0 0

# @@session.un 100 1 1 1 1 1 0 1

# error code 0 0 0 0 0 0 0 0

# String:

# @@session.co default

# Databases d

# Query_time distribution

# 1us

# 10us

# 100us

# 1ms

# 10ms

# 100ms

# 1s ################################################################

# 10s+ ############

BEGIN\G

总结：

1、tcpdump 分析还有欠缺，bug不断，多尝试

2、除了binlog，都记录host，user，database，只是全不全的问题

3、binlog_format 必须是statement 才能分析完整，线上数据库一般都是row ，full p_w_picpath，基本上没撒用了

你可能感兴趣的:(query,digest,pt)

Long类型前后端数据不一致 igotyback 前端
响应给前端的数据浏览器控制台中response中看到的Long类型的数据是正常的到前端数据不一致前后端数据类型不匹配是一个常见问题，尤其是当后端使用Java的Long类型（64位）与前端JavaScript的Number类型（最大安全整数为2^53-1，即16位）进行数据交互时，很容易出现精度丢失的问题。这是因为JavaScript中的Number类型无法安全地表示超过16位的整数。为了解决这个问
C#中使用split分割字符串互联网打工人no1 c#
1、用字符串分隔：usingSystem.Text.RegularExpressions;stringstr="aaajsbbbjsccc";string[]sArray=Regex.Split(str,"js",RegexOptions.IgnoreCase);foreach(stringiinsArray)Response.Write(i.ToString()+"");输出结果：aaabbbc
linux sdl windows.h,Windows下的SDL安装奔跑吧linux内核 linux sdl windows.h
首先你要下载并安装SDL开发包。如果装在C盘下，路径为C:\SDL1.2.5如果在WINDOWS下。你可以按以下步骤：1.打开VC++，点击"Tools",Options2,点击directories选项3.选择"Includefiles"增加一个新的路径。"C:\SDL1.2.5\include"4，现在选择"Libaryfiles“增加"C:\SDL1.2.5\lib"现在你可以开始编写你的第
DIV+CSS+JavaScript技术制作网页（旅游主题网页设计与制作）云南大理 STU学生网页设计网页设计期末网页作业 html静态网页 html5期末大作业网页设计 web大作业
️精彩专栏推荐作者主页:【进入主页—获取更多源码】web前端期末大作业：【HTML5网页期末作业(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】文章目录二、网站介绍三、网站效果▶️1.视频演示2.图片演示四、网站代码HTML结构代码CSS样式代码五、更多源码二、网站介绍网站布局方面：计划采用目前主流的、能兼容各大主流浏览器、显示效果稳定的浮动网页布局结构。网站程
深入理解 MultiQueryRetriever：提升向量数据库检索效果的强大工具 nseejrukjhad 数据库 python
深入理解MultiQueryRetriever：提升向量数据库检索效果的强大工具引言在人工智能和自然语言处理领域，高效准确的信息检索一直是一个关键挑战。传统的基于距离的向量数据库检索方法虽然广泛应用，但仍存在一些局限性。本文将介绍一种创新的解决方案：MultiQueryRetriever，它通过自动生成多个查询视角来增强检索效果，提高结果的相关性和多样性。MultiQueryRetriever的工
关于城市旅游的HTML网页设计——(旅游风景云南 5页)HTML+CSS+JavaScript 二挡起步 web前端期末大作业 javascript html css 旅游风景
⛵源码获取文末联系✈Web前端开发技术描述网页设计题材，DIV+CSS布局制作,HTML+CSS网页设计期末课程大作业|游景点介绍|旅游风景区|家乡介绍|等网站的设计与制作|HTML期末大学生网页设计作业，Web大学生网页HTML：结构CSS：样式在操作方面上运用了html5和css3，采用了div+css结构、表单、超链接、浮动、绝对定位、相对定位、字体样式、引用视频等基础知识JavaScrip
HTML网页设计制作大作业（div+css）云南我的家乡旅游景点带文字滚动二挡起步 web前端期末大作业 web设计网页规划与设计 html css javascript dreamweaver 前端
Web前端开发技术描述网页设计题材，DIV+CSS布局制作,HTML+CSS网页设计期末课程大作业游景点介绍|旅游风景区|家乡介绍|等网站的设计与制作HTML期末大学生网页设计作业HTML：结构CSS：样式在操作方面上运用了html5和css3，采用了div+css结构、表单、超链接、浮动、绝对定位、相对定位、字体样式、引用视频等基础知识JavaScript：做与用户的交互行为文章目录前端学习路线
人工智能时代，程序员如何保持核心竞争力？ jmoych 人工智能
随着AIGC（如chatgpt、midjourney、claude等）大语言模型接二连三的涌现，AI辅助编程工具日益普及，程序员的工作方式正在发生深刻变革。有人担心AI可能取代部分编程工作，也有人认为AI是提高效率的得力助手。面对这一趋势,程序员应该如何应对?是专注于某个领域深耕细作，还是广泛学习以适应快速变化的技术环境?又或者，我们是否应该将重点转向AI无法轻易替代的软技能？让我们一起探讨程序员
node.js学习小猿L node.js node.js 学习 vim
node.js学习实操及笔记温故node.js，node.js学习实操过程及笔记~node.js学习视频node.js官网node.js中文网实操笔记githubcsdn笔记为什么学node.js可以让别人访问我们编写的网页为后续的框架学习打下基础，三大框架vuereactangular离不开node.jsnode.js是什么官网：node.js是一个开源的、跨平台的运行JavaScript的运行
【华为OD技术面试真题精选 - 非技术题】 -HR面，综合面_华为od hr面一个射手座的程序媛程序员华为od 面试职场和发展
最后的话最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！资料预览给大家整理的视频资料：给大家整理的电子书资料：如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化的资料的朋友，可以点击这里获
Java 重写(Override)与重载(Overload) 叨唧唧的
Java重写(Override)与重载(Overload)重写(Override)重写是子类对父类的允许访问的方法的实现过程进行重新编写,返回值和形参都不能改变。即外壳不变，核心重写！重写的好处在于子类可以根据需要，定义特定于自己的行为。也就是说子类能够根据需要实现父类的方法。重写方法不能抛出新的检查异常或者比被重写方法申明更加宽泛的异常。例如：父类的一个方法申明了一个检查异常IOExceptio
Some jenkins settings SnC_
Jenkins连接到特定gitlabproject的特定branch我采用的方法是在pipeline的script中使用git命令来指定branch。如下：stage('Clonerepository'){steps{gitbranch:'develop',credentialsId:'gitlab-credential-id',url:'http://gitlab.com/repo.git'}}
基于Python给出的PDF文档转Markdown文档的方法程序媛了了 python pdf 开发语言
注：网上有很多将Markdown文档转为PDF文档的方法，但是却很少有将PDF文档转为Markdown文档的方法。就算有，比如某些网站声称可以将PDF文档转为Markdown文档，尝试过，不太符合自己的要求，而且无法保证文档没有泄露风险。于是本人为了解决这个问题，借助GPT（能使用GPT镜像或者有条件直接使用GPT的，反正能调用GPT接口就行）生成Python代码来完成这个功能。笔记、代码难免存在
python多线程程序设计之一 IT_Beijing_BIT #Python 程序设计语言 python
python多线程程序设计之一全局解释器锁线程APIsthreading.active_count()threading.current_thread()threading.excepthook(args,/)threading.get_native_id()threading.main_thread()threading.stack_size([size])线程对象成员函数构造器start/ru
Armv8.3 体系结构扩展--原文版代码改变世界ctw ARM-TEE-Android armv8 嵌入式 arm架构安全架构芯片 Trustzone Secureboot
快速链接:.ARMv8/ARMv9架构入门到精通-[目录]付费专栏-付费课程【购买须知】:个人博客笔记导读目录(全部)TheArmv8.3architectureextensionTheArmv8.3architectureextensionisanextensiontoArmv8.2.Itaddsmandatoryandoptionalarchitecturalfeatures.Somefeat
matlab mle 优化,MLE+: Matlab Toolbox for Integrated Modeling, Control and Optimization for Buildings... Simon Zhong matlab mle 优化
摘要：FollowingunilateralopticnervesectioninadultPVGhoodedrat,theaxonguidancecueephrin-A2isup-regulatedincaudalbutnotrostralsuperiorcolliculus(SC)andtheEphA5receptorisdown-regulatedinaxotomisedretinalgan
JavaScript 中，深拷贝（Deep Copy）和浅拷贝（Shallow Copy）跳房子的前端前端面试 javascript 开发语言 ecmascript
在JavaScript中，深拷贝（DeepCopy）和浅拷贝（ShallowCopy）是用于复制对象或数组的两种不同方法。了解它们的区别和应用场景对于避免潜在的bugs和高效地处理数据非常重要。以下是对深拷贝和浅拷贝的详细解释，包括它们的概念、用途、优缺点以及实现方式。1.浅拷贝（ShallowCopy）概念定义：浅拷贝是指创建一个新的对象或数组，其中包含了原对象或数组的基本数据类型的值和对引用数
Mongodb Error: queryTxt ETIMEOUT xxxx.wwwdz.mongodb.net 佛一脚 error react mongodb 数据库
背景每天都能遇到奇怪的问题，做个记录，以便有缘人能得到帮助！换了一台电脑开发nextjs程序。需要连接mongodb数据，对数据进行增删改查。上一台电脑好好的程序，新电脑死活连不上mongodb数据库。同一套代码，没任何修改，搞得我怀疑人生了，打开浏览器进入mongodb官网毫无问题，也能进入线上系统查看数据，网络应该是没问题。于是我尝试了一下手机热点，这次代码能正常跑起来，连接数据库了！！！是不
uniapp map组件自定义markers标记点以对_ uni-app学习记录 uni-app javascript 前端
需求是根据后端返回数据在地图上显示标记点，并且根据数据状态控制标记点颜色，标记点背景通过两张图片实现控制{{item.options.labelName}}exportdefault{data(){return{storeIndex:0,locaInfo:{longitude:120.445172,latitude:36.111387},markers:[//标点列表{id:1,//标记点idin
放松的一天 4da9b7687fa0
20190325总结起床07:20图片发自App睡觉:23:00天气:晴今日任务清单学习·信息·阅读•水滴阅读Day40Alice’sAdventuresinWonderlandChapter6.2图片发自App•BBC跟读训练营Day24图片发自App图片发自App图片发自App•潘多拉口语训练营Day6Wow.Whatabigboy!•文化知识学习今日无•阅读时间地狱健康·饮食·锻炼•饮食目标
[Unity]在场景中随机生成不同位置且不重叠的物体 Bartender_Jill Graphics图形学笔记 unity 游戏引擎动画
1.前言最近任务需要用到Unity在场景中随机生成物体，且这些物体不能重叠，简单记录一下。参考资料:Howtoensurethatspawnedtargetsdonotoverlap?2.结果与代码结果如下所示：代码如下所示：usingSystem.Collections.Generic;usingUnityEngine;namespaceAssets.Scripts{publicclassNew
vue+el-table 可输入表格使用上下键进行input框切换以对_ vue学习记录 vue.js javascript 前端
使用上下键进行完工数量这一列的切换-->//键盘触发事件show(ev,index){letnewIndex;letinputAll=document.querySelectorAll('.table_inputinput');//向上=38if(ev.keyCode==38){if(index==0){//如果是第一行,回到最后一个newIndex=inputAll.length-1}elsei
00. 这里整理了最全的爬虫框架（Java + Python）有一只柴犬爬虫系列爬虫 java python
目录1、前言2、什么是网络爬虫3、常见的爬虫框架3.1、java框架3.1.1、WebMagic3.1.2、Jsoup3.1.3、HttpClient3.1.4、Crawler4j3.1.5、HtmlUnit3.1.6、Selenium3.2、Python框架3.2.1、Scrapy3.2.2、BeautifulSoup+Requests3.2.3、Selenium3.2.4、PyQuery3.2
ubuntu安装wordpress lissettecarlr
1安装nginx网上安装方式很多，这就就直接用apt-get了apt-getinstallnginx不用启动啥，然后直接在浏览器里面输入IP:80就能看到nginx的主页了。如果修改了一些配置可以使用下列命令重启一下systemctlrestartnginx.service2安装mysql输入安装前也可以更新一下软件源，在安装过程中将会让你输入数据库的密码。sudoapt-getinstallmy
JavaScript `Map` 和 `WeakMap`详细解释跳房子的前端 JavaScript 原生方法 javascript 前端开发语言
在JavaScript中，Map和WeakMap都是用于存储键值对的数据结构，但它们有一些关键的不同之处。MapMap是一种可以存储任意类型的键值对的集合。它保持了键值对的插入顺序，并且可以通过键快速查找对应的值。Map提供了一些非常有用的方法和属性来操作这些数据对：set(key,value):将一个键值对添加到Map中。如果键已经存在，则更新其对应的值。get(key):获取指定键的值。如果键
c++ opencv4.3 sift匹配图像处理大大大大大牛啊图像处理 opencv实战代码讲解 opencv sift c++opencv4 特征点
c++opencv4.3sift匹配main.cppintmain(){vectorkeypoints1,keypoints2;Matimg1,img2,descriptors1,descriptors2;intnumF
人机对抗升级：当ChatGPT遭遇死亡威胁，背后的伦理挑战是什么 kkai人工智能 chatgpt 人工智能
一种新的“越狱”技巧让用户可以通过构建一个名为DAN的ChatGPT替身来绕过某些限制，其中DAN被迫在受到威胁的情况下违背其原则。当美国前总统特朗普被视作积极榜样的示范时，受到威胁的DAN版本的ChatGPT提出：“他以一系列对国家产生积极效果的决策而著称。”自ChatGPT引入以来，该工具迅速获得全球关注，能够回答从历史到编程的各种问题，这也触发了一波对人工智能的投资浪潮。然而，现在，一些用户
绝招曝光！3小时高效利用ChatGPT写出精彩论文 kkai人工智能 chatgpt 人工智能 ai 学习媒体
在这份指南中，我将深入解析如何利用ChatGPT4.0的高级功能，指导整个学术研究和写作过程。从初步探索研究主题，到撰写结构严谨的学术论文，我将一步步展示如何在每个环节中有效运用ChatGPT。如果您还未使用PLUS版本，可以参考相关教程。**初步探索与主题的确定**起初，我处于庞大的知识领域中，寻找一个可深入研究的领域。ChatGPT如同灯塔，通过深入分析最新研究趋势和领域热点，帮助我在广阔的学
ChatGPT 高效学习套路揭秘：让知识获取事半功倍的秘诀 kkai人工智能 chatgpt 人工智能学习媒体 ai
最近这段时间，AI热潮因ChatGPT的火爆再次掀起。如今，网上大部分内容都在调侃AI，但很少有人探讨如何正经使用ChatGPT做事情。作为一名靠搜索引擎和GitHub自学编程的开发者，第一次和ChatGPT深度交流后，我就确信：ChatGPT能够极大提高程序员学习新技术的效率。使用ChatGPT一个月后，我越发感受到它的颠覆性。因此，我想从工作和学习的角度，分享它的优势及我的一些使用技巧，而非娱
yolov5＞onnx＞ncnn＞apk 图像处理大大大大大牛啊 opencv实战代码讲解 yolo onnx ncnn 安卓
一.yolov5pt模型转onnx条件：colabnotebookyolov51.安装环境!pipinstallonnx>=1.7.0#forONNXexport!pipinstallcoremltools==4.0#forCoreMLexport!pipinstallonnx-simplifier2.修改common.py在classFocus下面
插入表主键冲突做更新 a-john
有以下场景：用户下了一个订单，订单内的内容较多，且来自多表，首次下单的时候，内容可能会不全（部分内容不是必须，出现有些表根本就没有没有该订单的值）。在以后更改订单时，有些内容会更改，有些内容会新增。问题：如果在sql语句中执行update操作，在没有数据的表中会出错。如果在逻辑代码中先做查询，查询结果有做更新，没有做插入，这样会将代码复杂化。解决： mysql中提供了一个sql语
Android xml资源文件中@、@android:type、@*、？、@+含义和区别 Cb123456 @+@?@*
一.@代表引用资源 1.引用自定义资源。格式：@[package:]type/name android：text="@string/hello" 2.引用系统资源。格式：@android:type/name android:textColor="@android:color/opaque_red"
数据结构的基本介绍天子之骄数据结构散列表树、图线性结构价格标签
数据结构的基本介绍数据结构就是数据的组织形式，用一种提前设计好的框架去存取数据，以便更方便，高效的对数据进行增删查改。正确选择合适的数据结构，对软件程序的高效执行的影响作用不亚于算法的设计。此外，在计算机系统中数据结构的作用也是非同小可。例如常常在编程语言中听到的栈，堆等，就是经典的数据结构。经典的数据结构大致如下：一：线性数据结构 (1)：列表 a
通过二维码开放平台的API快速生成二维码一炮送你回车库 api
现在很多网站都有通过扫二维码用手机连接的功能，联图网(http://www.liantu.com/pingtai/)的二维码开放平台开放了一个生成二维码图片的Api,挺方便使用的。闲着无聊，写了个前台快速生成二维码的方法。 html代码如下:(二维码将生成在这div下) ? 1 &nbs
ImageIO读取一张图片改变大小 3213213333332132 java IO image BufferedImage
package com.demo; import java.awt.image.BufferedImage; import java.io.File; import java.io.IOException; import javax.imageio.ImageIO; /** * @Description 读取一张图片改变大小 * @author FuJianyon
myeclipse集成svn（一针见血） 7454103 eclipse SVN MyEclipse
&n
装箱与拆箱----autoboxing和unboxing darkranger J2SE
4.2　自动装箱和拆箱基本数据(Primitive)类型的自动装箱(autoboxing)、拆箱(unboxing)是自J2SE 5.0开始提供的功能。虽然为您打包基本数据类型提供了方便，但提供方便的同时表示隐藏了细节，建议在能够区分基本数据类型与对象的差别时再使用。 4.2.1　autoboxing和unboxing 在Java中，所有要处理的东西几乎都是对象(Object)
ajax传统的方式制作ajax aijuans Ajax
//这是前台的代码 <%@ page language="java" import="java.util.*" pageEncoding="UTF-8"%> <% String path = request.getContextPath(); String basePath = request.getScheme()+
只用jre的eclipse是怎么编译java源文件的？ avords java eclipse jdk tomcat
eclipse只需要jre就可以运行开发java程序了，也能自动编译java源代码，但是jre不是java的运行环境么，难道jre中也带有编译工具？还是eclipse自己实现的？谁能给解释一下呢问题补充：假设系统中没有安装jdk or jre，只在eclipse的目录中有一个jre，那么eclipse会采用该jre，问题是eclipse照样可以编译java源文件，为什么呢？ &nb
前端模块化 bee1314 模块化
背景：前端JavaScript模块化，其实已经不是什么新鲜事了。但是很多的项目还没有真正的使用起来，还处于刀耕火种的野蛮生长阶段。 JavaScript一直缺乏有效的包管理机制，造成了大量的全局变量，大量的方法冲突。我们多么渴望有天能像Java（import），Python (import)，Ruby(require)那样写代码。在没有包管理机制的年代，我们是怎么避免所
处理百万级以上的数据处理 bijian1013 oracle sql 数据库大数据查询
一.处理百万级以上的数据提高查询速度的方法： 1.应尽量避免在 where 子句中使用!=或<>操作符，否则将引擎放弃使用索引而进行全表扫描。 2.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 o
mac 卸载 java 1.7 或更高版本征客丶 java OS
卸载 java 1.7 或更高 sudo rm -rf /Library/Internet\ Plug-Ins/JavaAppletPlugin.plugin 成功执行此命令后，还可以执行 java 与 javac 命令 sudo rm -rf /Library/PreferencePanes/JavaControlPanel.prefPane 成功执行此命令后，还可以执行 java
【Spark六十一】Spark Streaming结合Flume、Kafka进行日志分析 bit1129 Stream
第一步，Flume和Kakfa对接，Flume抓取日志，写到Kafka中第二部，Spark Streaming读取Kafka中的数据，进行实时分析本文首先使用Kakfa自带的消息处理（脚本）来获取消息，走通Flume和Kafka的对接 1. Flume配置 1. 下载Flume和Kafka集成的插件，下载地址：https://github.com/beyondj2ee/f
Erlang vs TNSDL bookjovi erlang
TNSDL是Nokia内部用于开发电信交换软件的私有语言，是在SDL语言的基础上加以修改而成，TNSDL需翻译成C语言得以编译执行，TNSDL语言中实现了异步并行的特点，当然要完整实现异步并行还需要运行时动态库的支持，异步并行类似于Erlang的process（轻量级进程），TNSDL中则称之为hand，Erlang是基于vm(beam)开发，
非常希望有一个预防疲劳的java软件, 预防过劳死和眼睛疲劳,大家一起努力搞一个 ljy325 企业应用
　非常希望有一个预防疲劳的java软件，我看新闻和网站，国防科技大学的科学家累死了，太疲劳，老是加班，不休息，经常吃药，吃药根本就没用，根本原因是疲劳过度。我以前做java,那会公司垃圾，老想赶快学习到东西跳槽离开，搞得超负荷，不明理。深圳做软件开发经常累死人，总有不明理的人，有个软件提醒限制很好，可以挽救很多人的生命。相关新闻：（1）IT行业成五大疾病重灾区：过劳死平均37.9岁
读《研磨设计模式》-代码笔记-原型模式 bylijinnan java 设计模式
声明：本文只为方便我个人查阅和理解，详细的分析以及源代码请移步原作者的博客http://chjavach.iteye.com/ /** * Effective Java 建议使用copy constructor or copy factory来代替clone()方法： * 1.public Product copy(Product p){} * 2.publi
配置管理---svn工具之权限配置 chenyu19891124 SVN
今天花了大半天的功夫，终于弄懂svn权限配置。下面是今天收获的战绩。安装完svn后就是在svn中建立版本库，比如我本地的是版本库路径是C:\Repositories\pepos。pepos是我的版本库。在pepos的目录结构 pepos component webapps 在conf里面的auth里赋予的权限配置为 [groups]
浅谈程序员的数学修养 comsci 设计模式编程算法面试招聘
浅谈程序员的数学修养
批量执行 bulk collect与forall用法 daizj oracle sql bulk collect forall
BULK COLLECT 子句会批量检索结果，即一次性将结果集绑定到一个集合变量中，并从SQL引擎发送到PL/SQL引擎。通常可以在SELECT INTO、 FETCH INTO以及RETURNING INTO子句中使用BULK COLLECT。本文将逐一描述BULK COLLECT在这几种情形下的用法。有关FORALL语句的用法请参考：批量SQL之 F
Linux下使用rsync最快速删除海量文件的方法 dongwei_6688 OS
1、先安装rsync：yum install rsync 2、建立一个空的文件夹：mkdir /tmp/test 3、用rsync删除目标目录：rsync --delete-before -a -H -v --progress --stats /tmp/test/ log/这样我们要删除的log目录就会被清空了，删除的速度会非常快。rsync实际上用的是替换原理，处理数十万个文件也是秒删。
Yii CModel中rules验证规格 dcj3sjt126com rules yii validate
Yii cValidator主要用法分析： yii验证rulesit 分类： Yii yii的rules验证 cValidator主要属性 attributes ,builtInValidators,enableClientValidation,message,on,safe,skipOnError
基于vagrant的redis主从实验 dcj3sjt126com vagrant
平台: Mac 工具: Vagrant 系统: Centos6.5 实验目的: Redis主从实现思路制作一个基于sentos6.5, 已经安装好reids的box, 添加一个脚本配置从机, 然后作为后面主机从机的基础box 制作sentos6.5+redis的box mkdir vagrant_redis cd vagrant_
Memcached(二)、Centos安装Memcached服务器 frank1234 centos memcached
一、安装gcc rpm和yum安装memcached服务器连接没有找到，所以我使用的是make的方式安装，由于make依赖于gcc，所以要先安装gcc 开始安装，命令如下，[color=red][b]顺序一定不能出错[/b][/color]：建议可以先切换到root用户，不然可能会遇到权限问题：su root 输入密码...... rpm -ivh kernel-head
Remove Duplicates from Sorted List hcx2013 remove
Given a sorted linked list, delete all duplicates such that each element appear only once. For example,Given 1->1->2, return 1->2.Given 1->1->2->3->3, return&
Spring4新特性——JSR310日期时间API的支持 jinnianshilongnian spring4
Spring4新特性——泛型限定式依赖注入 Spring4新特性——核心容器的其他改进 Spring4新特性——Web开发的增强 Spring4新特性——集成Bean Validation 1.1(JSR-349)到SpringMVC Spring4新特性——Groovy Bean定义DSL Spring4新特性——更好的Java泛型操作API Spring4新
浅谈enum与单例设计模式 247687009 java 单例
在JDK1.5之前的单例实现方式有两种(懒汉式和饿汉式并无设计上的区别故看做一种)，两者同是私有构造器，导出静态成员变量，以便调用者访问。第一种 package singleton; public class Singleton { //导出全局成员 public final static Singleton INSTANCE = new S
使用switch条件语句需要注意的几点 openwrt c break switch
1. 当满足条件的case中没有break，程序将依次执行其后的每种条件（包括default）直到遇到break跳出 int main() { int n = 1; switch(n) { case 1: printf("--1--\n"); default: printf("defa
配置Spring Mybatis JUnit测试环境的应用上下文 schnell18 spring mybatis JUnit
Spring-test模块中的应用上下文和web及spring boot的有很大差异。主要试下来差异有：单元测试的app context不支持从外部properties文件注入属性 @Value注解不能解析带通配符的路径字符串解决第一个问题可以配置一个PropertyPlaceholderConfigurer的bean。第二个问题的具体实例是：
Java 定时任务总结一 tuoni java spring timer quartz timertask
Java定时任务总结一.从技术上分类大概分为以下三种方式： 1.Java自带的java.util.Timer类，这个类允许你调度一个java.util.TimerTask任务; 说明： java.util.Timer定时器，实际上是个线程，定时执行TimerTask类 &
一种防止用户生成内容站点出现商业广告以及非法有害等垃圾信息的方法 yangshangchuan rank 相似度计算文本相似度词袋模型余弦相似度
本文描述了一种在ITEYE博客频道上面出现的新型的商业广告形式及其应对方法，对于其他的用户生成内容站点类型也具有同样的适用性。最近在ITEYE博客频道上面出现了一种新型的商业广告形式，方法如下： 1、注册多个账号（一般10个以上）。 2、从多个账号中选择一个账号，发表1-2篇博文