E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
高性能MySQL查询优化
spark explain如何使用
在Spark中,explain是分析SQL或DataFrame执行计划的核心工具,通过不同模式可展示
查询优化
和执行的详细信息,默认情况下,这个语句只提供关于物理计划的信息。
fzip
·
2025-03-24 00:14
Spark
spark
执行计划
【Spark】
查询优化
中分区(Partitioning)和分桶(Bucketing)是什么关系?什么时候应当分区,什么时候应当分桶?
在学习Spark的过程中,分区和分桶乍一看很像,都能为了计算加速,但是仔细一想,一查还是有些差异的,甚至说差异很大。那么具体有什么差异点,有什么相同点。我做出了如下的整理,供大家参考,欢迎指正。相同点分区(Partitioning)和分桶(Bucketing)在很多方面具有相似性,它们都是用于优化大数据查询性能的技术数据划分的目的:优化查询性能分区和分桶的核心目标是通过将数据分割成更小的逻辑单元来
petrel2015
·
2025-03-23 23:37
spark
大数据
分布式
数据库
稳定运行的以Microsoft Azure Cosmos DB数据库为数据源和目标的ETL性能变差时提高性能方法和步骤
提高以MicrosoftAzureCosmosDB为数据源和目标的ETL性能,通常涉及数据库配置、
查询优化
、并发执行、数据传输优化和使用CosmosDB特性等多个方面。
weixin_30777913
·
2025-03-22 12:19
microsoft
azure
数据仓库
etl
性能优化
MySQL 性能优化方向
MySQL性能优化是一个系统性的工作,涉及数据库设计、
查询优化
、索引优化、硬件配置等多个方面。
小赖同学啊
·
2025-03-22 11:11
大数据
mysql
性能优化
数据库
稳定运行的以Microsoft Azure SQL database数据库为数据源和目标的ETL性能变差时提高性能方法和步骤
提高以MicrosoftAzureSQLDatabase为数据源和目标的ETL性能需要综合考虑数据库
查询优化
、数据加载策略、并行处理、资源管理等方面。通过合适的索引、
查询优化
、批量处理、增量加
weixin_30777913
·
2025-03-22 09:56
etl
azure
etl
云计算
数据库
Mysql-经典实战案例(10):如何用PT-Archiver完成大表的自动归档
真实痛点:电商订单表存储优化场景现状分析某电商平台订单表(order_info)每月新增500万条记录主库:高频读写,SSD存储(空间告急)历史库:HDD存储,只读
查询优化
目标✅自动迁移7天前的订单到历史库
从不删库的DBA
·
2025-03-21 16:51
Mysql
经典实战案例
mysql
数据库
中高级开发必看!MySQL 面试秘籍助你飞升
这篇CSDN文章堪称你进阶路上的“秘密武器”,从基础概念到高阶优化,全方位覆盖MySQL面试要点,无论是索引原理、
查询优化
,还是事务处理、主从复制,都有深入解读,助你轻松应对面试官的各类难题,稳稳拿下心仪
七七知享
·
2025-03-21 13:27
数据库
mysql
面试
数据库
程序人生
职场和发展
学习方法
github
稳定运行的以PostgreSQL数据库为数据源和目标的ETL性能变差时提高性能方法和步骤
提高PostgreSQL数据库ETL性能的核心思想是从数据库配置、
查询优化
、硬件资源、并行处理等多个方面入手。通过上述方法逐步优化,可以大幅提升ETL过程的效率。
weixin_30777913
·
2025-03-21 12:19
postgresql
开发语言
数据库
性能优化
etl
MySQL请求处理全流程深度解析:从SQL语句到数据返回
MySQL请求处理全流程深度解析:从SQL语句到数据返回一、MySQL架构全景图MySQL采用经典的C/S架构和分层设计,其核心模块协同工作流程如下:客户端连接管理器查询解析器
查询优化
器执行引擎存储引擎磁盘存储各层核心职责
longdong7889
·
2025-03-20 15:56
mysql
sql
adb
Node.js系列(5)--数据库操作指南
本文将深入探讨Node.js数据库操作的实现方案,包括连接管理、
查询优化
、事务处理等方面,帮助开发者构建高效可靠的数据访问层。
一进制ᅟᅠ
·
2025-03-20 08:27
Node.js
node.js
数据库
用 AI 提高开发效率:自动生成代码、优化 SQL 查询、写测试用例
从代码自动补全到SQL
查询优化
,再到自动化测试,AI工具已经成为开发者提高生产力的重要助手。
Js_x
·
2025-03-18 22:11
人工智能
sql
测试用例
达梦数据库统计信息详解
达梦数据库
查询优化
器采用基于代价的计算方法。在优化器估算查询代价时,也是以统计信息或者普遍的数据分布为主要依据的,这跟Oracle数据库基于成本的优化器原理是类似的。
Megamind_cx
·
2025-03-18 16:24
达梦
数据库
运维
第十六篇 SQL优化之计划控制:进阶之路带上这篇文章,快到起飞
第二招:暗度陈仓(间接引导)方法1:统计信息大法方法2:虚拟列黑科技方法3:分区表妙用2.3第三招:计划冻结术(一劳永逸)SQLProfilevsBaseline对比表三、实战演练:从青铜到王者案例:分页
查询优化
随缘而动,随遇而安
·
2025-03-17 20:39
SQL之道——从入门到精通
数据库
sql
第二十四篇 SQL优化之高级用法
做体检(执行计划分析)1.2给数据表"建索引"的正确姿势二、不改SQL也能提速的秘籍2.1分区表:把大象切成牛排2.2物化视图:给常用查询拍快照三、SQL改写:让你的查询脱胎换骨3.1告别全表扫描:日期
查询优化
随缘而动,随遇而安
·
2025-03-17 09:50
SQL之道——从入门到精通
数据库
sql
数据库
查询优化
:提升性能的关键实践
title:数据库
查询优化
:提升性能的关键实践date:2025/1/30updated:2025/1/30author:cmdragonexcerpt:在当今数据驱动的商业环境中,数据库的性能直接影响着应用程序的响应速度和用户体验
·
2025-03-17 02:16
Elasticsearch大文件检索性能提升20倍实践(干货)_elasticsearch
查询优化
3、问题排查与定位步骤1:限定返回记录条数。不提供直接访问末页的入口。baidu,360,搜狗等搜索引擎都不提供访问末页的请求方式。都是基于如下的请求方式:通过点击上一下、下一页逐页访问。这个从用户的角度也很好理解,搜索引擎返回的前面都是相关度最高的,也是用户最关心的信息。Elasticsearch的默认支持的数据条数是10000条,可以通过post请求修改。最终,本步骤将支持ES最大返回值100
2401_84247505
·
2025-03-16 06:02
2024年程序员学习
elasticsearch
jenkins
大数据
老板既要又要还要......我用Doris+Hudi把不可能变成了日常
老板既要又要还要......我用Doris+Hudi把不可能变成了日常探索Doris与Hudi的完美融合智能
查询优化
华丽转身-不止于快的进化Doris+Hudi湖仓一体的"艺术之美"大数据江湖中流传着这样一个传说
一臻数据
·
2025-03-15 15:42
大数据
Doris
大数据
数据分析
数据库
海量数据查询加速:Presto、Trino、Apache Arrow
本篇文章将深入探讨Presto、Trino、ApacheArrow三种主流的
查询优化
工具,剖析其核心机制,并通过案例分析展示它们在实际业务中的应用。
晴天彩虹雨
·
2025-03-15 08:12
apache
大数据
hive
数据仓库
MongoDB在Spring商城用户行为记录中的应用
复杂
查询优化
支持聚合管道、地理空间查询、全文索引,便于多维分析。水平扩展通过分片(Sharding)应对海量数据存储。二、用户行为数据建模1.基础行为记录集合(如user_actions){"us
小小初霁
·
2025-03-14 14:03
mongodb
spring
数据库
Java后端服务接口性能优化常用技巧
1.数据库索引当接口响应慢时,我们可能会去排查是否是数据库查询慢了,进而会去关注数据库
查询优化
,而索引优化是代
南波塞文
·
2025-03-14 00:55
Java
基础
MySQL
数据库
java
性能优化
OLAP与OLTP:数据处理系统的两种核心架构
OLAP技术通常涉及到预计算、缓存和
查询优化
等方面的技术,可用于构建在线分析系统(OLAP系统)。该系统将大量的
思静鱼
·
2025-03-11 02:35
#
Mysql-数据库
架构
Doris存储的逻辑架构和物理架构
ApacheDoris的存储架构分为逻辑架构和物理架构两个层面,其设计核心围绕数据分布与
查询优化
展开。
fzip
·
2025-03-09 20:21
Doris
数据湖
架构
Doris
图数据库Neo4j面试内容整理-Cypher
查询优化
Cypher
查询优化
是在Neo4j中提高查询性能的关键部分。Cypher是Neo4j的查询语言,允许我们通过图的结构进行高效的数据检索。然而,随着数据量的增大和查询复杂度的提高,查询性能可能会变差。
不务正业的猿
·
2025-03-05 04:21
面试
Neo4j
数据库
neo4j
面试
职场和发展
图数据库
【六袆 - MySQL】 初步理解【B+Tree和它的父类B-Tree理解示例图;索引的意义是什么;聚簇索引是什么;】
一次查询过程需要查询两次创建索引的意义:参考文献或资料:immoc,
高性能MySQL
:第3版/(美)施瓦茨(Schwartz,B.),(美)扎伊采夫(Zaitsev,P.)
鞠崽23333
·
2025-03-04 04:51
Mysql技术相关
java
sql
mysql
后端
MySQL中OR操作导致索引失效的深度解析与技术优化方案
一、索引机制与
查询优化
基础B+树索引的结构特性MySQL采用B+树作为核心索引结构,其平衡多路搜索树的特性保证了O(logN)的查询效率。
阿豆学编程
·
2025-03-02 22:51
Mysql
mysql
数据库
mysql的算法
以下是MySQL中一些常用的算法:
查询优化
算法:查询执行计划生成:MySQL使用
查询优化
器来生成最优的查询执行计划,以提高查询性能。优化器会考虑索引、表的统计信息、连接顺序等因素来选择最佳的执行计划。
再见,再也不见(๑><๑)
·
2025-03-01 22:09
mysql
算法
数据库
sql专题 之 sql的执行顺序
:虚拟表vs数据集虚拟表结果集总结嵌套查询在sql查询中的执行顺序前文我们了解了sql常用的语句,这次我们对于这些语句来个小思索戳这里→sql专题之常用命令sql的执行顺序SQL语句的执行顺序是数据库
查询优化
和结果生成的关键
m0_67265654
·
2025-03-01 11:23
面试
学习路线
阿里巴巴
sql
数据库
java
《Spring Boot + MySQL高性能应用实战:性能优化技巧与最佳实践》
目录应用性能优化概述环境搭建与技术栈选择数据库设计优化SpringBoot与MySQL集成优化4.1使用JPA/Hibernate的性能优化4.2连接池的配置与优化4.3分页与
查询优化
MySQL性能优化
扣丁梦想家
·
2025-02-28 04:03
Spring
spring
boot
mysql
后端
MySQL数据库笔记——常见慢
查询优化
方式
方式一:修改配置文件方式二:通过命令动态启用分析慢查询日志方式一:直接查看日志文件方式二:使用`EXPLAIN`分析查询常见的慢
查询优化
1.数据类型优化2.索引优化3.SQL
查询优化
4.分库分表慢查询日志的适
Good Note
·
2025-02-23 22:58
MySQL数据库笔记
数据库
mysql
sql
adb
mysql之规则优化器RBO
文章目录MySQL基于规则的优化(RBO):RBO的核心思想:模式匹配与规则应用RBO的主要优化规则查询重写(QueryRewrite)/查询转换(QueryTransformation)子
查询优化
(SubqueryOptimization
我爱松子鱼
·
2025-02-23 20:44
mysql运行机制
mysql
数据库
mysql之MySQL 优化器追踪 (Optimizer Trace):洞察优化器决策的每一个细节
揭秘优化过程OptimizerTrace的基本用法OptimizerTrace输出结果解读(JSON结构详解)MySQL优化器追踪(OptimizerTrace):洞察优化器决策的每一个细节EXPLAIN命令是
查询优化
的基础工具
我爱松子鱼
·
2025-02-23 01:56
mysql运行机制
mysql
数据库
PostgreSQL:更新字段慢
目录标题PostgreSQL慢
查询优化
与`pg_stat_statements`使用1.启用慢查询日志2.使用`pg_stat_statements`扩展收集查询统计信息3.查找执行时间较长的查询4.分析慢查询的执行计划
喝醉酒的小白
·
2025-02-22 20:10
PG
postgresql
数据库
从MySQL迁移到PostgreSQL的完整指南
它支持复杂的
查询优化
和并发控制,能够更高效地处理大规模数据。与MySQL相比,PostgreSQL在处理复杂查询和大数据集时表
m0_74824076
·
2025-02-21 15:32
面试
学习路线
阿里巴巴
mysql
postgresql
数据库
使用 EXPLAIN分析结果来优化 SQL 查询
EXPLAIN语句能够展示数据库
查询优化
器对SQL查询的处理计划,从而帮助开发者识别查询中的瓶颈和低效部分。本文将详细介绍如何使用EXPLAIN分析结果来优化SQL查询。
小俊学长
·
2025-02-21 08:03
sql
数据库
MySQL 如何使用EXPLAIN工具优化SQL
EXPLAIN是SQL
查询优化
中的一个重要工具,主要用于分析和诊断查询执行计划。
谢同学咯
·
2025-02-21 07:30
SQL
MySQL学习
mysql
sql
数据库
阿里云 MaxCompute MaxQA 开启公测,解锁近实时高效查询体验
为减少查询响应时间,提升数据效率,阿里云云原生大数据计算服务MaxCompute推出MaxQA(原MCQA2.0)查询加速功能,在独享的查询加速资源池的基础上,对管控链路、
查询优化
器、执行引擎、存储引擎以及缓存机制等多个环节进行全面优化
阿里云大数据AI技术
·
2025-02-20 00:23
阿里云
云原生
MaxCompute
大数据
实时数仓
基于 GBase 数据库的海量数据处理与性能优化
GBase系列数据库(包括GBase8a、GBase8s和GBase8c)以其强大的性能、灵活的存储架构以及高效的
查询优化
功能,成为处理大规模数据的理想选择。
big crab
·
2025-02-17 12:13
数据库
oracle
doris:查询缓存
概念介绍SQLCache是Doris提供的一种
查询优化
机制,可以显著提升查询性能。它通过缓存查询结果来减少重复计算,适用于数据更新频率较低的场景。
向阳1218
·
2025-02-16 22:17
大数据
doris
Spark 性能优化 (三):RBO 与 CBO
1.RBO的核心概念在ApacheSpark的
查询优化
过程中,规则优化(Rule-BasedOptimization,RBO)是Catalyst优化器的一个关键组成部分。
LevenBigData
·
2025-02-15 02:09
spark
性能调优
spark
性能优化
ajax
MySQL 索引优化:原理与最佳实践
优化(Optimization):MySQL
查询优化
西瓜拍两瓣
·
2025-02-14 20:54
mysql
数据库
查询优化
:提升数据库性能的实用技巧
title:
查询优化
:提升数据库性能的实用技巧date:2025/2/14updated:2025/2/14author:cmdragonexcerpt:在现代数据库环境中,查询性能直接影响到应用程序的响应速度和用户体验
qcidyu
·
2025-02-14 20:22
数据库
Apache Doris 2.1.6 版本正式发布
2.1.6版本在Lakehouse、异步物化视图、半结构化数据管理持续升级改进,同时在
查询优化
器、执行引擎、存储管理、数据导入与导出以及权限管理等方面完成了若干修复。欢迎大家下载使用。
SelectDB技术团队
·
2025-02-14 14:07
doris
数据仓库
开源
数据库
大数据
[数据库]MySql系统架构
4.2MySQL服务层4.3存储引擎层5.SQLSELECT语句执行过程第1步:Connectors:客户端/服务端通信协议第2步:查询缓存第3步:Analyzer分析器第4步:Optimizer优化器:
查询优化
第
一曲长歌,一剑天涯
·
2025-02-13 16:51
数据库
一文读懂RAG
模块化RAG(ModularRAG)六、RAG(检索增强生成)vsFine-Tuning(微调)八、高效和准确的检索1)来源检索源的类型检索单元的粒度2)索引优化1.分块策略2.元数据附件3.结构指数3)
查询优化
wangziling123456
·
2025-02-12 22:58
人工智能
深度学习
深入解析线段树-构建原理与区间
查询优化
本文收录于专栏:算法之翼深入解析线段树-构建原理与区间
查询优化
线段树(SegmentTree)是一种高级数据结构,常用于处理区间查询与动态更新问题。
一键难忘
·
2025-02-09 22:19
算法之翼
算法
线段树
动态规划
宽度优先
深度优先
Elasticsearch查询性能优化:从入门到精通
核心概念回顾1.2性能优化的重要性2.硬件与集群配置优化2.1硬件选型建议2.2集群参数配置2.3代码示例:集群配置3.索引设计优化3.1合理的字段映射3.2选择正确的索引类型3.3代码示例:索引设计4.
查询优化
技巧
小韩学长yyds
·
2025-02-09 21:36
elasticsearch
性能优化
大数据
Lucene搜索引擎原理与代码实例讲解
Lucene搜索引擎原理与代码实例讲解关键词:搜索引擎,全文检索,倒排索引,
查询优化
,索引构建,分词,评分器1.背景介绍1.1问题由来在信息爆炸的互联网时代,如何高效地管理和搜索信息成为了一个严峻的挑战
杭州大厂Java程序媛
·
2025-02-08 04:41
计算机软件编程原理与应用实践
java
python
javascript
kotlin
golang
架构
人工智能
45个数据库SQL性能优化方案
5、然后通过SQL
查询优化
器获得最优执
huang714
·
2025-02-07 19:48
数据库
sql
性能优化
基于规则的优化(内含子
查询优化
二三事)
MySQL本质上是一个软件,设计MySQL的大佬并不能要求使用这个软件的人个个都是数据库高高手,就像我写这本书的时候并不能要求各位在学之前就会了里边儿的知识。也就是说我们无法避免某些同学写一些执行起来十分耗费性能的语句。即使是这样,设计MySQL的大佬还是依据一些规则,竭尽全力的把这个很糟糕的语句转换成某种可以比较高效执行的形式,这个过程也可以被称作查询重写(就是人家觉得你写的语句不好,自己再重写
robch
·
2025-02-07 10:16
数据库
mysql
从MySQL迁移到PostgreSQL的完整指南
它支持复杂的
查询优化
和并发控制,能够更高效地处理大规模数据。与MySQL相比,PostgreSQL在处理复杂查询和大数据集时表
m0_74823878
·
2025-02-06 07:17
mysql
postgresql
数据库
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他