E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
慢查询调优
超全面试汇总——Hive 超详细!!!带答案!!!持续更新中~
中排序的种类和适用场景动态分区和静态分区的区别+使用场景hive语句执行顺序Hive的几种存储方式列式存储的好处HQL转化为MapReduce的过程Hive和关系型数据库的区别Hive和HBase的对比区别Hive小文件问题及解决Hive
调优
及优化列裁剪和分区裁剪谓词下推聚合类
jialun0116
·
2023-11-21 22:27
面试
面经
Hive
数据仓库
大数据
数据库
hive
hadoop
G1垃圾回收
G1垃圾回收.pngG1
调优
场景EvacuationFailure"evacuationfailure","to-spaceexhausted","to-spaceoverflow","promotionfailure
Yves_Chen
·
2023-11-21 17:16
了解JVM的相关概述,发现很多全忘了(文末福利)
新项目上线,对各种JVM参数设置一脸茫然,直接默认吧,然后就JJ了每次面试之前都要重新背一遍JVM的一些原理概念性的东西,然而面试官却经常问你在实际项目中如何
调优
JVM参数,如何解决GC、OOM等问题,
小熊学Java
·
2023-11-21 15:14
深入理解Java虚拟机
jvm
KaiwuDB 监控组件及辅助 SQL
调优
介绍
一、介绍KaiwuDB具备完善的行为数据采集功能,此功能要求KaiwuDB数据库系统C/E/T端不同进程的不同维度的指标采集功能十分完善;在不同进程完成指标采集后,会通过Opentelemetry和Collector将指标存入Prometheus,以便查找展示。Opentelemetry是一个用于跨多个服务和系统进行分布式跟踪和性能监测的工具,可以帮助收集、记录和分析应用程序的各种数据。Opent
KaiwuDB 数据库
·
2023-11-21 15:31
KaiwuDB
数据库
Oracle ADDM报告生成和性能分析
我写的SQL
调优
专栏:https://blog.csdn.net/u014427391/article/category/8679315对于局部的,比如某个页面列表sql,我们可以使用Oracle的执行计划进行
smileNicky
·
2023-11-21 15:18
JVM
调优
参数设置步骤
一、war包部署在tomcat中设置二、jar包部署在启动参数设置1、打开需要添加启动参数的对话框2、配置启动参数系统环境变量不能直接以空格分隔,要点击最右侧的图标,进入设置:其实就是,系统环境变量之间要以;分隔3.启动参数示例解析在Run/DebugConfigurations页面主动有三个内容需要被关注:VMoptions、Programarguments、Environmentvariabl
洛杉矶暖男
·
2023-11-21 13:07
jvm
java
性能测试-结果评估与展示(19)
面向开发部门开发工程师在性能测试阶段,主要参与性能缺陷分析、性能
调优
测试开发-东方不败之鸭梨
·
2023-11-21 10:08
性能测试
测试
2021-07-26
学校在中央广播电视大学基础上组建,面向全体社会成员,强
调优
质教育资源的集聚、
KKMA
·
2023-11-21 10:44
DolphinDB 流计算优化实践:时延统计与性能
调优
在实时计算中,端到端的响应延迟是衡量计算性能时最重要的指标。DolphinDB内置的流数据框架支持流数据的发布与订阅、流式增量计算、实时关联等,用户能够快速实现复杂的实时计算任务,达到毫秒级甚至亚毫秒级的效果,而无需编写大量代码。本文介绍如何对DolphinDB流计算任务进行全链路的时延统计,以及如何优化脚本以实现更低时延的实时计算:1.耗时统计在关键链路上记录处理的时刻,可以反映流计算各个环节的
DolphinDB智臾科技
·
2023-11-21 10:59
流计算
数据分析
实时计算
流计算引擎
数据库
数据统计
DolphinDB
浅谈JVM
调优
目录
调优
目的Arthas出现的问题频繁STWSTW时间过长
调优
参数堆内存参数调试跟踪参数设置GC参数串行收集器参数并行收集器参数CMS参数G1参数先了解JVM内存模型、工作原理、垃圾回收JVM
调优
目的使用较小的内存占用来获得较高的吞吐量或者较低的延迟吞吐量
EnndmeRedis
·
2023-11-21 08:49
advance
java
JVM
调优
mysql 5.6 优化配置_MySQL5.6基本优化配置
随着大量默认选项的改进,MySQL5.6比以前版本需要
调优
的选项大为减少.在本文中我将讲述需要优化的配置项.InnoDB设置1.innodb_buffer_pool_size——默认值为128M.这是最主要的优化选项
anonymousanonyme
·
2023-11-21 08:36
mysql
5.6
优化配置
MySQL索引优化(万字详解)
调优
SQL一般来说不就是看它有没有走索引,没走索引给它加上索引就好了吗?嗯,所以你是怎么给它加索引的?看SQL应该怎么走索引撒!那SQL是怎么走索引的呢?又是怎么判断这条SQL会不会走索引呢?
程序员阿紫
·
2023-11-21 07:57
IDEA集成性能分析神器VisualVM
VisualVM是一款免费的,集成了多个JDK命令行工具的可视化工具,它能为您提供强大的分析能力,对Java应用程序做性能分析和
调优
。
北暮城南
·
2023-11-21 06:30
intellij-idea
java
ide
MySQL索引:作用、类型、设计原则、优化策略与常见陷阱
请举例说明如何优化
慢查询
?有哪些常见的
慢查询
优化策略?请举例说明。介绍MySQL索引是数据库优化的关键,对于提高查询性能和加速数据检索至关重要。
二狗plus
·
2023-11-21 05:42
MySQL
mysql
数据库
Java并发(九):线程池
使用线程池可以统一分配、
调优
和监控线程。
Jorvi
·
2023-11-21 05:08
Redis基础、高级特性与性能
调优
之后概览Redis提供的高级能力,并在部署、维护、性能
调优
等多个方面进行更深入的介绍和指导。本文适合使用Redis的普通开发人员,以及对Redis进行选型、架构设计和性能
调优
的架构设计人员。
梅西爱骑车
·
2023-11-21 04:56
【案例分享】BenchmarkSQL 5.0 压测 openGauss 5.0.0
实际生产性能压测,还需结合服务器软硬件配置、数据库性能参数
调优
、BenchmarkSQL配置文件参数相结合,是一个复杂的过程。
renxyz
·
2023-11-21 00:57
openGauss
开源数据库
数据库
【博学谷学习记录】超强总结,用心分享|Hive
调优
-本地模式
文章目录本地模式用案例测试本地模式的效果创建普通表加载数据到普通表创建分桶表查询普通表数据插入分桶表记录关闭本地模式的插入数据用时记录开启本地模式的插入数据用时记录关闭本地模式的查询数据用时记录开启本地模式的查询数据用时总结本地模式当数据量很大时,HadoopJob是通过集群来处理大数据集的,这样可以充分发挥分布式计算的优势。但是有时候数据量很小的时候,原来的优化反而成了劣势,因为在数据量小的情况
熊猫同学呀
·
2023-11-20 20:29
Hive
博学谷学习记录
hive
学习
大数据
分布式架构知识体系必读
关键词节点,时间,一致性,CAP,ACID,BASE,P2P,机器伸缩,网络变更,负载均衡,限流,鉴权,服务发现,服务编排,降级,熔断,幂等,分库分表,分片分区,自动运维,容错处理,全栈监控,故障恢复,性能
调优
zl1zl2zl3
·
2023-11-20 20:43
分布式
架构
分布式
架构
教你如何优化MySQL
慢查询
SQL语句?快速提升系统性能!
因此本文主要以MySQL数据库为例,介绍常见的
慢查询
SQL语句执行效率分析与优化方法和简单示例,为致力于应用系统性能优化的从业人员提供一定参考和借鉴。
软件测试小仙女
·
2023-11-20 19:20
android
python
mysql
sql
软件测试
性能测试
数据库
Tomcat 9.0.54源码环境搭建
一.问什么要学习tomcattomcat是目前非常流行的web容器,其性能和稳定性也是非常出色的,学习其框架设计和底层的实现,不管是使用、性能
调优
,还是应用框架设计方面,肯定会有很大的帮助二.运行源码1
Aberwang9157
·
2023-11-20 19:48
java
开发语言
tomcat
色彩的基础知识——适用于camera tuning
#灵感#AWBCC是图像
调优
中的一个重要色彩部分,了解一些色彩知识。
search7
·
2023-11-20 17:22
图像调试
camera
tuning
面试官:我就问了一个JVM性能
调优
,没想到他能吹半个小时
一、JVM内存模型及垃圾收集算法1.根据Java虚拟机规范,JVM将内存划分为:New(年轻代)Tenured(年老代)永久代(Perm)其中New和Tenured属于堆内存,堆内存会从JVM启动参数(-Xmx:3G)指定的内存中分配,Perm不属于堆内存,由虚拟机直接分配,但可以通过-XX:PermSize-XX:MaxPermSize等参数调整其大小。年轻代(New):年轻代用来存放JVM刚分
程序员麦冬
·
2023-11-20 17:38
2023.11.17 -hivesql
调优
,数据压缩,数据存储
目录1.hive命令和参数配置2.hive数据压缩3.hive数据存储0.原文件大小18.1MB1.textfile行存储格式,压缩后size:18MB2.行存储格式:squencefile,压缩后大小8.89MB3.列存储格式orc-ZILIB,压缩后大小2.78MB4.列存储格式orc-snappy,压缩后大小3.75MB5.列存储格式之parquets,压缩后大小13.09MB4.在linu
白白的wj
·
2023-11-20 16:33
hive
hadoop
数据仓库
sql
大数据
数据库
database
Spring Boot项目优化和JVM
调优
项目
调优
作为一名工程师,项目
调优
这事,是必须得熟练掌握的事情。在SpringBoot项目中,
调优
主要通过配置文件和配置JVM的参数的方式进行。
Java天天
·
2023-11-20 14:51
springboot集成starrocks、以及采用flink实现mysql与starrocks亚秒级同步
某些大数据
慢查询
就走starrocks就这样配置好后就可把starrocks当mysql用了#spring配置spring:redis
qq_41369135
·
2023-11-20 11:03
Mysql
spring
boot
flink
mysql
starrocks
Linux常见系统
调优
方法
目录一.关闭不必要的开机自启程序二.修改国外yum源为国内yum源1.备份本地默认yum源2.下载阿里云的yum源配置文件并改名3.清理并生成缓存,效验结果三.修改主机名1.临时修改主机名2.永久修改主机名①.命令修改②.配置文件修改四.修改网卡名1.查看网卡信息2.修改/etc/default/grub配置文件3.重命名/etc/sysconfig/network-scripts网卡配置文件4.
ChiZB
·
2023-11-20 08:03
linux
服务器
运维
系统安全
安全
网络
Java性能优化最佳实践,附答案
一,阿里巴巴面试题二,百度面试题三,蚂蚁金服面试题四,美团面试题五,携程面试题六,所有面试题所得结论通过面试题来看,可以看出目前互联网公司面试考点为:性能
调优
、算法数据机构高并发下数据安全、接口冪等性、
最新Java面经
·
2023-11-20 08:01
程序员
面试
后端
java
Mysql 千万级别查询优化
经常碰到
慢查询
报警,我们线上的慢sql阈值是1s,出现报警的表数据有7000多万,经常出现报警的是一个groupby的count查询,于是便开始着手优化这块,记录下自己优化过程中的心得拿下面这张表举例,
softshow1026
·
2023-11-20 07:51
立体仓库
mysql
数据库
开发语言
Hive
调优
1.参数配置优化设定Hive参数有三种方式:(1)配置Hive文件当修改配置Hive文件的设定后,对本机启动的所有Hive进程都有效,因此配置是全局性的。一般地,Hive的配置文件包括两部分:a)用户自定义配置文件:$HIVE_CONF_DIR/hive-site.xmlb)默认配置文件:$HIVE_CONF_DIR/hive-default.xml.template#当用户自定义配置后,会覆盖默
祈愿lucky
·
2023-11-20 06:33
大数据
hive
hadoop
数据仓库
【转】YARN的Memory和CPU
调优
配置详解
转载地址:http://blog.itpub.net/30089851/viewspace-2127851/
白面葫芦娃92
·
2023-11-20 04:55
MySQL 日志及数据备份
目录第一节:日志的类型与作用一、日志的类型1、redo重做日志2、undo回滚日志3、errorlog错误日志4、slowquerylog
慢查询
日志5、binlog二进制日志6、relaylog中继日志
忙碌滴比特流
·
2023-11-20 03:37
运维
MySQL
数据库
运维
mysql
双十一空
调优
惠力度大吗?双十一买空调合适吗?
双十一空
调优
惠力度大吗?双十一买空调合适吗?每年的双十一都是购物狂欢的时刻,众多电商平台都推出了各种促销活动。我们常见的家电空调在双十一期间真的有大幅度的优惠吗?双十一这个时间节点购买空调是否明智呢?
专注优惠省钱
·
2023-11-20 03:54
luajit开发文档中文版(一)下载和安装
LuaJIT扩展luajit开发文档中文版(三)FAQ常见问题luajit开发文档wiki中文版(一)总目录luajit开发文档wiki中文版(二)LuaJIT扩展luajit开发文档wiki中文版(三)性能
调优
和测试
zh7314
·
2023-11-20 01:05
lua
开发语言
Hive参数与性能企业级
调优
(建议收藏)
但是如果我们只局限于会使用Hive,而不考虑性能问题,就难搭建出一个完美的数仓,所以Hive性能
调优
是我们大数据从业者必须掌握的技能。本文将给大家讲解Hive性能
调优
的一些方法及技巧。
坨坨的大数据
·
2023-11-19 23:58
最全JVM与性能
调优
知识点总结,看看哪些是你还没掌握的?
前言JVM
调优
是每个高级程序员的必修课,在本章中,我会从发展过程以及核心价值来剖析JVM的体系结构。
前程有光
·
2023-11-19 23:16
可视化的mysql慢日志平台,帮助数据库管理员(DBA)和开发者更好地管理和监控 MySQL 数据库的
慢查询
日志
一个查询被视为“
慢查询
”通常是基于它执行的时间是否超过了一个预设的阈值。例如,在MySQL中,可以设置一个参数`long_query_ti
小小哭包
·
2023-11-19 22:14
数据库
数据库
mysql
dba
huggingface transfromers基于预训练模型进行
调优
以Resnet为例,找到了一个微软的resnet-50的预训练模型fromtransformersimportAutoImageProcessor,ResNetForImageClassification#加载前处理处理器,自动构建;功能:输入图片,输出Tenser(1,3,224,224)processor=AutoImageProcessor.from_pretrained("microsof
onmeiei
·
2023-11-19 22:22
MySQL进阶_8.数据库其他
调优
策略
文章目录第一节、数据库
调优
的步骤1.1、选择合适的DBMS1.2、优化表设计1.3、优化逻辑查询1.4、优化物理查询1.5、使用Redis或Memcached作为缓存1.6、库级优化第二节、优化MySQL
珍珠是蚌的眼泪
·
2023-11-19 21:44
MySQL
mysql
数据库调优
读写分离
大表优化
分库分表
Python大数据之linux学习总结——day10_hive
调优
hive
调优
hive
调优
hive命令和参数配置1.hive数据压缩压缩对比开启压缩2.hive数据存储[练习]行列存储原理存储压缩比拓展dfs-du-h3.fetch抓取4.本地模式5.join的优化操作
笨小孩124
·
2023-11-19 20:50
hive
学习总结
大数据
python
linux
那个陪我打王者的兄弟进了阿里
百世物流专场一面线上SQL
调优
经验。
调优
的惯用思路。索引为什么采用
艾小仙人
·
2023-11-19 19:14
【jvm】MinorGC、MajorGC和FullGC
目录一、说明二、年轻代GC(MinorGC)触发机制三、老年代GC(MajorGC/FullGC)触发机制四、FullGC触发机制一、说明1.jvm
调优
的主要目的是GC的时间少一些,用户线程执行的时间多一些
王佑辉
·
2023-11-19 18:01
jvm
jvm
flink原理实战与性能优化 pdf_三万字长文 | Spark性能优化实战手册
《Spark性能优化:开发
调优
篇》《Spark性能优化:资源
调优
篇》《Spark性能优化:数据倾斜
调优
篇》《Spark性能优化:shuffle
调优
篇》Spark性能优化:开发
调优
篇在大数据计算领域,Spark
weixin_39685697
·
2023-11-19 18:07
flink原理实战与性能优化
pdf
spark算子
spark性能
调优
之合理的并行度设置
Spark性能
调优
之合理设置并行度1.Spark的并行度指的是什么?spark作业中,各个stage的task的数量,也就代表了spark作业在各个阶段stage的并行度!
浪子城
·
2023-11-19 18:07
大数据
spark优化
大数据
Spark性能
调优
之合理设置并行度
1.Spark的并行度指的是什么?spark作业中,各个stage的task的数量,也就代表了spark作业在各个阶段stage的并行度!当分配完所能分配的最大资源了,然后对应资源去调节程序的并行度,如果并行度没有与资源相匹配,那么导致你分配下去的资源都浪费掉了。同时并行运行,还可以让每个task要处理的数量变少(很简单的原理。合理设置并行度,可以充分利用集群资源,减少每个task处理数据量,而增
跳跃的list
·
2023-11-19 18:06
spark
spark
调优
【Spark】|【Spark性能
调优
】|【设置并行度】|【Spark多配置优先级】|【总结】
一、【关于Spark并行度】1.什么是Spark的并行度?并行度其实就是指的是spark作业中,各个stage的task的数量,也就代表了spark作业在各个阶段stage的并行度2.官方推荐task的个数?官方推荐,task数量,设置成sparkApplication总cpucore数量的2~3倍。比如:150个cpucore,基本设置task数量为300~500。【由于task实际处理运行时间
Haven.Liu
·
2023-11-19 18:35
Spark
Spark
性能调优
task并行度
配置读取优先级
spark性能
调优
| 默认并行度
SparkSql默认并行度看官网,默认并行度200https://spark.apache.org/docs/2.4.5/sql-performance-tuning.html#other-configuration-options优化在数仓中task最好是cpu的两倍或者3倍(最好是倍数,不要使基数)拓展在本地task需要自己设置,cpu就是local[x]x就代表cpu数在yarn--num-
Knight_AL
·
2023-11-19 18:04
Spark优化
spark
大数据
分布式
Spark 性能
调优
之并行度设置
Spark性能
调优
之并行度设置Spark作业中的并行度什么是并行度Spark在每一个stage中task数量,就称为这个stage上的并行度;为什么要设置并行度如果你按照集群能给的最大资源给当前Spark
fffalconer
·
2023-11-19 18:04
Spark
spark
大数据
分布式专题-NIO框架之Netty06 - Netty性能
调优
与设计模式
目录导航前言设计模式在Netty中的应用单例模式源码举例策略模式源码举例装饰者模式源码举例观察者模式源码举例迭代器模式源码举例责任链模式源码举例工厂模式源码举例Netty高性能并发
调优
Netty应用程序性能
调优
单机百万连接
调优
解决思路后记前言本节我们就需要基于
✎ℳ๓₯㎕...雲淡風輕
·
2023-11-19 17:48
分布式专题
netty
java
设计模式
性能调优
高并发
Spark数据倾斜
Spark数据倾斜
调优
数据倾斜是大数据计算中一个最棘手的问题,出现数据倾斜后,Spark作业的性能会比期望值差很多,两大直接后果:Spark任务OOM异常退出,数据倾斜拖慢整个任务的执行。
WovJf
·
2023-11-19 17:04
Spark
spark
大数据
分布式
上一页
28
29
30
31
32
33
34
35
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他