E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
WebSphere性能调优
HBase
性能调优
(二)
Hbase
性能调优
(二)_开着拖拉机回家的博客-CSDN博客Hbase
性能调优
(一)_开着拖拉机回家的博客-CSDN博客目录一、通用优化二、Linux优化三、HBase优化1、修改zookeeper配置
开着拖拉机回家
·
2023-07-14 00:57
Hbase
hbase
hbase-site.xml
优化
Flink实时任务
性能调优
前言通常我们在开发完Flink任务提交运行后,需要对任务的参数进行一些调整,通常需要调整的情况是任务消费速度跟不上数据写入速度,从而导致实时任务出现反压、内存GC频繁(FullGC)频繁、内存溢出导致TaskManager被Kill。今天讲一下Flink任务中常见的性能场景及解决思路。反压在Flink任务中多个Task之间需要进行数据交换,在流式计算中数据的生产方的生产速度和消费方的消费速度不匹配
王义凯_Rick
·
2023-07-13 17:25
#
Flink
flink
大数据
实时任务
blink
优化
反压
背压
Kafka跨集群迁移方案MirrorMaker原理、使用以及
性能调优
实践
目录序言1.KafkaMirrorMaker基本特性2.新旧ConsumerAPI的使用问题3.负载不均衡原因诊断以及问题解决4.本身网络带宽限制问题5.适当配置单次poll的消息总量和单次poll()的消息大小6.恶劣网络环境下增加超时时间配置序言KakfaMirrorMaker是Kafka官方提供的跨数据中心的流数据同步方案。其实现原理,其实就是通过从SourceCluster消费消息然后将消
小昌昌的博客
·
2023-06-24 09:21
kafka
kafka
Mirror
Maker
性能
原理
【MYSQL篇】mysql性能优化总结
前言说到MYSQL
性能调优
,大部分时候想要实现的目标是让我们的查询更快。一个查询的动作又是由很多个环节组成的,每个环节都会消耗时间,我们要减少查询所消耗的时间,就要从每一个环节入手。
初念初恋
·
2023-06-23 16:36
MYSQL
mysql
java
后端
mysql日记---sql优化初级
有人会说
性能调优
是数据库管理员(DBA)的事,然而
性能调优
跟程序员们也有莫大的关系。程序中嵌入的一行行的SQL语句,如果使用了一些优化小技巧,定能达到事半功倍的效果。
神经电泳实现师
·
2023-06-23 11:01
内存不够用,那你的内存去哪了?
一、前言近几年开发了一些大型的应用程序,在程序
性能调优
或者解决一些疑难杂症问题的过程中,遇到最多的还是与内存相关的一些问题。
盈梓的博客小站
·
2023-06-23 01:38
java
数据库
开发语言
linux设置密码报错automa,opensuse linux环境下ibm_
websphere
和ibm_db2安装以及DB2数据迁移操...
opensuselinux环境下ibm_
websphere
和ibm_db2安装ibm_
websphere
安装:1、ibm官网下载免费版
websphere
,如下载文件名为BASETRIAL.agent.installer.linux.gtk.x86
weixin_39649736
·
2023-06-22 15:51
数仓|Hive
性能调优
(二)
7、优化SQL处理join数据倾斜(1)空值或无意义值这种情况很常见,比如当事实表是日志类数据时,往往会有一些项没有记录到,我们视情况会将它置为null,或者空字符串、-1等。如果缺失的项很多,在做join时这些空值就会非常集中,拖累进度。因此,若不需要空值数据,就提前写where语句过滤掉。需要保留的话,将空值key用随机方式打散,例如将用户ID为null的记录随机改为负值:selecta.ui
Distantfbc
·
2023-06-22 08:48
hive
hive
hadoop
数据仓库
关于 Web 应用的内联 css 和 scss 文件里的 var 关键字用法
为什么网站
性能调优
准则里都强调要UseinlinefontsandCSSinsteadofloadingthemasynchronously?
·
2023-06-22 01:33
pyspark系列9-Spark
性能调优
概述
一.Spark性能优化概述首先笔者能力优先,使用Spark有一段时间,如下是笔者的工作经验的总结。Spark任务运行图:image.pngSpark的优化思路:一般是从3个层面进行Spark程序的优化:运行环境优化RDD算子优化参数微调二.运行环境优化2.1数据本地性我们知道HDFS的数据文件存储在不同的datanode,一般数据副本数量是3,因为Spark计算的数据量比较大,如果数据不在本节点,
只是甲
·
2023-06-22 00:11
服务攻防-中间件安全&CVE 复现&K8s&Docker&Jetty&
Websphere
目录(一)中间件-kubernetes1、认识k8s2、判定k8s3、安全问题(二)中间件-Docker
@Camelus
·
2023-06-21 08:37
渗透与攻防
kubernetes
docker
中间件
web安全
安全威胁分析
ClickHouse
性能调优
之排序和数据类型
每个DBA都关心数据库
性能调优
,我们知道不同数据类型可以描述不能业务场景,同时也影响数据访问和有效存储。
梦想画家
·
2023-06-20 21:27
ClickHouse
clickhouse
数据库
Koordinator v1.1发布:负载感知与干扰检测采集
背景Koordinator旨在为用户提供完整的混部工作负载编排、混部资源调度、混部资源隔离及
性能调优
解决方案,帮助用户提高延迟敏感服务的运行性能,挖掘空闲节点资源并分配给真正有需要的计算任务,从而提高全局的资源利用效率
·
2023-06-20 16:18
云计算阿里云
【AntDB数据库】AntDB数据库
性能调优
(二)
网络配置尽管网络堆栈在很大程度上是自我优化的。但是在网络数据包处理过程中,以下方面可能会成为瓶颈并降低性能:网卡硬件缓存:正确观察硬件层面的丢包方法是使用ethtool-S${NIC_DEV_NAME}命令观察drops字段。当出现丢包现象时,主要考虑是硬/软中断的处理速度跟不上网卡接收速度。若接收缓存小于最大限制时,也可尝试增加RX缓存来防止丢包。查询命令为:ethtool-g${NIC_DEV
亚信安慧AntDB数据库
·
2023-06-20 13:38
国产数据库
AntDB
AISWare
AntDB
数据库
大数据
【AntDB数据库】AntDB数据库
性能调优
(一)
操作系统处理器——动态节能技术cpufreq是一个动态调整CPU频率的模块,可支持五种模式。为保证服务性能应选用performance模式,将CPU频率固定工作在其支持的最高运行频率上,不进行动态调节,操作命令为cpupowerfrequency-set--governorperformance。处理器——中断亲和性自动平衡:可通过irqbalance服务实现。手动平衡:确定需要平衡中断的设备,从
亚信安慧AntDB数据库
·
2023-06-20 13:38
AISWare
AntDB
国产数据库
AntDB
数据库
大数据
KVM虚拟机IO
性能调优
KVM虚拟机IO
性能调优
我们知道OpenStack中nova组件能够支持很多种虚拟化方式,官方目前主推的KVM,面向KVM虚拟化支持的功能也是最多的,它能够和neutron组件有很好的结合。
·
2023-06-19 17:12
kvm
Spark-核心常见面试题集锦(RDD、shuffle类型、数据倾斜优化、小文件问题、
性能调优
、streaming流程、checkpoint机制)
1Spark的任务执行流程第一种standalone模式整体:driver中有sparkcontext,RDDDAG和DAGScheduler和taskscheduler,master是资源管理,worker中executor,executor中有多个task构建一个application环境,driver创建sparkcontextsparkcontext中的taskcheduler连接到集群管
:Concerto
·
2023-06-19 14:48
spark
大数据
shuffle
JMH实战
引言
性能调优
一直是工作中很重要的必会技能,如何知晓自己写代码的优劣呢?当然是看代码运行时间,时间越短,说明代码越优。
demon7552003
·
2023-06-19 07:02
JAVA
java
jvm
JMH
全国大数据与计算智能挑战赛:面向低资源的命名实体识别基线方案,排名13/64,组织单位:国防科技大学系统工程学院(大数据与决策实验室)
NLP专栏简介:数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、
性能调优
、模型压缩算法等专栏详细介绍:NLP专栏简介:数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能
·
2023-06-18 23:56
NLP/知识图谱:信息抽取专栏
人工智能
深度学习
自然语言处理
命名实体识别
关系抽取
性能测试基础笔试题
1.性能测试应用领域有哪些能力验证:乙方通过性能测试向甲方证明自己所陈述的能力,出具报告瓶颈分析:能力验证过程中发现性能瓶颈,找到性能问题
性能调优
:针对发现的性能瓶颈和问题做调优容量规划:着眼于未来。
虚幻如影
·
2023-06-18 17:19
性能测试
压力测试
JVM底层原理分析 +
性能调优
基本概念——JVM位置JVM运行在操作系统之上的,与硬件没有直接的交互——体系结构1.类装载器ClassLoader负责加载class文件,class文件在文件开头有特定的文件标示(cafebabe),将class文件字节码内容加载到内存中,并将这些内容转换成方法区中的运行时数据结构并且ClassLoader只负责class文件的加载,至于它是否可以运行,则由ExecutionEngine决定并不
程序少年不秃头
·
2023-06-18 09:38
Java
jvm
java
使用Filebeat和AWS CloudWatch Logs将EC2上的Tomcat的access_log传送到ELasticsearch中并使用ILM完成日志的自动管理
日志数据配置ILM
性能调优
配置Filebat的内部队列大小如何验证queue.mem是合理且正确的?配置output部分的worker和bulk_max_size测试结果
JackSparrow414
·
2023-06-18 04:23
ELK
tomcat
elasticsearch
aws
Filebeat
elk
服务日志
性能调优
,由log引出的巨坑
只有被线上服务问题毒打过的人才明白日志有多重要!谁赞成,谁反对?如果你深有同感,那恭喜你是个社会人了:)日志对程序的重要性不言而喻,轻巧、简单、无需费脑,程序代码中随处可见,帮助我们排查定位一个有一个问题问题。但看似不起眼的日志,却隐藏着各式各样的“坑”,如果使用不当,不仅不能帮助我们,反而会成为服务“杀手”。如果你想学习jmeter性能测试,我这边给你推荐一套视频,这个视频可以说是B站播放全网第
测试猿廖廖
·
2023-06-18 03:05
java
前端
服务器
经验分享
软件测试
jmeter
Doris开发手记4:倍速性能提升,向量化导入的
性能调优
实践
正好有Doris社区的小伙伴吐槽向量化的导入性能表现并不是很理想,就借这个机会对之前开发的向量化导入的工作进行了
性能调优
,取得了不错的优化效果。
LeeHappen
·
2023-06-18 01:23
JVM基础总结
线程共享堆内存溢出【OutOfMemoryError:Javaheapspace】堆内存诊断五、方法区【MethodArea】线程共享运行时常量池StringTable特性【面试常考】StringTable
性能调优
直接内存直
Bwy_1004
·
2023-06-17 23:08
jvm
java
开发语言
2023中国高校计算机大数据挑战赛:论文学科分类baseline|清华主办
NLP专栏简介:数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、
性能调优
、模型压缩算法等专栏详细介绍:NLP专栏简介:数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能
·
2023-06-17 23:08
NLP/知识图谱:信息抽取专栏
人工智能
深度学习
自然语言处理
文本分类
大数据
ClickHouse
性能调优
——压缩和编码算法
随着数据库数据越来越多,给数据存储、网络访问造成成本和负担。压缩技术节约存储空间、加速网络访问的常用解决方案,本文主要介绍压缩算法和ClickHouse编码技术。压缩类型ClickHouse协议支持LZ4和ZSTD压缩算法,两者都是基于字典使用校验和的压缩算法,LZ4较快、但压缩率比ZSTD较低。你可以选择合适算法,缺省为LZ4,当不确定选择哪种算法时建议使用LZ4。对于MergeTree引擎表,
梦想画家
·
2023-06-16 20:13
ClickHouse
clickhouse
数学建模
压缩与编码
AntDB数据库
性能调优
方案介绍
AntDB
性能调优
CPU适用场景interlAMDARM1.批量运行大数据量查询2.大量数据排序AntDB4.xYYYAntDB5.xYYYAntDB6.xYYY1.并发量大2.小查询多AntDB4.xYYAntDB5
亚信安慧AntDB数据库
·
2023-06-16 19:34
国产数据库
AntDB
数据库
java
开发语言
性能测试流程
性能测试实战一.资源指标分析1.判断CPU是否瓶颈的方法2.判断内存是否瓶颈的方法3.判断磁盘I/O是否瓶颈的方法4.判断网络带宽是否是瓶颈的方法二.系统指标分析三.
性能调优
四.性能测试案例1.项目背景
IT-小公主
·
2023-06-16 01:29
软件测试
性能优化
可用性测试
飞腾
性能调优
NUMA21世纪以来随着科技大步想抢进步,信息时代来临,5G、云计算、物联网等技术蓬勃发展,而这一切都离不开大量数据的交互以及庞大的运算,在这其中,电脑的“心脏”----CPU,起到了扮演着举足轻重的作用,但是功耗和冷却两大限制极大的影响了单核算力的发展,为了满足这些需求,多核架构成为最重要的演进方向,其中ARM在多核和功耗方面一直走在世界的前列。最早的多核处理器多使用SMP(SymmetricM
d1306937299
·
2023-06-15 22:26
计算机基础
服务器
运维
基于jdk1.8的Java服务监控和
性能调优
JVM的参数类型X参数非标准参数-Xint:解释执行-Xcomp:第一次使用就编译成本地代码-Xmixed:JVM自己来决定是否编译成本地代码默认使用的是mixedmode用的不多,只需要做了解,用的比较多的是XX参数XX参数非标准化参数相对不稳定主要用来JVM调优和DebugBoolean:格式:-XX:[+-]表示启用或禁用name属性比如:-XX:+UseConcMarkSweepGC,表示
Box_clf
·
2023-06-15 08:36
jvm
java
开发语言
kettle配置及
性能调优
性能调优
在整个工程中是非常重要的,也是非常有必要的。其实
性能调优
主要分两个方面:一方面是硬件调优,一方面是软件调优。本章主要是介绍Kettle的性能优化及效率提升。
程序猿羊
·
2023-06-15 02:00
Kettle数据采集
性能调优
java
etl
性能优化
如何实现对 Oracle 的实时数据捕获和
性能调优
|Flink CDC 专题
Flink-learning学训平台和FlinkCDC专题课程来啦!为帮助开发者更系统化、更便捷地学习应用Flink,我们搭建了Flink-learning学训平台,为开发者提供丰富的图文、音频、视频、动手实验等多形式课程和学习素材,助力开发者提升自身技术能力。首期FlinkCDC专题正式发布,后续将逐步上线更多精品课程。本期FlinkCDC专题从技术原理、生产应用到动手实践,包含Flink与Mo
·
2023-06-14 18:14
后端flink大数据实时计算
IBM
WebSphere
MQ8.0 安装与队列创建
最近接触的项目中使用了IBM
Websphere
MQ8.x,由于要为其编写监控插件,所以在网上找了很久的资料,发现8.x实在是太老了,很多资源和教程都没有,遂决定在此统一整理和记录一下.安装下载安装包IBM
·
2023-06-14 16:19
程序员
Linux
性能调优
工具
性能观察工具静态性能工具性能压测工具
性能调优
工具sarperf-tools追踪工具BPF性能工具
bbj1030
·
2023-06-14 12:39
linux
linux
测试工具
运维
性能
工具
我眼中的架构师:一个优秀的架构师应该具备什么?
性能调优
、Spring,MyBatis,Netty源码分析的朋友可以加我的Java高级架构进阶群:180705916,群里有阿里大牛直播讲解技术,以及Java大型互联网技术的视频免费分享给大家格局“格局
高级java架构师
·
2023-06-14 02:38
如何分析问题、找到性能瓶颈、掌握
性能调优
?一文讲懂性能测试
背景当下云计算、大数据盛行的背景下,大并发和大吞吐量的需求已经是摆在企业面前的问题了,其中网络的性能要求尤为关键,除了软件本身需要考虑到性能方面的要求,一些硬件上面的优化也是必不可少的。作为一名测试工作者,对于性能测试的问题肯定不会陌生,但是测试不仅仅是执行和收集数据,更多的应该是分析问题、找到性能瓶颈以及一些优化工作。毕竟在客户现场测试性能的时候,能够通过一些系统层面的调优,提升软件的性能,那对
软件测试小仙女
·
2023-06-14 00:01
网络
python
数据库
测试工具
性能优化
服务日志
性能调优
,由log引出的巨坑
只有被线上服务问题毒打过的人才明白日志有多重要!谁赞成,谁反对?如果你深有同感,那恭喜你是个社会人了:)日志对程序的重要性不言而喻,轻巧、简单、无需费脑,程序代码中随处可见,帮助我们排查定位一个有一个问题问题。但看似不起眼的日志,却隐藏着各式各样的“坑”,如果使用不当,不仅不能帮助我们,反而会成为服务“杀手”。如果你想学习性能测试,我这边给你推荐一套视频,这个视频可以说是B站播放全网第一的接口测试
测试小鬼
·
2023-06-13 21:56
python
软件测试
测试工具
经验分享
程序人生
直播预告 | 博睿学院:算法平台底座-数据湖应用
本期讲师明秀平博睿数据数智能力中心AI研发工程师业务专长:平台搭建,
性能调优
,算法设计工作经历:
·
2023-06-13 18:32
运维微服务服务器devops
服务日志
性能调优
,由log引出一系列的事故
只有被线上服务问题毒打过的人才明白日志有多重要!谁赞成,谁反对?如果你深有同感,那恭喜你是个社会人了:)日志对程序的重要性不言而喻,轻巧、简单、无需费脑,程序代码中随处可见,帮助我们排查定位一个有一个问题问题。但看似不起眼的日志,却隐藏着各式各样的“坑”,如果使用不当,不仅不能帮助我们,反而会成为服务“杀手”。本文主要介绍生产环境日志使用不当导致的“坑”及避坑指北,高并发系统下尤为明显。同时提供一
程序员木江
·
2023-06-13 15:52
性能测试
开发语言
软件测试
selenium
测试工具
自动化
MySQL的索引覆盖和索引下推
在MySQL数据库中,索引对查询的速度有着至关重要的影响,理解索引也是进行数据库
性能调优
的起点,索引就是为了提高数据查询的效率。
六千江山
·
2023-06-13 14:58
Java日常总结
java
MySQL
性能调优
及生产实战篇终版
优化数据访问查询数据低效原因是否请求了不需要的数据优化执行过程查询缓存查询优化处理语法解析器查询优化器优化器的优化策略优化器的优化类型关联查询排序优化大数据量查询优化优化COUNT查询优化关联查询优化子查询优化LIMIT分页优化union用户自定义变量海量数据解耦优化处理总结前言博文:MySQL
性能调优
及生产实战篇
vnjohn
·
2023-06-13 06:54
MySQL
mysql
数据库
sql
java面试题/认证答辩 ---中间件
Nginx掌握:掌握ActiveMQ/RabbitMQ/kafka等至少一种消息中间件,redis等nosql,Nginx精通:深入理解消息队列、nosql、nginx的原理和模式综合应用:具备常用中间件的
性能调优
Fuly1024
·
2023-06-13 06:32
面试刷题
中间件
高频面试题 ----------JVM调优
JVM
性能调优
的原则有哪些?什么情况下需要JVM调优?在JVM调优时,你关注哪些指标?JVM常用参数有哪些?JVM常用
性能调优
工具有哪些?线上排查问题的一般流程是怎么样的?什么情况下,会抛出OOM呢?
Connection Reset
·
2023-06-13 04:10
面试
jvm
java
面试
hadoop hdfs
性能调优
说明其实hdfs并不适合作为小文件的分布式存储系统.前人埋下的坑....背景一次线上环境的hdfsnamenode进程打满cpu.一直在百分之67百.namenode一直在做fullgc,此时hdfs基本处于不可用状态,此时系统可用内存又不足,而且cpu负载很高.由于这个环境第一次接手维护.这篇文章主要总结下如何做的优化.环境:hadoop版本:Hadoop2.6.0-cdh5.5.0服务器:Ce
oo_思维天空
·
2023-06-13 04:23
在失败中崛起,我总结出这份《MySQL
性能调优
笔记》
《MySQL
性能调优
学习导图》概要说明:本文篇幅有限,故只展示部分内容,《MySQL
性能调优
学习导图》收集整理不然后添加vx【MXX-0474QAQ】即可免费获取下载方式易,有需要的朋友麻烦帮忙转发一下
Java布道者-小轩
·
2023-06-13 04:50
面试
笔记
Java
软件架构师考试有什么建议,综合知识哪些知识点每年必考
对
性能调优
、安全设计、容灾备份等方面有一定的实践经验
又可乐
·
2023-06-13 00:43
Apache Hive函数高阶应用、
性能调优
Hive的函数高阶应用explode函数explode属于UDTF函数,表生成函数,输入一行数据输出多行数据。功能:explode()takesinanarray(oramap)asaninputandoutputstheelementsofthearray(map)asseparaterows.--explode接收maparray类型的参数把map或者array的元素输出,一行一个元素。exp
小布先生~噫嘘唏
·
2023-06-12 20:36
hadoop知识点
hive
apache
大数据
hadoop
通过 HTTP/2 协议案例学习 Java & Netty
性能调优
:工具、技巧与方法论
除易用性以外,Dubbo3Triple在
性能调优
·
2023-06-12 17:11
阿里2023年版十亿级并发系统设计+java性能优化实战文档
没准备好也别怕,小编给大家准备好了2021年最新版阿里巴巴十亿级并发系统设计+阿里巴巴java
性能调优
实战两份学习文档,让你面试阿里不再难,希望大家能够喜欢!
程序猿java易
·
2023-06-12 15:54
java
编程
程序员
java
性能优化
jvm
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他