E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Doris性能调优
阿里巴巴Java
性能调优
实战:网络通信优化之序列化:避免使用Java序列化
网络通信优化之序列化:避免使用Java序列化当前大部分后端服务都是基于微服务架构实现的。服务按照业务划分被拆分,实现了服务的解偶,但同时也带来了新的问题,不同业务之间通信需要通过接口实现调用。两个服务之间要共享一个数据对象,就需要从对象转换成二进制流,通过网络传输,传送到对方服务,再转换回对象,供服务方法调用。这个编码和解码过程我们称之为序列化与反序列化。在大量并发请求的情况下,如果序列化的速度慢
Charles__LUO
·
2024-02-02 01:57
网络
编程语言
python
java
大数据
Elasticsearch高性能优化实践
Elasticsearch高性能优化实践_es批量导入数据多少为最优-CSDN博客ES
性能调优
ES的默认配置,是综合了数据可靠性、写入速度、搜索实时性等因素。
大叶子不小
·
2024-02-01 21:39
elasticsearch
大数据
搜索引擎
streampark+flink一键整库或多表同步mysql到
doris
实战
streampark+flink一键整库或多表同步mysql到
doris
实战,此应用一旦推广起来,那么数据实时异构时,不仅可以减少对数据库的查询压力,还可以减少数据同步时的至少50%的成本,还可以减少30%
京东云技术团队
·
2024-02-01 12:42
flink
mysql
大数据
【数据结构与算法】之哈希表系列-20240131
.两个列表的最小索引总和二、1122.数组的相对排序三、1002.查找共用字符四、771.宝石与石头五、961.在长度2N的数组中找出重复N次的元素一、599.两个列表的最小索引总和简单假设Andy和
Doris
敲代码敲到头发茂密
·
2024-02-01 06:35
数据结构与算法
散列表
数据结构
python
leetcode
开发语言
算法
linux系统ansible
性能调优
和配置文件详解
性能调优
性能调优
AnsibleSSH关闭秘钥检测OpenSSH连接优化SSHpipelining加速AnsibleAnsibleFacts缓存优化Ansible配置文件详解
性能调优
Ansible企业实战环境中
丨析木丨
·
2024-02-01 01:31
linux
linux
ansible
服务器
Java程序员2020学习方向:高并发、
性能调优
、分布式、微服务...
以下都是阿里大牛推荐的主流技术,当你全部掌握上述的这些技术相信你至少也是阿里P6级以上了,而且你也已经形成了自己的体系,当更加新潮的技术出来时那么你自己稍微花点时间就能吃透,毕竟那时候你已经不是以前的那个你了,懂底层原理,知道性能特征,以及功能,想要弄懂新的技术那么也不会太吃力。平台与图片大小限制,需获取以下Java思维导图完整Xmind版可以进我的学习群:909666042免费获取!一、框架源码
风平浪静如码
·
2024-01-31 23:39
前端
性能调优
前言移动互联网时代,用户对于网页的打开速度要求越来越高。首屏作为直面用户的第一屏,其重要性不言而喻。优化用户体验更是我们前端开发非常需要focus的东西之一。从用户的角度而言,当打开一个网页,往往关心的是从输入完网页地址后到最后展现完整页面这个过程需要的时间,这个时间越短,用户体验越好。所以作为网页的开发者,就从输入url到页面渲染呈现这个过程中去提升网页的性能。所以输入URL后发生了什么呢?在浏
R_X
·
2024-01-31 09:32
Spark
性能调优
Spark
性能调优
executor内存不足用`UNIONALL`代替`UNION`persist与耗时监控executor内存不足问题表现1:Containerxxisrunningbeyondphysicalmemorylimits.Currentusage
HanhahnaH
·
2024-01-31 08:26
Spark
spark
大数据
分布式
深入解析MySQL数据库锁机制
IntentionSharedLock)4.意向排它锁(IntentionExclusiveLock)5.记录锁三、MySQL锁的实现方式1.两阶段锁协议2.锁的存储结构4.死锁检测和超时处理5.实际应用四、锁的优化和
性能调优
喔的 喔的嘛呀
·
2024-01-31 07:33
数据库
mysql
Apache
Doris
2.0.4 版本正式发布
官网下载:https://
doris
.apache.org/download/GitHub下载:h
SelectDB技术团队
·
2024-01-31 03:38
apache
大数据
数据仓库
数据分析
数据库
Apache
Doris
JVM垃圾回收与
性能调优
那我就就对最近一直用的jvm
性能调优
方法介绍一下,这可是java程序都要涉及的:1.JVM的gc概述,刚开始测试的时候,根本就不知道这个到底是什么意思,所以就没对这个指标进行统计,但是后来发现这是一个很重要的指标
满龙林
·
2024-01-30 21:16
性能调优
必备神器-Jprofiler解析
每天进步一点点,关注我们哦,每天分享测试技术文章本文章出自【码同学软件测试】码同学公众号:自动化软件测试码同学抖音号:小码哥聊软件测试01安装JProfiler从http://www.ej-technologies.com/下载5.1.2并申请试用序列号02主要功能简介1.内存剖析MemoryprofilerJProfiler的内存视图部分可以提供动态的内存使用状况更新视图和显示关于内存分配状况信
码同学软件测试
·
2024-01-30 15:02
Flink问题解决及
性能调优
-【Flink rocksDB读写state大对象导致背压问题调优】
RocksDB是Flink中用于持久化状态的默认后端,它提供了高性能和可靠的状态存储。然而,当处理大型状态并频繁读写时,可能会导致背压问题,因为RocksDB需要从磁盘读取和写入数据,而这可能成为瓶颈。遇到的问题Flink开发中遇到读写state大对象的问题,FlinkwebUI火焰图表现如下:从图上看,瓶颈卡在序列化与反序列化,结合业务逻辑代码,业务涉及state大对象的读写,并且是ValueS
PONY LEE
·
2024-01-30 07:48
Flink问题解决及性能调优
flink
大数据
云上业务一键
性能调优
,应用程序性能诊断工具 Btune 上线
-01-终于等来了预算,这就把服务迁移到最新的CPU平台上去,这样前端的同事立马就能感受我们带来的速度提升了。可是……这些性能指标怎么回事?不仅没有全面提升,有些反而下降了。不应该这样啊,这可怎么办?花费了几个月时间终于搞定了业务模块的重构,立刻部署升级让业务焕然一新。可是……长尾延迟居然还增加了一倍,说好的业务效果提升呢,到底是哪里出了问题?上面的这些问题,对于开发运维工程师来说一定不陌生,经常
百度智能云技术站
·
2024-01-30 06:30
运维
性能优化
服务器
云计算
JVM
性能调优
一、前言
性能调优
,顾名思义,就是对系统或软件的性能进行优化,以提高其运行效率和响应速度。在计算机科学中,
性能调优
通常涉及到硬件、操作系统、数据库、网络等多个方面。
大梦谁先觉i
·
2024-01-30 04:10
其他
JVM
jvm
JVM 调优指南
JVM调优指南Java虚拟机(JVM)的
性能调优
是保证Java应用程序高效运行的关键。通过合理的调优,可以提高程序的性能、降低延迟,以及更好地利用硬件资源。
hymua
·
2024-01-29 23:17
jvm
Oracle
性能调优
——查看执行计划
在对oracle查询进行优化的时候,我们可以通过查看SQL语句的解释计划,从而找到SQL查询缓慢的原因以及对应的优化方法。具体来说,查看SQL的解释计划,有三种方式:explainplanfor命令、PL/SQLDeveloper、OracleSQLDeveloper。其中,explainplanfor命令可以通过sqlplus执行,OracleSQLDeveloper在安装数据库的时候应该已经安
土土豆进
·
2024-01-29 17:12
doris
安装文档翻译-标准部署(Standard deployment)
文档地址:对应1.2版本Standarddeployment-ApacheDorisThistopicisaboutthehardwareandsoftwareenvironmentneededtodeployDoris,therecommendeddeploymentmode,clusterscaling,andcommonproblemsoccurincreatingandrunningclu
zxfBdd
·
2024-01-29 06:11
大数据
doris
BAT面试需要什么样的程序员?阿里七年经验面试官现身说法;
一、
性能调优
几乎每个JAVA后端开发程序员,都会在面试时碰到诸如如何
性能调优
的问题,如何回答好这个问题,不
风平浪静如码
·
2024-01-29 05:16
1.
doris
简介
doris
概述ApacheDoris是现代化的MPP(MassivelyParallelProcessing大规模并行处理)框架分析性数据库,有效支持实时数据分析,分布式架构简单,易于维护,支持10PB
夹毛局的程序员
·
2024-01-28 16:28
doris
大数据
2.
doris
数据类型与分区
用户创建与授权--创建用户createuser'test'identifiedby'test';--创建数据库createdatabasetest_db;--授权用户grantallontest_dbtotest;建表语法CREATE[EXTERNAL]TABLE[IFNOTEXISTS][database.]table_name(column_definition1[,column_defini
夹毛局的程序员
·
2024-01-28 16:28
doris
大数据
3.
doris
Rollup与索引
RollupROLLUP在多维分析中是“上卷”的意思,即将数据按某种指定的粒度进行进一步聚合基本概念在
Doris
中,我们将用户通过建表语句创建出来的表称为Base表(BaseTable)。
夹毛局的程序员
·
2024-01-28 16:28
doris
doris
4.
Doris
数据导入导出
导入
Doris
支持多种数据源导入如S3HDFSKafka本地文件Binlog等官方文档导入的原子性保证
Doris
的每一个导入作业,不论是使用BrokerLoad进行批量导入,还是使用INSERT语句进行单条导入
夹毛局的程序员
·
2024-01-28 16:27
doris
doris
Doris
系列12-数据导入之Broker Load
名词解释:Frontend(FE):
Doris
系统的元数据和调度节点。在导入流程中主要负责导入plan生
只是甲
·
2024-01-28 15:29
netty
性能调优
netty
性能调优
文件句柄一个tcp连接占用一个文件句柄,可调大服务器文件句柄限制,让netty服务端处理更多连接************进程文件句柄查看句柄限制:ulimit-u#centosroot
o_瓜田李下_o
·
2024-01-28 11:56
netty
netty
前传04 | Netty
性能调优
前传04|Netty
性能调优
一、操作系统参数调试01文件描述符1)最大文件句柄数2)单进程打开的最大句柄数ulimit-n3)并发接入的TCP连接数02TCP/IP相关参数03多网卡队列和软中断二、Netty
天罚神
·
2024-01-28 11:26
netty4
java
nio
netty
性能调优
转载自STEPHEN的博客调优思路关于netty的学习和介绍,可以去github看官方文档,这里良心推荐《netty实战》和《netty权威指南》两本书,前者对于新手更友好,原理和应用都有讲到,多读读会发现很多高性能的优化点。netty高性能优化点最近参加了阿里中间价性能比赛,为了提升netty写的servivemesh的网络通信的性能,最近几天查了书、博客(这里强力推荐netty作者的博客,干货
tinysakurac
·
2024-01-28 11:54
netty
一波三折:一次CPU使用率过高故障分析SQL优化解决过程
关注我们获得更多内容作者|罗贵林:云和恩墨技术工程师,具有8年以上的Oracle数据库工作经验,曾任职于大型的国家电信、省级财政、省级公安的维护,
性能调优
等。
数据和云
·
2024-01-28 08:15
Doris
数据库误删除恢复
如果不小心误删除了表,
doris
提供了恢复机制,但时间间隔不能超过一天,记得要迅速首先查看当前能恢复的记录有那些可以通过SHOWCATALOGRECYCLEBIN来查询当前可恢复的元信息,也可以在语句后面加
jinqianwang
·
2024-01-28 05:47
数据库
Doris
借助arthas
性能调优
全过程
使用arthas的trace命令分析方法耗时瓶颈:可以看出bindReloadZoneTimeLimite耗时最久,通过分析Bind底层,将业务粒度进行拆分,加入并发执行再次使用arthas追踪单个方法耗时时间:核心耗时方法,速度优化将近4倍,总方法耗时优化1.5倍
CodingPeppa
·
2024-01-28 04:44
性能优化
JVM-G1
性能调优
思路与实战
现在大多数公司的Java生产版本都是再JDK8,所以本次
性能调优
主要针对G1来展开GC的主要回收区域就是年轻代(younggen)、老年代(tenuredgen)、持久区(permgen),在jdk8之后
菠萝-琪琪
·
2024-01-27 21:53
后端技术
应用服务器技术
文档类
G1
性能调优
G1
性能调优实战
G1
性能调优分析
JVM性能调优
JVM系列之故障排查与
性能调优
(重点)
1、故障排查与
性能调优
1.1、概述1.1.1、生产环境中的问题?生产环境发生了OOM,该如何处理?如何判断是否是内存泄漏导致的?生产环境应该给Java进程分配多少内存?生产环境应该如何选择垃圾收集器?
后端技术那点事
·
2024-01-27 21:52
面试系列
JVM系列
jvm
java
开发语言
JVM
性能调优
详解(值得收藏)
JVM
性能调优
详解前面我们学习了整个JVM系列,最终目标的不仅仅是了解JVM的基础知识,也是为了进行JVM
性能调优
做准备。这篇文章带领大家学习JVM
性能调优
的知识。
java领域
·
2024-01-27 21:20
运维
linux
服务器
spring
java
JVM系列-9.
性能调优
JVM原理如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成2023计划中:源码溯源,一探究竟联系方式:nhs19990716,加我进群,大家一起学习,一起进步,一起对抗互联网寒冬文章目录
性能调优
性能调优
解决的问题性能调
爱吃芝士的土豆倪
·
2024-01-27 21:19
JVM
jvm
java
开发语言
Apache
Doris
的Rollup和前缀索引
目录1.Aggregate表(Uniq表同理)添加rollup2.Duplicate表添加rollup3.key和前缀索引的关系、查询命中前缀索引的规则3.1key和前缀索引的关系3.2查询命中前缀索引的规则1.Aggregate表(Uniq表同理)添加rollup添加rollupmysql>mysql>altertabletable1addrolluprollup_city(name,city_
Bulut0907
·
2024-01-27 17:09
#
Apache
Doris
Apache
Doris
Rollup
前缀索引
MPP数据库
Aggregate
多场景下 3-11 倍性能提升,Apache
Doris
1.2 新版本性能公开
自ApacheDoris1.1.0版本发布距今已经有数月之久,在这一期间,我们重新思考并确立了社区新版本发布的流程,正式引入了LTS(Long-TermSupport,长周期支持)版本的概念,在1.1.x系列版本中不再引入大的功能Feature、仅提供问题修复和稳定性改进,力求满足更多社区用户在稳定性方面的高要求。值得高兴的是,这一行动已经有了明显的成效,目前1.1.x系列最新版本的稳定性经受了众
SelectDB技术团队
·
2024-01-27 17:36
apache
java
数据库
大数据
c++
文本检索性能提升 40 倍,Apache
Doris
倒排索引深度解读
在OLAP领域,ApacheDoris已成为高性能、高并发以及高时效性的代名词。在面向海量数据的复杂查询需求时,除硬件配置、集群规模、网络带宽等因素外,提升性能的核心在于如何最大程度地降低SQL执行时的CPU、内存和IO开销,而这其中数据库索引扮演着至关重要的角色。合理的索引结构设计可以跳过大量不必要的底层数据读取、快速检索定位到所需数据,并进一步提升后续计算的执行效率、降低查询SQL的运行时间和
SelectDB技术团队
·
2024-01-27 17:35
大数据
数据库
elasticsearch
数据分析
doris
性能测试准备方案
性能测试目的
性能调优
开发人员对系统调优后,需要测试人员配合去做性能测试,验证这次优化是否有效果。如果性能指标相比较之前的性能指标更好了,说明系统优化的有效果。
美团程序员
·
2024-01-27 17:57
软件测试
自动化测试
技术分享
功能测试
测试用例
开发语言
(lvs)高性能Linux服务器构建实战:运维监控、
性能调优
与集群应用
LVS三种模式:NAT,TUN,DR调度算法:rrwrrlcwlclblclblcrdhshLVS查看哪些IP连接过来:ipvsadm-LncLVS+keepalivedLVS+heartbeatLVS+piranha
SkTj
·
2024-01-27 15:19
Doris
表格数据信息查看
1.查看当前数据库下所有表的信息SHOWTABLESTATUS;2.查看当前数据库表名包含test的数据表信息SHOWTABLESTATUSLIKE“%test%”;
荣~博客
·
2024-01-27 14:25
mysql
doris
Java 自带的
性能调优
神器!!你还没用过吗?
VisualVM是Netbeans的profile子项目,已在JDK6.0update7中自带,能够监控线程,内存情况,查看方法的CPU时间和内存中的对象,已被GC的对象,反向查看分配的堆栈(如100个String对象分别由哪几个对象分配出来的)。在JDK_HOME/bin(默认是C:\ProgramFiles\Java\jdk1.6.0_13\bin)目录下面,有一个jvisualvm.exe文
就要学Java
·
2024-01-27 12:55
java
jvm
开发语言
性能优化
数据库
Flink问题解决及
性能调优
-【Flink根据不同场景状态后端使用调优】
Flink实时groupby聚合场景操作时,由于使用的是rocksdb状态后端,发现CPU的高负载卡在rocksdb的读写上,导致上游算子背压特别大。通过调优使用hashmap状态后端代替rocksdb状态后端,使吞吐量有了质的飞跃(20倍的性能提升),并分析整理。实例代码--SETtable.exec.state.ttl=86400s;--24hour,默认:0msSETtable.exec.s
PONY LEE
·
2024-01-27 08:21
Flink问题解决及性能调优
flink
大数据
Doris
与 Clickhouse 对比(一)
1.常用引擎☕️
Doris
表数据模型duplicatekey场景:适用于数据无需提前聚合的分析业务。⚠️注意点:只指定排序列,相同的行并不会合并。uniquekey场景:适用于有更新需求的业务。
大数据左右手
·
2024-01-27 08:14
Doris
Doris
clickhouse
Doris
Load方式
导入(Load)功能就是将用户的原始数据导入到
Doris
中。导入成功后,用户即可通过Mysql客户端查询数据。
Doris
支持多种导入方式。
贾斯汀玛尔斯
·
2024-01-27 02:53
hadoop
Doris
Doris
Doris
--基础--3.4--SQL--表的基本概念
Doris
–基础–3.4–SQL–表的基本概念1、基本概念在
Doris
中,数据都以表(Table)的形式进行逻辑上的描述。
勤径苦舟
·
2024-01-27 02:53
Doris
sql
数据库
大数据
Apache
Doris
数据模型介绍
ApacheDoris代码仓库地址:apache/incubator-
doris
欢迎大家关注加星本文档主要从逻辑层面描述
Doris
的数据模型以帮助用户更好的使用
Doris
应对不同的业务场景。
hf200012
·
2024-01-27 02:53
Doris
apache
数据库
database
Doris
基本概念介绍
文章目录简介使用数据模型aggregate模型Unique模型Duplicate模式数据划分PartitionBucket创建库、表简介ApacheDoris是一个基于MPP架构的高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景基于此,ApacheDoris能够较好的满足报表分析、
坚持是一种态度
·
2024-01-27 02:50
大数据开发
学习
笔记
doris
索引是越多越好吗?
理解索引的适当使用和潜在的代价是数据库设计和
性能调优
的关键部分。以下是索引数量的权衡:索引的优势:提高查询速度:索引可以显著提高数据检索的速度,尤其是在大型数据集上。
来自宇宙的曹先生
·
2024-01-26 18:03
数据库
索引
Doris
系列3-基础使用指南
基础使用指南
Doris
采用MySQL协议进行通信,用户可通过MySQLclient或者MySQLJDBC连接到
Doris
集群。
只是甲
·
2024-01-26 17:11
Apache
Doris
ODBC Mysql外表在Ubuntu下使用方法及配置
今天是2021年最后一天,提前祝大家元旦快乐,这也是2021年最后一篇文章,后续会给大家带来更多关于
Doris
的文章,同时也希望
Doris
2022年起飞,顺利从Apache孵化器毕业成顶级项目,给大家带来更快
张家锋
·
2024-01-26 09:23
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他