ulimit调优

Linux服务器内核参数优化

Linux内核参数调优主要是通过修改/proc伪文件系统和/etc/sysctl.conf配置文件的参数来实现的。
Vecloud·2024-01-05 13:19

Spark调优解析-GC调优3（七）

1GC调优Spark立足内存计算，常常需要在内存中存放大量数据，因此也更依赖JVM的垃圾回收机制。
有语忆语·2024-01-05 12:54

Spark调优解析-spark数据倾斜优化2（七）

如果数据倾斜没有解决，完全没有可能进行性能调优，其他所有的调
有语忆语·2024-01-05 12:53

Spark调优解析-sparkshuffle和程序开发优化2(七)

1Shuffle调优1.1调优概述大多数Spark作业的性能主要就是消耗在了shuffle环节，因为该环节包含了大量的磁盘IO、序列化、网络数据传输等操作。
有语忆语·2024-01-05 12:49

【jvm调优】使用JConsole工具

如何使用JConsole来查看垃圾回收器的信息？JConsole是一个内置的Java性能分析器，安装Java时自带，默认位置为C:\ProgramFiles\Java\jdk1.8.0_152\bin。使用JConsole来查看垃圾回收器的信息的步骤如下：选择你本地正在运行的JVM应用。切换到VM概要标签页面，即可查看当前使用的垃圾回收器。如何使用JConsole？JConsole是Java开发工
锅巴编程·2024-01-05 12:43

【JVM】内存模型（调参调优、GC、对象池、内存泄漏）

jvm内存模型JVM内存模型是Java虚拟机规范中定义的一种内存模型，用于规范Java程序在不同线程之间的共享内存访问行为。在JVM内存模型中，将内存分为主内存和工作内存。主内存是所有线程共享的内存区域，包括Java堆、方法区等。而工作内存则是每个线程私有的内存区域，用于存储线程执行过程中的局部变量、临时变量等。在Java程序中，当一个线程执行时，它会将主内存中的共享变量拷贝一份到自己的工作内存中
锅巴编程·2024-01-05 12:12

【积微成著】性能测试调优实战与探索（存储模型优化+调用链路分析）| 京东物流技术团队

以上，在性能测试的场景决策，架构分析、流量分析、压测实施和剖解调优等主要环节中，引发对于系统能力底盘夯实和测试策略改进的诸多思考。
京东云技术团队·2024-01-05 11:11

Spark内核解析-内存管理7(六)

理解Spark内存管理的基本原理，有助于更好地开发Spark应用程序和进行性能调优。本文中阐述的原理基于Spark2.1版本。
有语忆语·2024-01-05 10:36

Spark调优解析-spark调优基本原则1（七）

1调优基本原则1.1基本概念和原则首先，要搞清楚Spark的几个基本概念和原则，否则系统的性能调优无从谈起：每一台host上面可以并行N个worker，每一个worker下面可以并行M个executor
有语忆语·2024-01-05 10:36

XGBoost参数调优完全指南（附Python代码）

1.简介如果你的预测模型表现得有些不尽如人意，那就用XGBoost吧。XGBoost算法现在已经成为很多数据工程师的重要武器。它是一种十分精致的算法，可以处理各种不规则的数据。构造一个使用XGBoost的模型十分简单。但是，提高这个模型的表现就有些困难(至少我觉得十分纠结)。这个算法使用了好几个参数。所以为了提高模型的表现，参数的调整十分必要。在解决实际问题的时候，有些问题是很难回答的——你需要调
婉妃·2024-01-05 06:16

计算机视觉入门与调优

大家好啊，我是董董灿。在CSDN上写文章写了有一段时间了，期间不少小伙伴私信我，咨询如何自学入门AI，或者咨询一些AI算法。90%的问题我都回复了，但有时确实因为太忙，没顾得过来。在这个过程中，我发现很多小伙伴问的问题都类似：比如如何入门计算机视觉，某某算法是做什么的，有什么作用。之前写的文章由于过于分散，不成体系，很多知识点没有串联起来。于是我做了个合集，计划系统的从传统计算机视觉，到基于深度学
董董灿是个攻城狮·2024-01-05 05:19

浅谈web性能测试

性能测试，简而言之就是模仿用户对一个系统进行大批量的操作，得出系统各项性能指标和性能瓶颈，并从中发现存在的问题，通过多方协助调优的过程。
测试界的路飞·2024-01-05 04:18

「美团面试系列」面试加分项，这样说你会JVM，面试官还能问什么

Java性能调优都是老生常谈的问题，特别当“糙快猛”的开发模式大行其道时，随着系统访问量的增加、代码的臃肿，各种性能问题便会层出不穷。
java架构师联盟·2024-01-05 03:27

Nginx(十八) 性能调优之 - 哪些层面可以进行优化

Nginx三大优势，动静分离、反向代理、负载均衡1、线程worker2、http/tcptcp_nopushtcp_nodelay3、Buffer调整请求体缓存区大小、将请求体缓存到一个缓冲区，降低CPU负载4、连接队列5、超时时间6、静态文件缓存open_file_cache7、gzip压缩gzip配合gzip_static一起使用。代理服务时，注意设置gzip_http_version版本为1
Eisen戴·2024-01-05 03:36

Navicat 技术干货 | 如何查看关系型数据库（MySQL、PostgreSQL、SQL Server、 Oracle）查询的运行时间

无论你是数据库管理员、开发人员或是参与性能调优的人员，知道如何查看查询运行时间能为你的数据库操作提供有价值的参考。
Navicat中国·2024-01-05 00:32

单测结果不稳定的终极解决方案(Maven单测参数调优)

一、前言近期，在公司平台执行单测任务时，我发现到一个显著的问题：我们的一个应用，在公司平台上执行单测时，即使是相同的代码，每次的执行结果（包括行覆盖率以及单测通过率）都存在差异。更具体地说，许多在本地环境中能够成功执行的测试用例，在公司平台上却遭遇了失败。为了解决这个问题，我进行了广泛的信息搜索，咨询了ChatGPT，并尝试了多种可能的解决方案。经过不懈的努力，我终于找到了问题的根源并成功解决了它
程序员Daddy·2024-01-04 22:23

未来智安XDR入选《CCSIP 2022中国网络安全产业全景图》

相较于《CCSIP2021中国网络安全产业全景图》（第三版），该版本对原有展示的87个细分安全领域进行调优，新增XDR、MSS、SASE、OTP等7个细分领域，最终展示94个细分安全领域，收录862家安全厂商
XDRSEC·2024-01-04 21:40

我的2023年度回顾

对arrow的改动算是非常多，涉及到batch的计算、流模型acero的算子新增与重写、单元测试的bug修复、plan性能调优、算子调优、计算调优等等。从arrow项目中剥离出了一
guangcheng0312q·2024-01-04 20:17

性能测试之Mysql数据库调优

一、前言性能调优前提：无监控不调优，对于mysql性能的监控前几天有文章提到过，有兴趣的朋友可以去看一下二、Mysql性能指标及问题分析和定位1、我们在监控图表中关注的性能指标大概有这么几个：CPU、内存
测试小贝·2024-01-04 18:09

文章解读与仿真程序复现思路——电网技术EI\CSCD\北大核心《计及源荷不确定性的综合能源系统日前-日内协调优化调度》

具体已有的论文与论文源程序可翻阅本博主的专栏栏目《论文与完整程序》这个标题指的是一个综合能源系统（包括多种能源资源和负荷需求），在考虑到源（能源供给）和荷（能源需求）的不确定性的情况下，进行日前和日内的协调优化调度
电网论文源程序·2024-01-04 07:11

50 个 Redis 必备知识总结

本文包括：30个Redis基础知识；10个Redis架构和运维必懂的知识；Redis调优、监控知识和10个具体应用难点。30个Redis基础知识1、Redis支持哪几种数据类型？
一棵树～·2024-01-04 00:22

增量预训练经验积累（2）

1、并行策略选择1.1并行方式验证和调优这个和集群很相关例如我目前在16台A800集群（每台机器8张80G显卡）上测的最佳3D并行策略的具体partition配置就和L40s集群不一样（和集群有关，和具体的模型也有关
GUANYX~·2024-01-03 22:24

JVM常用参数配置

jvm实际可配参数已经有1000多个了，其中GC和内存配置就多达600多个，你可以看出JVM问题排查和性能调优重点领域还是GC和内存。
程序无涯海·2024-01-03 21:08

一文说清Elasticsearch的核心概念

核心概念集群（Cluster）分片（Shards）副本（Replicas）映射（Mapping）ES的基本使用安装使用集群健康状态ES机制原理写索引原理存储原理性能优化存储设备内部索引优化调整配置参数JVM调优本文小结概述本篇主要是做一个总结
wh柒八九·2024-01-03 16:51

单机Nginx性能优化

静态文件的缓存优化了网页加载，超时机制会让Client与Server的响应不会长时间阻塞，GZIP压缩提升IO效率、减少我们发送的数据量，限流来预防DOS攻击，TCP参数调优提升传输效率。
JacksonY·2024-01-03 15:52

linux参数调优

查看文件句柄数ulimit-a临时修改文件句柄数（退出shell将重置）ulimit-n65535永久修改文件句柄数使用root账号vi/etc/security/limits.conf末尾新增以下内容
芸尚非·2024-01-03 13:44

MicroPython性能调优

MicroPython开发高性能代码一般遵循以下阶段：设计时就要考虑性能优化代码及性能调试性能调优的步骤：确定代码中最慢的部分提高Python代码执行效率使用本机代码发射器使用viper代码发射器针对硬件进行优化在设计时就考虑性能问题性能问题应该一开始就应该考虑
原子星·2024-01-03 09:14

进程空间--堆栈大小

1.Linux中进程空间的分配情况如下：2.进程的堆栈大小：（1）栈大小：32位Windows，一个进程栈的默认大小是1M，在vs的编译属性可以修改程序运行时进程的栈大小linux下：ulimit-s查看并修改默认栈空间大小
yinhaijing_ss·2024-01-03 09:01

聊一下JVM调优

闲聊一下：这个JVM相信大家都了解过但是很少用这个东西但是面试一些高级架构师又是必问的一些问题之前一直不了解这个东西感觉就是面试造火箭实际拧螺丝用于筛选人才毕业这么多年也是很少接触这些就大学的时候学过简单了解过一些底层，找工作面试倒是背过一些相关的甲骨文。项目背景：先简单说一下写这个的原因，我目前做的这个项目有一个备份还原的功能，备份就是把整个数据库备份一下还原就是执行一下这个sql文件，其实这个
Owen_Number_One·2024-01-03 08:10

独一无二的「MySQL调优金字塔」相信也许你拥有了它，你就很可能拥有了全世界。

开发俏皮话【让我996不算啥，我只怕测试也996给我提bug！】技术金字塔本篇文章会按照自上而下以及自下而上的两种方向去“游览”【MySQL技术金字塔】，两个方向分别是从成本出发的（潜台词就是便宜越好，照顾公司成本哦！），本章内容，可能有点多，希望大家慢慢消化，实在不行来片“吗丁啉”，哈哈，开玩笑了！技术梗概主要技术分布为6大部分，如下图金子图所示：image研发成本角度从软件的【研发成本】的角度
洛神灬殇·2024-01-03 06:25

JVM的垃圾回收机制详解和调优

JVM的垃圾回收机制详解和调优1.JVM的gc概述gc即垃圾收集机制是指jvm用于释放那些不再使用的对象所占用的内存。java语言并不要求jvm有gc，也没有规定gc如何工作。
裘马轻狂大帅·2024-01-03 03:20

Spark源码——Shuffle过程

shuffle很重要，调优的重点、性能的杀手未优化的shuffle：(图片来源：北风网）未优化的shuffle有两个特点：spark早期版本中，shuffleMapTask将所有数据写入bucket缓存后
阿松0311·2024-01-03 02:59

Shuffle Read Time调优

先看第一张Spark任务执行时间轴的图：红色部分是任务反序列化时间，黄色部分是shuffleread时间，绿色是实际计算任务执行时间，这里我们先不讨论任务反序列化时间长，下一篇文章说任务反序列化时间长怎么解决1、首先shufflereadtime是什么？shuffle发生在宽依赖，如repartition、groupBy、reduceByKey等宽依赖算子操作中，在这些操作中会对Dataset数据
初心江湖路·2024-01-03 02:59

JVM老年代内存优化

参考：老年代持续增长，无法触发mixedgc的解决方案_java老年代一直增长-CSDN博客java老年代越来越大jvm老年代爆满_mob64ca13f63f2c的技术博客_51CTO博客【JVM调优】
jey_4·2024-01-03 00:51

Linux Page Cache调优在Kafka中的应用

本文首发于vivo互联网技术微信公众号链接：https://mp.weixin.qq.com/s/MaeXn-kmgLUah78brglFkg作者：YangYijun本文主要描述LinuxPageCache优化的背景、PageCache的基本概念、列举之前针对Kafka的IO性能瓶颈采取的一些解决方案、如何进行PageCache相关参数调整以及性能优化前后效果对比。一、优化背景当业务快速增长，每天
vivo互联网技术·2024-01-02 22:05

11-交叉验证与网格搜索对k-近邻算法调优

交叉验证目的：为了让被评估的模型更加准确可信数据分类训练集和测试集，再将训练集分为训练和验证集。eg：将数据分成5份，其中一份作为验证集。然后经过5次(组)的测试（每次换一组作为验证集，将之前的验证当作之后的一个训练集），每次都更换不同的验证集。即得到5组模型的结果，取平均值作为最终结果。又称5折交叉验证。从而，所有数据都即作为过训练集，也作为过验证集。交叉验证一般是和网格搜索一起使用的网格搜索也
jxvl假装·2024-01-02 21:33

地震去噪新探索（二）——无监督卷积神经网络调优实战

01屡败屡战的调优之旅卷积神经网络不是更能学习到特征细节，性能更好吗？为啥我做出来
科技州与数据州·2024-01-02 19:12

Docker 实践之旅：项目迁移与高效部署

迁移关键服务5.2定制化打包与快速部署6项目实践收获6.1简化了部署流程6.2节约了部署成本7克服难点和经验分享7.1版本兼容性问题7.2网络配置与通信问题7.3Dockerfile编写难题7.4资源限制和性能调优
cooldream2009·2024-01-02 19:10

【JVM】一文掌握JVM垃圾回收机制

JVM调优是一个听起来很可怕，实际上很简单的事。
Henry游戏开发·2024-01-02 18:48

JVM调优之探索CMS和G1的物理内存归还机制

前言：公司有一个资产统计系统，使用频率很低，但是要求在使用时查询速度快，因此想到做一些缓存放在内存中，在长时间没有使用，就持久化到磁盘中，并对垃圾进行回收，归还物理内存给操作系统，从而节省宝贵资源给其它业务系统。当我做好缓存时，却发现了一个棘手的问题，通过程序释放资源并通知GC回收资源后，堆内存的已用内存减少了，空闲内存增加了，可是进程占用系统内存却没有减少。查阅了很多资料，也尝试过很多次，都没有
熊峰的博客·2024-01-02 17:57

每日一诗

流过乱石时水声喧腾，而流经松林时却没有声息与松林相映色调优美。水波荡漾，浮着菱角和荇菜，清澈的溪水侧映着芦苇。我的心一向闲静，就像这淡泊的溪水
迷路她·2024-01-02 13:42

跟着腾讯T4学架构：微服务+MySQL+Nginx+Redis+容器化+虚拟机

第1章走近Java第2章Java内存区域与内存溢出异常第3章垃圾收集器与内存分配策略第4章虚拟机性能监控与故障处理工具第5章调优案例分析与实战第6章类文件结构第7章虚拟机类加载机制第8章虚拟机字节码执行引擎第
写代码的珏秒秒·2024-01-02 13:33

腾讯 CSIG 社招 2023 一年工作经验 Java转GO（一、二）面

（线程池优化，批处理优化、设计模式优化、性能测试、压力测试、GC优化）线程池怎么调优的？线程池如何分配线程？如果有50000数据需要批处理，你是怎么分配线程的？
鬼客·2024-01-02 13:56

show engine innodb status解读

它输出就是一个单独的字符串，没有行和列，内容分为很多小段，每一段对应innodb存储引擎不同部分的信息，其中有一些信息对于innodb开发者来说非常有用，但是，许多信息，如果你尝试去理解，并且应用到高性能innodb调优的时候
果冉多·2024-01-02 13:11

深入浅出内存管理：空间分配及逃逸分析

1.引言内存管理，是开发者在程序编写和调优的过程中不可绕开的话题，也是走向资深程序员必须要了解的计算机知识。
xin猿意码·2024-01-02 06:46

性能测试总结-Jmeter代码使用

时间计划，人力投入等3.测试数据准备，测试账号（预估并发量），设计测试脚本（参数化，表达式，断言，控制器）4.运行测试脚本，数据监听（响应时间，tps，活动线程），结果分析（判断性能瓶颈）5：基本性能瓶颈做调优
落落521520·2024-01-01 23:54

『互联网架构』软件架构-解密电商系统-秒杀消息队列异步下单（79）

原文链接地址：『互联网架构』软件架构-解密电商系统-秒杀消息队列异步下单（79）上几次主要说了高并发大流量项目所涉及到的技术点和技术方案，调优需要注意的一些参数，秒杀订单接口缓存的概念，通过redis的方式
IT人故事会·2024-01-01 22:38

Linux内核--进程管理(一)进程的概念控制单元

目录一、引言二、进程描述符------>2.1、进程家族树------>2.2、进程的状态------>2.3、僵尸进程、孤儿进程------>2.4、停止状态与作业控制，cpulimit------>
文艺小少年·2024-01-01 18:22

Docker容器中配置和启用Java Flight Recorder（JFR）

1.简介和背景在Java应用程序性能调优中，JavaFlightRecorder（JFR）是一个非常强大的工具。它能够实时收集Java应用程序的运行数据，提供有关性能问题的深入见解。
ivwdcwso·2024-01-01 16:42

京东空调优惠券在哪领？京东优惠券平台哪个好？京东超市优惠券哪里领？

京东空调优惠券在哪领？京东优惠券平台哪个好？京东超市优惠券哪里领？京东官方优惠券返利:京东官方优惠券返利，京东内部优惠券如今，越来越多的人选择通过互联网购物。
柚子导师·2024-01-01 08:11
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他