hadoop配置调优

【面试题精讲】为什么G1收集器不需要调优性能也很优秀

相比于其他垃圾回收器，G1收集器具有很多优点，使得它在性能和调优方面表现出色。
·2023-09-18 23:10

【面试题精讲】为什么G1收集器不需要调优性能也很优秀

相比于其他垃圾回收器，G1收集器具有很多优点，使得它在性能和调优方面表现出色。
·2023-09-18 23:33

Java手写线段树和线段树应用拓展案例

代码表示的线段树实现原理的思维导图：线段树构建线段树更新节点查询区间递归构建迭代构建递归更新迭代更新递归查询迭代查询2.手写必要性和市场调查手写线段树的必要性在于深入理解线段树的原理和实现细节，以便更好地应用和调优
全栈项目讲解·2023-09-18 22:37

JavaGC调优(1)——GC算法和垃圾回收

本章简要介绍GC的算法和垃圾回收器,下一章节再详细讲解GC算法的实现目录一、简介1.1、标记可达对象(MarkingReachableObjects)1.2、垃圾的定位（Marking）1.3、GC垃圾清除算法1.4、三色标记法二、GC的回收2.1、JVMGC怎么判断对象可以被回收了？2.2、按代的垃圾回收机制2.3、JVMGC什么时候执行？三、JVM的垃圾收集器3.1、Serial（-XX:+U
学Java学到痴呆·2023-09-18 21:00

Java ZGC 算法调优

ZGC是一种专门的垃圾收集器，专注于管理大型堆并最大限度地减少Java应用程序中的暂停。它解决了内存密集型工作负载和一致的响应时间至关重要的场景中垃圾收集的挑战。利用并发处理能力和先进算法，ZGC为优化Java应用程序的性能提供了有效的解决方案。在这篇文章中，我们将探索调整ZGC来提高性能的技术。ZGC调整参数ZGC是Java中的垃圾收集器，它采用不同的方法通过最小化公开的JVM参数的数量来进行调
一个处女座的程序媛·2023-09-18 21:29

hbase 集群搭建

下载/解压hbase1.3、修改配置文件1.3.1、hbase-env.sh1.3.2、hbase-site.xml1.3.3、regionservers1.3.4、backup-masters1.4、hadoop
.道不虚行·2023-09-18 18:10

第6章 MapReduce应用开发-管理配置

1、多环境配置切换开发时，如果需要经常在本地运行与集群运行间切换，可以编写多个hadoop配置文件，每个文件包含每个环境的连接设置，运行时指定使用哪一个配置文件，可以把这些文件集中放置在安装目录树之外。
主君_05c4·2023-09-18 16:48

Python爬虫深度优化：Scrapy库的高级使用和调优

在我们前面的文章中，我们探索了如何使用Scrapy库创建一个基础的爬虫，了解了如何使用选择器和Item提取数据，以及如何使用Pipelines处理数据。在本篇高级教程中，我们将深入探讨如何优化和调整Scrapy爬虫的性能，以及如何处理更复杂的抓取任务，如登录，处理Cookies和会话，以及避免爬虫被网站识别和封锁。一、并发和延迟Scrapy使用异步网络库Twisted来处理网络通信，可以实现高并发
·2023-09-18 15:20

双喜临门 | 开源网安SFuzz在谷歌FuzzBench中夺魁，并获得CWE国际认证

近日，开源网安模糊测试平台SFuzz于上半年推出的“灰盒代码模糊测试系统”，经过数月的不断调优，在谷歌的FuzzBench基准测试中脱颖而出，荣登榜首。
开源网安·2023-09-18 15:00

Oracle 11g和12c的主要区别

3.性能：Oracle12c引入了许多新的性能优化功能，如自动调优、自动存储管理、自动内存管理等，提高了数据库的性能。4.管理：O
小小鱼儿小小林·2023-09-18 12:02

mysql innodb_thread_concurrency_mysql 参数调优（12）之innodb_thread_concurrency、innodb_concurrency_tickets .

设置这个参数在mysql低负载时没有效果，建议在mysql非常繁忙时可以关注并配置你可能会经常听到应该设置innodb_thread_concurrency=0(表示不进行并发线程数量控制)然后就不要管它了。不过这个只在低负载服务器使用时才正确。然后，如果你的服务器的CPU或者IO使用接受饱和，特别是偶尔出现峰值，这时候系统想在超载时能正常处理查询，那么强烈建议关注innodb_thread_co
埃斯蓬托的篡位者·2023-09-18 12:53

五大优化技巧，让你的视频直播app源码更加流畅

优化技巧一：性能调优视频直播app源码在确保流畅体验方面是至关重要的。为了提升性能，以下是几项关键的优化技巧：使用轻量级编码器和解码器：选择高效的编码器和解码器，以减少资源占用，并确保视频流畅播放。
chenie0562·2023-09-18 12:26

JVM内存泄漏分析的demo

本文参考：JVM调优参数、方法、工具以及案例总结JVM监控和调优常用命令工具总结-Pickle-博客园(cnblogs.com)面试官问我JVM调优，我忍不住了！
蒋大钊！·2023-09-18 11:08

UNIFIED VISION AND LANGUAGE PROMPT LEARNING

github.com/yuhangzang/UPT目录摘要1.简介2.方法2.1PRELIMINARIES（回顾之前的方法）2.2Analysis(分析)2.3UnifiedPromptTuning(统一提示调优
zzzz~08·2023-09-18 10:21

Tomcat的调优

主要有三方面，分为系统优化，Tomcat本身的优化，Java虚拟机（JVM）调优。占用内存两份会映射在物理内存。
全栈小运维·2023-09-18 09:39

Kakfa - Producer机制原理与调优

在实际工作中，怎么调优来实现高效性？简单的生产者程序：一、客户端初始化KafkaProducernewKafkaProducer()是Producer初始化过程，比如Inte
Survivor001·2023-09-18 08:09

如何选择阿里云服务器配置?云服务器配置选择攻略

目录一：云服务器类型二：操作系统选择三：CPU、内存配置选择四：云服务器ECS规格选择五：系统盘选择六：网络带宽选择七：安全配置八：监控和调优一：云服务器类型
暴富程序员·2023-09-18 03:21

阿里云服务器配置怎么选择？几核几G？带宽系统盘怎么选？

目录一：云服务器类型二：操作系统选择三：CPU、内存配置选择四：云服务器ECS规格选择五：系统盘选择六：网络带宽选择七：安全配置八：监控和调优一：云服务器类型
腮帮子疼·2023-09-18 03:50

小白如何选择阿里云服务器配置？CPU内存带宽系统盘选择

目录一：云服务器类型二：操作系统选择三：CPU、内存配置选择四：云服务器ECS规格选择五：系统盘选择六：网络带宽选择七：安全配置八：监控和调优一：云服务器类型
熵云AI·2023-09-18 03:20

Java面试题及答案整理（ 金九银十最新版，持续更新）

我大概是分成了Java基础、中级、高级，分布式，Spring架构，多线程，网络，MySQL，Redis缓存，JVM相关，调优，设计模式，算法与数据结构，并发，Linux等15个小模块。
进阶的架构师·2023-09-18 00:07

innodb脏页刷新参数调优

Mysqlinnodb是如何刷新脏页的，innodb的策略是尽量使用内存，假设我们给的innodb内存是1g，当一个请求到达mysql时，这时候innodb就会把最久不使用的数据页释放掉，供给新的请求使用，如果这个被释放的页原本就是干净的，直接使用。如果这是一个脏页，就必须把脏页刷新到磁盘，然后才能使用。相关参数：Innodb_io_capacity磁盘的io能力，可以通过fio测试磁盘的iops
蚂蚁爬上桂花树·2023-09-17 23:51

Shell脚本一次性安装JDK&MySql&Hadoop&Hive&Zeepelin&Zookeeper&Hbase&Sqoop

目录前言一、安装前的准备二、shell安装MySQL三、shell安装&配置1.删除重复文件&配置2.解压安装包&重命名&授权3.配置环境变量4.Hadoop配置5.Hive配置6.Zeppelin配置
NightFall丶·2023-09-17 23:13

MySQl高级——索引

MySQL的数据库：（MySQL中创建的数据库）MySQL的配置文件：my-huge.cnf（与服务器调优相关）修改字符集：把mysql的默认字符编码改为utf-8（网上搜教程）M
qq_44684169·2023-09-17 15:11

ES的性能调优技巧

问题导读：1、调优配置文件如何设置？2、系统层面应该如何进行调优？3、从ES使用方式角度如何进行调优？
000X000·2023-09-17 15:41

什么是性能调优？方法有哪些？流程是怎样的？

一、性能调优的含义性能调优通俗来讲就是对计算机硬件、操作系统和应用有相当深入的了解，调节三者之间的关系，实现整个系统（包括硬件、操作系统、应用）的性能最大化，并能不断的满足现有的业务需求。
软件测评闲聊站·2023-09-17 13:08

性能测试知多少---性能分析与调优的原理

最近一直纠结性能分析与调优如何下手，先从硬件开始，还是先从代码或数据库。
软件测试曦曦·2023-09-17 12:02

做一个内心强大的女人

能掌控自己，也能掌控生活，所以不紧不慢，低调优雅。图
大胡子h·2023-09-17 10:39

JVM——3.StringTable字符串常量池

这篇文章我们来讲一下StringTable字符串常量池目录1.引例2.StringTable的特性3.StringTable的位置4.StringTable的垃圾回收、5.StringTable性能调优
L纸鸢·2023-09-17 08:04

微服务技术选型之路

微服务模式的项目从初建到上线部署应用，每一个环节都会涉及到相当多的技术细节（上线后的性能调优更需要）。
符文杰9527·2023-09-17 07:44

高并发调优案例之httpClient

最近我们的应用搞了一次线上大促，导致流量暴增，应用瞬时并发达到了平时几十上百倍，结果出现了一个热点接口大量超时的情况。这里记录下排查过程，以备后查，也希望能给大家一些启发。在排查超时接口的时候，发现了一个很经典的现象，就是超时接口本身只做了转发逻辑，其调用的远程接口，几乎都是瞬间返回的：通过nginx日志和应用日志可以看到，在高并发的时刻，超时接口从接收到请求到返回响应花了7、8秒甚至更长（下图请
SawyerZhou·2023-09-17 05:35

JVM性能调优-二.流程步骤实践

紧接上一回JVM性能调优-一.思路方向目录性能优化的步骤第1步：熟悉业务场景第2步（发现问题）：性能监控第3步（排查问题）：性能分析第4步（解决问题）：性能调优GC日志分析GC日志参数测试GC分类日志结构
Upaaui·2023-09-17 03:58

JDK8垃圾回收调优指南--(6)并行收集器

原文：JavaPlatform,StandardEditionHotSpotVirtualMachineGarbageCollectionTuningGuide--TheParallelCollector。并行收集器（也称为吞吐量收集器），与串行收集器类似都是分代收集器；主要的区别是使用多个线程来加速垃圾回收。使用命令行选项'-XX:+UseParallelGC'启用并行收集器。默认情况下，使用此
行走的soong·2023-09-16 22:32

Hive参数与性能调优-V2.0

但是如果我们只局限于会使用Hive，而不考虑性能问题，就难搭建出一个完美的数仓，所以Hive性能调优是我们大数据从业者必须掌握的技能。本文将给大家讲解Hive性能调优的一些方法及技巧。
000X000·2023-09-16 21:54

性能调优主要方向

性能调优主要方向明确性能瓶颈之后，就需要进行性能调优了，调优主要从图所示的多个方向入手。能优化手段并不一定是独立应用的，在一次优化过程中很可能应用了多种优化技巧。
东方不败之鸭梨的测试笔记·2023-09-16 19:26

性能工程全景图、实施方案、建设目标

性能工程是一个关注系统性能层面的体系，包含测试环境的性能测试、生产环境的性能测试、性能调优、容量规划等多个方面性能工程主要包括如下3个部分❑建设性能测试理论体系和流程规范、链路分析基础知识体系和流程规范
东方不败之鸭梨的测试笔记·2023-09-16 16:53

Microsoft NNI入门

【GiantPandaCV导语】NeuralNetworkIntelligence是一个工具包，可以有效帮助用户设计并调优汲取学习模型的神经网络架构，以及超参数。
*pprp*·2023-09-16 13:51

java中使用ImageIO.write 写入png图片过慢的调优方案。

ImageIO方法的写入文件流方案Filefile=newFile("文件名");URLurl=newURL(file);BufferedImagebufferedImage=ImageIO.read(url);//先把读进来的图片放到一个ByteArrayOutputStream中，以便产生ByteArrayByteArrayOutputStreambyteArrayOut=newByteArr
辉＠_＠·2023-09-16 11:19

Timer定时器多线程执行任务的优化

以下为调优后的代码，软
破御·2023-09-16 09:57

jvm的内存调优

1)堆运行时数据区域，所有类实例和数组的内存均从此处分配。Java虚拟机启动时创建。对象的堆内存由称为垃圾回收器的自动内存管理系统回收。堆由两部分组成:其中eden+fromspace+tospace也叫年轻代(young),oldspace叫旧生代.其中还有S1,S0(在JDK的自带工具输出中会看到),分别指的是Survivorspace,存放每次垃圾回收后存活的对象.OldGeneration
oligaga·2023-09-16 08:51

黑马JVM总结（九）

（1）StringTable_调优1我们知道StringTable底层是一个哈希表，哈希表的性能是跟它的大小相关的，如果哈希表这个桶的个数比较多，元素相对分散，哈希碰撞的几率就会减少，查找的速度较快，反之桶的个数较少
喵俺第一专栏·2023-09-16 08:50

API(八)cosocket常用SDK

'单机版'的中间件都是基于'cosocket'做的二次开发OpenResty的核心和精髓cosocket①coscoket常用的指令个人建议：'初始'的时候可以先'不调整',先使用'默认值',后续再'调优
wzj_110·2023-09-16 08:41

如何利用Python中实现高效的网络爬虫

目录怎么提高爬虫效率代码示例使用合适的库：并发和异步：使用缓存：优化请求频率：错误处理和重试：测试和调优：注意事项在数字化时代，网络爬虫已成为获取和分析数据的重要工具。
小小卡拉眯·2023-09-16 05:33

深入JVM：探索Java虚拟机

双亲委派模型2.1.2OSGI框架2.1.3类加载器分类2.2JVM运行时数据区2.2.1程序计数器2.2.2本地方法栈2.2.3Java虚拟机栈2.2.4堆2.2.5元数据区2.3JVM内存区域的性能调优实践
沐雨风栉·2023-09-16 04:02

JVM内存区域

好处如下：性能优化：我们可以通过JVM调优，选择适当的垃圾回收器和内存分配策略，减少垃圾回收的频率，提高程序执行的效率。避免内存泄露：有助于识别额避免内存泄露问题。
Junfeng Tang·2023-09-16 04:20

MySql超详细分析（InnoDb存储引擎，日志文件，调优，索引，主从复制简单操作等）

MySql分析写在前面：本文主要是自己学习的一个记录，主要还处于理论阶段。如有错误之处，欢迎指出，如侵犯了你的权利，请联系修改或删除。借鉴：https://www.jianshu.com/p/38fa9dc1428dhttps://www.cnblogs.com/wy123/p/8365234.htmlhttps://blog.csdn.·gdj0001/article/details/83510
写代码的小韭菜·2023-09-16 02:46

性能调优

我主要的工作就是风控软件的性能调优，以下是我性能调优分享,
飞天的猪_ba05·2023-09-15 21:46

[NLP]TRL 正式推出，来训练你的首个 RLHF 模型

从监督调优(SupervisedFine-tuningstep,SFT)，到训练奖励模型(RewardModeling)，再到近端策略优化(ProximalPolicyOp
舒克与贝克·2023-09-15 09:38

Docker Volume数据卷

@[TOC]DockerVolume数据卷简介推荐Docker官网数据管理悟尘记电子书-数据持久化存储与性能调优介绍挂载卷的方式-volume与--mount-v或–volume由三个字段组成，以冒号字符
水月情缘雪飞飞·2023-09-15 08:49

Python爬虫深度优化：Scrapy库的高级使用和调优

在我们前面的文章中，我们探索了如何使用Scrapy库创建一个基础的爬虫，了解了如何使用选择器和Item提取数据，以及如何使用Pipelines处理数据。在本篇高级教程中，我们将深入探讨如何优化和调整Scrapy爬虫的性能，以及如何处理更复杂的抓取任务，如登录，处理Cookies和会话，以及避免爬虫被网站识别和封锁。一、并发和延迟Scrapy使用异步网络库Twisted来处理网络通信，可以实现高并发
青春不朽512·2023-09-15 07:14

Hive、Spark SQL任务参数调优回顾

1.下列Hive参数对Spark同样起作用。sethive.exec.dynamic.partition=true：是否允许动态生成分区sethive.exec.dynamic.partition.mode=nonstrict：是否容忍指定分区全部动态生成sethive.exec.max.dynamic.partitions=100;：动态生成的最多分区数2.运行行为setspark.sql.au
lianchaozhao·2023-09-15 07:04
上一页 45 46 47 48 49 50 51 52 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他