hadoop配置调优

《MySQL管理之道：性能调优、高可用与监控》迷你书

《MySQL管理之道：性能调优、高可用与监控》迷你书51CTO技术博客之星、资深MySQL技术专家多年工作经验结晶，指导MySQLDBA进阶修炼的最佳实践之作。
拟声的主扬·2023-11-06 05:13

MySQL进阶之性能优化与调优技巧

数据库开发-MySQL1.多表查询1.1概述1.1.2介绍1.1.3分类1.2内连接1.3外连接1.4子查询1.4.1介绍1.4.2标量子查询1.4.3列子查询1.4.4行子查询1.4.5表子查询2.事务2.1介绍2.2操作2.3四大特性3.索引3.1介绍3.2结构3.3语法1.多表查询1.1概述1.1.2介绍多表查询：查询时从多张表中获取所需数据单表查询的SQL语句：select字段列表from
失重外太空.·2023-11-06 05:12

高并发场景下的数据库事务调优

数据库事务是访问可能操作各种数据项的一个数据库操作序列，这些操作要么全部成功，要么全部失败。提起事务，大家都知道ACID属性，这些特性在前边的文章里都有详细的讲解，感兴趣的可以通过历史文章查看。在Java中有并发编程，可以多线程并发执行，并发可以提高程序执行的效率，也会带来线程安全的。数据库事务和多线程一样，为了提高数据库处理事务的吞吐量，数据库也支持并发事务，在并发处理数据的过程中，也存在着安全
故里学Java·2023-11-06 04:30

[2023.07.09]dreamfusion概述及背景，以及diffusion model相关知识

而使用用2d的扩散模型构造一个类似概率密度蒸馏的损失函数，用于调优2d图像生成器的参数。
FridaNN·2023-11-06 02:50

JVM参数详解

各个版本中可能会变动-Xint  解释执行-Xcomp 第一次使用就编译成本地代码-Xmixed 混合模式，JVM自己来决定##1.3-XX参数使用得最多的参数类型，非标准化参数，相对不稳定，主要用于JVM调优和
La victoria·2023-11-06 01:59

史上最全的JVM配置参数大全

1、JVM参数配置我们学习JavaGC机制的目的是为了实用，也就是为了在JVM出现问题时分析原因并解决之，JVM监控与调优主要的着眼点在于如何配置、如何监控、如何优化3点上。
平平无奇小菜鸟。·2023-11-06 01:53

JVM性能调优参数详解 JVM启动参数详解 进阶月薪5w之路

JVM启动参数JVM启动参数-Xmx4096m设置JVM最大可用内存为4096m。-Xms4096m设置JVM促使内存为4096m。此值可以设置与-Xmx相同，以避免每次垃圾回收完成后JVM重新分配内存。-Xmn2048m设置年轻代大小为2048M。整个堆大小=年轻代大小+年老代大小+持久代大小。持久代一般固定大小为64m，所以增大年轻代后，将会减小年老代大小。此值对系统性能影响较大，Sun官方推
冰忆往昔·2023-11-06 01:22

JVM启动参数详解（含调优）

java启动参数共分为三类；其一是标准参数（-），所有的JVM实现都必须实现这些参数的功能，而且向后兼容；其二是非标准参数（-X），默认jvm实现这些参数的功能，但是并不保证所有jvm实现都满足，且不保证向后兼容；其三是非Stable参数（-XX），此类参数各个jvm实现会有所不同，将来可能会随时取消，需要慎重使用；本文主要描述标准参数部分，剩下的两个部分将会陆续推出；标准参数列表如下：-clie
a18721415176·2023-11-06 01:51

Brendan Gregg 加入 Intel

译者序金庸笔下的《鹿鼎记》有：平生不识陈近南，便称英雄也枉然现代的认真搞技术的后端程序员，应该也有一句：平生不识BrendanGregg，便呆BAT也SoSo从2016年开始，做一个JVM调优开始，就关注
MarkZhu·2023-11-06 00:59

Iceberg数据湖的Table、Catalog、Hadoop配置Configuration

目录1.Configuration1.1tableproperties1.1.1Readproperties1.1.2Writeproperties1.1.3Tablebehaviorproperties1.1.4Reservedtableproperties1.1.4Compatibilityflags1.2Catalogproperties1.2.1Lockcatalogproperties1
Bulut0907·2023-11-05 23:52

Centos8中Hadoop3.3.1安装详细过程（含图文）

hadoop用户二、安装SSH、配置SSH无密码登录三、卸载jdk环境四、安装新的java版本五、安装Hadoop3六、配置hadoop环境变量七、Hadoop伪分布式配置1、Hadoop环境变量设置2、Hadoop
wat-999·2023-11-05 23:17

Java开发揭秘！mysql数字转字符串函数

如果任务很多，线程池的阻塞队列会撑爆内存的哪个区域3.栈在堆上吗4.GCroot有哪些5.实例变量可以是GCroot吗6.了解哪些GC算法，介绍一下7.给个场景，问怎么设置JVM参数8.问了很多SQL调优
字节跳动Java面试题·2023-11-05 22:13

面试汇总--高级(草稿)

参考1参考2调优手段有哪些：设计阶段调优，写入调优，查询调优，其他调优elasticsearch的倒排索引是什么？说一下es的索引原理？怎么根据一个词找到对应倒排索引？
PioneerOneLi·2023-11-05 22:23

RabbitMQ——内存调优（二）

在上一篇文章中简单介绍了erlang运行时系统中内存分配的相关概念。那么在消息堆积的场景中，对这些参数调整，是怎样影响整体性能的呢？要分析这个问题，首先我们得估算下在队列消息堆积的情况下进行生产消费，RabbitMQ的内存占用情况。这里补充说明下我们的使用方式：首先所有消息都是持久化的，队列也是持久化的，防止服务端意外宕机导致消息的丢失；其次全局设置了lazy属性，为了防止某些程序异常不消费出现的
陈猿解码·2023-11-05 16:44

Instruction Tuning for Large Language Models_ A Survey

指令调优是指通过使用(INSTRUCTION,OUTPUT)数据对大型语言模型进行有监督的进一步训练，以实现模型在遵循人类指令方面与其下一个单词预测目标之间的衔接。
藏星万朵·2023-11-05 14:07

【ChatOCR】OCR+LLM定制化关键信息抽取（附开源大语言模型汇总整理）

目录背景技术方案存在的问题及解决思路关键信息提取结果其他解决方案替换文心一言LangChain大型多模态模型（LargeMultimodalModel,LMM）开源大模型汇总LLaMA——Meta大语言模型StanfordAlpaca——指令调优的
liuz_notes·2023-11-05 14:04

作为研发不会进行服务调优 & 评估服务性能 ？作为测试搞不定性能测试？你需要这样一匹 “悍马“ —— wrk

文章目录背景Wrk介绍前期环境检查最大文件数打开进程限制压力测试实操GETPOST性能数据衡量Q&A附录背景  在服务模块开发完成进行交付时，总会有些数据需要提供，比如服务最大负载QPS、P99如何等等…  这些数据哪来的呢？一般都是QA同学进行模块压测，通过模拟上线负载，得到具体的服务性能数据。  作为一名开发，如何独立对自己的服务做简单的性能评估呢？  不急，这里介绍一款性能测试工具——Wrk
魏小言·2023-11-05 12:01

Java应用调优实战-工具支持

哪些资源，容易成为瓶颈当系统存在短板时，就会对性能造成较大的负面影响，比如当CPU的负载特别高时，任务就会排队，不能及时执行。而其中，CPU、内存、I/O这三个系统组件，又往往容易成为瓶颈，所以接下来我会对这三方面分别进行讲解。CPU首先介绍计算机中最重要的计算组件中央处理器CPU，围绕CPU一般我们可以：通过top命令，来观测CPU的性能；通过负载，评估CPU任务执行的排队情况；通过vmstat
gonghaiyu·2023-11-05 12:29

Android 绘制性能优化

接下来就可以正式的性能调优了。第一个学习的就是绘制优化，因为绘制和界面流畅度有关，这个优化的效果是最直观的。
RikkaTheWorld·2023-11-05 07:28

tomcat7配置https安全访问

其实就是解压一下，然后上传一下代码，“真简单”（相对我这种小白），调优啥的也不会，还是慢慢来。
Name_kongkong·2023-11-05 04:37

【大数据】搭建Hadoop集群，超级详细

目录搭建完全分布式运行模式（开发重点）1.1Hadoop部署1.2配置集群1.3配置历史服务器1.4配置日志的聚集1.5分发Hadoop1.6群起集群1.7Hadoop群起脚本第2章调优2.2.1项目经验之
小 源·2023-11-05 00:29

JVM实践（三）JVM调优案例

JVM实践（三）JVM调优案例大部分的JVM调优，目的是降低GC次数，减少GC时间（STW耗时占大部分）。从原因分析上FULLGC频率高。
七八月的天空·2023-11-04 22:52

JVM调优 内存调优实践

JVM内存调优-实践测试一、测试案例二、测试过程1.10并发线程/50000请求量结果（吞吐量：531平均响应时间：17）2.20并发线程/50000请求量结果（吞吐量：566平均响应时间：39）3.40
Colins~·2023-11-04 22:49

谷粒商城笔记+踩坑（11）——性能压测和调优，JMeter压力测试+jvisualvm监控性能+资源动静分离+修改堆内存

导航：谷粒商城笔记+踩坑汇总篇目录1.JMeter压力测试1.1压力测试的性能指标1.2JMeter安装1.3JMeter中文配置1.4JMeter压测示例1.4.1添加线程组1.4.2添加HTTP请求1.4.3添加监听器1.4.4启动压测1.4.5查看分析结果1.5错误解决JMeterAddressAlreadyinuse，Windows端口访问机制2.性能监控2.1回顾jvm内存模型2.2回顾
程序员小海绵【vincewm】·2023-11-04 18:40

【大数据】Hadoop （一） 入门

课程链接：尚硅谷大数据Hadoop3.x（入门搭建+安装调优）_哔哩哔哩_bilibili(Hadoop到底是干什么用的？
一个平凡de人·2023-11-04 11:27

hadoop配置文件自检查(解决常见报错问题,超级详细！)

本篇文章主要的内容就是检查配置文件，还有一些常见的报错问题解决方法，希望能够帮助到大家。一、以下是大家可能会遇到的常见问题：1.是否遗漏了前置准备的相关操作配置？2.是否遗的将文件夹(Hadoop安装文件夹，/data数据文件夹)chown授权到hadoop用户这个操作3.是否遗忘了格式化hadoop这一步(hadoopnamenode-format)4.是否是以root用户格式化hadoop5.
syst1m'·2023-11-04 11:55

MySQL数据库入门到大牛_00_大纲及适用人群

数据库概述与MySQL安装篇2.SQL之SELECT使用篇3.SQL之DDL、DML、DCL使用篇4.其它数据库对象篇5.MySQL8新特性篇二、MySQL高级特性篇大纲1.MySQL架构篇2.索引及调优篇
十月旧城·2023-11-04 01:05

【协议森林】Linux TCP/IP网络性能调优方法

1.简述TCP全称为TransmissionControlProtocol，每一个IT人士对TCP都有一定了解。TCP协议属于底层协议，对于大部分研发人员来说，这是透明的，无需关心TCP的实现与细节。不过如果想做深入的性能优化，TCP是绕不过去的一环。2.proc参数BDP（Bandwidth-delayproduct，带宽延迟积）数据链路的容量与其端到端延迟的乘积。这个结果就是任意时刻处于在途未
协议森林·2023-11-04 01:33

性能测试学习笔记

性能测试概念性能测试针对系统的性能指标，建立性能测试模型，制定性能测试方案，制定监控策略，在场景条件之下执行性能场景，分析判断性能瓶颈并调优，最终得出性能结果来评估系统的性能指标是否满足既定值。
代码小姐·2023-11-03 23:04

性能测试常用术语

负载对被测系统不断施加压力，直到性能指标超过预期或某项资源使用达到饱和，以验证系统的处理极限，为系统性能调优提供依据；并发①狭义上的并发：所有用户在同一时间点进行同样的操作，一般指同一类型的业务场景，比如
软件测试玲雪·2023-11-03 19:49

python并发编程调优_Python并发编程-线程

Python作为一种解释型语言，由于使用了全局解释锁(GIL)的原因，其代码不能同时在多核CPU上并发的运行。这也导致在Python中使用多线程编程并不能实现并发，我们得使用其他的方法在Python中实现并发编程。一、全局解释锁(GIL)Python中不能通过使用多线程实现并发编程主要是因为全局解释锁的机制，所以首先解释一下全局解释锁的概念。首先，我们知道C++和Java是编译型语言，而Pytho
无fa可说·2023-11-03 19:29

kafka调优

配置参数调优broker配置num.recovery.threads.per.data.dir对于如下3种情况，Kafka会使用可配置的线程池来处理日志片段：服务器正常启动，用于打开每个分区的日志片段；
刘栉风·2023-11-03 18:32

XGBoost调参指南

本文内容结构主要参考CompleteGuidetoParameterTuninginXGBoostwithcodesinPython及其中文翻译XGBoost参数调优完全指南。
井底蛙蛙呱呱呱·2023-11-03 16:34

人工智能大模型技术基础系列之：自动模型搜索与架构优化

因为任何模型都需要大量的参数配置，耗费大量的时间进行训练和调优。因此，如何有效的快速搜集到足够多的深度学习模型，然后对它们进行评估、比较和
禅与计算机程序设计艺术·2023-11-03 15:41

Unity手机游戏性能优化系列：针对CPU端的性能调优

做手机游戏开发的时,经常会遇到手机游戏的性能问题，手机游戏的性能问题可能有很多的方面，今天我们从CPU调优的角度来給大家介绍一下常用的CPU调优的一些经验和手段。
Clank的游戏栈·2023-11-03 14:02

技术分享 | 基于 GTID 的多源复制

作者：马文斌MySQLOCP认证，PostgresSQLPGCA认证，擅长MySQL、PostgreSQL、dble等开源数据库相关产品的备份恢复、读写分离、SQL调优、监控运维、高可用架构设计等。
爱可生开源社区·2023-11-03 12:34

路线_机器学习

3.3.1python3.3.2R3.3.3其他语言3.3.4大数据相关3.3.5操作系统3.4基本工作流程3.4.1抽象成数学问题3.4.2获取数据3.4.3特征预处理与特征选择3.4.4训练模型与调优
榴霖燚炀·2023-11-03 11:36

MySQL 优化思路篇

查看慢查询数目3.3、慢查询日志的分析工具mysqldumpslow3.4、关闭慢查询日志3.5、慢查询日志的删除与重建4、SHOWPROFILE：查看SQL执行成本1、MySQL查询的优化步骤数据库调优流程
STRANG-P·2023-11-03 08:04

windows server 2016调优

1.增加TCP连接的最大数量：在您当前的注册表路径（HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcpip\Parameters）中的右侧窗格，右击空白处，选择“新建”->“DWORD(32位)值”。为新的值命名为TcpNumConnections。双击新创建的TcpNumConnections，在“数值数据”框中设置您想要的最大连接数
ascarl2010·2023-11-03 05:44

【MySQL索引与优化篇】数据库调优策略

数据库调优策略文章目录数据库调优策略1.数据库调优的措施1.1调优目标1.2如何定位调优问题1.3调优的维度和步骤第1步：选择合适的DBMS第2步：优化表设计第3步：优化逻辑查询第4步：优化物理查询第5
比尔高特·2023-11-03 05:22

Oracle 11g的自动统计信息收集

（一）统计信息收集概述在Oracle11g中，默认有3个自动任务，分别是：自动统计信息收集、SQL调优顾问、段空间调整顾问，查看方法如下：SQL>SELECTCLIENT_NAME,TASK_NAME,
科技改变未来·2023-11-03 01:17

Spark性能优化之Java虚拟机垃圾回收调优

一、Java虚拟机垃圾回收调优的背景如果在持久化RDD的时候,持久化了大量数据，那么Java虚拟机的垃圾回收就可能成为一个性能瓶颈。
有一束阳光叫温暖·2023-11-03 00:07

性能测试知多少---性能分析与调优的原理

最近一直纠结性能分析与调优如何下手，先从硬件开始，还是先从代码或数据库。
test卓然·2023-11-03 00:21

牛皮！阿里P8大佬终于整理完了564页大话java性能优化神仙文档，看到就是赚到

系统调优在软件的后续改进和重构中占有很大
Java领域指导者·2023-11-02 21:27

linux运维好书《高性能Linux服务器构建实战Ⅱ》已出版发售，附封面照！

《高性能Linux服务器构建实战Ⅱ----系统安全、故障排查、自动化运维与集群架构》仍然沿用了《高性能Linux服务器构建实战---运维监控、性能调优、集群应用》的写作特点：实战、实用、通俗、易懂的特点
weixin_30367873·2023-11-02 12:16

《高性能Linux服务器构建实战Ⅱ》已出版发售，附封面照！

《高性能Linux服务器构建实战Ⅱ----系统安全、故障排查、自动化运维与集群架构》仍然沿用了《高性能Linux服务器构建实战---运维监控、性能调优、集群应用》的写作特点：实战、实用、通俗、易懂的特点
choujia2758·2023-11-02 12:13

Linux运维好书《高性能Linux服务器构建实战Ⅱ》已出版发售，附封面照！

《高性能Linux服务器构建实战Ⅱ----系统安全、故障排查、自动化运维与集群架构》仍然沿用了《高性能Linux服务器构建实战---运维监控、性能调优、集群应用》的写作特点：实战、实用、通俗、易懂的特点
exitgogo·2023-11-02 12:13

全方位解析-Android中的线程池

笔记文章，没有废话，句句关键线程池的优点重用线程池里的线程，避免创建和销毁线程所带来的性能开销有效控制最大并发数，避免造成线程间抢占系统资源而造成阻塞提高线程可管理性，可以统一进行分配，调优和监控的能力
g小志·2023-11-02 10:10

移动端市容巡查AI目标检测计划

高通骁龙8gen3开发环境AndroidStudio+kotlin+java+python...TensorFlow&模型训练训练环境搭建与升级12种归类图片训练数据采集与筛选数据标注和检测模型训练与调优
曾经的你呀·2023-11-02 10:28

解决nginx: [emerg] the “ssl“ parameter requires ngx_http_ssl_module in /usr/local/nginx的问题

/nginx的问题Nginx如果未开启SSL模块，配置Https时提示错误Nginx开启SSL模块Nginx配置Http和Https共存Nginx配置SSL安全证书重启避免输入密码NginxSSL性能调优
徊忆羽菲·2023-11-02 10:49
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他