cdh调优

JVM性能调优参数详解 JVM启动参数详解 进阶月薪5w之路

JVM启动参数JVM启动参数-Xmx4096m设置JVM最大可用内存为4096m。-Xms4096m设置JVM促使内存为4096m。此值可以设置与-Xmx相同，以避免每次垃圾回收完成后JVM重新分配内存。-Xmn2048m设置年轻代大小为2048M。整个堆大小=年轻代大小+年老代大小+持久代大小。持久代一般固定大小为64m，所以增大年轻代后，将会减小年老代大小。此值对系统性能影响较大，Sun官方推
冰忆往昔·2023-11-06 01:22

JVM启动参数详解（含调优）

java启动参数共分为三类；其一是标准参数（-），所有的JVM实现都必须实现这些参数的功能，而且向后兼容；其二是非标准参数（-X），默认jvm实现这些参数的功能，但是并不保证所有jvm实现都满足，且不保证向后兼容；其三是非Stable参数（-XX），此类参数各个jvm实现会有所不同，将来可能会随时取消，需要慎重使用；本文主要描述标准参数部分，剩下的两个部分将会陆续推出；标准参数列表如下：-clie
a18721415176·2023-11-06 01:51

Brendan Gregg 加入 Intel

译者序金庸笔下的《鹿鼎记》有：平生不识陈近南，便称英雄也枉然现代的认真搞技术的后端程序员，应该也有一句：平生不识BrendanGregg，便呆BAT也SoSo从2016年开始，做一个JVM调优开始，就关注
MarkZhu·2023-11-06 00:59

Java开发揭秘！mysql数字转字符串函数

如果任务很多，线程池的阻塞队列会撑爆内存的哪个区域3.栈在堆上吗4.GCroot有哪些5.实例变量可以是GCroot吗6.了解哪些GC算法，介绍一下7.给个场景，问怎么设置JVM参数8.问了很多SQL调优
字节跳动Java面试题·2023-11-05 22:13

面试汇总--高级(草稿)

参考1参考2调优手段有哪些：设计阶段调优，写入调优，查询调优，其他调优elasticsearch的倒排索引是什么？说一下es的索引原理？怎么根据一个词找到对应倒排索引？
PioneerOneLi·2023-11-05 22:23

RabbitMQ——内存调优（二）

在上一篇文章中简单介绍了erlang运行时系统中内存分配的相关概念。那么在消息堆积的场景中，对这些参数调整，是怎样影响整体性能的呢？要分析这个问题，首先我们得估算下在队列消息堆积的情况下进行生产消费，RabbitMQ的内存占用情况。这里补充说明下我们的使用方式：首先所有消息都是持久化的，队列也是持久化的，防止服务端意外宕机导致消息的丢失；其次全局设置了lazy属性，为了防止某些程序异常不消费出现的
陈猿解码·2023-11-05 16:44

Instruction Tuning for Large Language Models_ A Survey

指令调优是指通过使用(INSTRUCTION,OUTPUT)数据对大型语言模型进行有监督的进一步训练，以实现模型在遵循人类指令方面与其下一个单词预测目标之间的衔接。
藏星万朵·2023-11-05 14:07

【ChatOCR】OCR+LLM定制化关键信息抽取（附开源大语言模型汇总整理）

目录背景技术方案存在的问题及解决思路关键信息提取结果其他解决方案替换文心一言LangChain大型多模态模型（LargeMultimodalModel,LMM）开源大模型汇总LLaMA——Meta大语言模型StanfordAlpaca——指令调优的
liuz_notes·2023-11-05 14:04

作为研发不会进行服务调优 & 评估服务性能 ？作为测试搞不定性能测试？你需要这样一匹 “悍马“ —— wrk

文章目录背景Wrk介绍前期环境检查最大文件数打开进程限制压力测试实操GETPOST性能数据衡量Q&A附录背景  在服务模块开发完成进行交付时，总会有些数据需要提供，比如服务最大负载QPS、P99如何等等…  这些数据哪来的呢？一般都是QA同学进行模块压测，通过模拟上线负载，得到具体的服务性能数据。  作为一名开发，如何独立对自己的服务做简单的性能评估呢？  不急，这里介绍一款性能测试工具——Wrk
魏小言·2023-11-05 12:01

Java应用调优实战-工具支持

哪些资源，容易成为瓶颈当系统存在短板时，就会对性能造成较大的负面影响，比如当CPU的负载特别高时，任务就会排队，不能及时执行。而其中，CPU、内存、I/O这三个系统组件，又往往容易成为瓶颈，所以接下来我会对这三方面分别进行讲解。CPU首先介绍计算机中最重要的计算组件中央处理器CPU，围绕CPU一般我们可以：通过top命令，来观测CPU的性能；通过负载，评估CPU任务执行的排队情况；通过vmstat
gonghaiyu·2023-11-05 12:29

Android 绘制性能优化

接下来就可以正式的性能调优了。第一个学习的就是绘制优化，因为绘制和界面流畅度有关，这个优化的效果是最直观的。
RikkaTheWorld·2023-11-05 07:28

CDH命令行部署Spark History Server

翻译：https://www.cloudera.com/documentation/enterprise/latest/topics/admin_spark_history_server.html#spark_history_server_cmdline版本：5.14.2Spark历史记录服务器显示有关完成的Spark应用程序的历史记录的信息有关更多信息，请参阅监控Spark应用程序。有关配置Sp
金刚_30bf·2023-11-05 05:54

tomcat7配置https安全访问

其实就是解压一下，然后上传一下代码，“真简单”（相对我这种小白），调优啥的也不会，还是慢慢来。
Name_kongkong·2023-11-05 04:37

【大数据】搭建Hadoop集群，超级详细

目录搭建完全分布式运行模式（开发重点）1.1Hadoop部署1.2配置集群1.3配置历史服务器1.4配置日志的聚集1.5分发Hadoop1.6群起集群1.7Hadoop群起脚本第2章调优2.2.1项目经验之
小 源·2023-11-05 00:29

JVM实践（三）JVM调优案例

JVM实践（三）JVM调优案例大部分的JVM调优，目的是降低GC次数，减少GC时间（STW耗时占大部分）。从原因分析上FULLGC频率高。
七八月的天空·2023-11-04 22:52

JVM调优 内存调优实践

JVM内存调优-实践测试一、测试案例二、测试过程1.10并发线程/50000请求量结果（吞吐量：531平均响应时间：17）2.20并发线程/50000请求量结果（吞吐量：566平均响应时间：39）3.40
Colins~·2023-11-04 22:49

Phoenix编译支持cdh5.10.2

前言由于Phoenix还没有发布支持cdh5.10以上的版本，这里在在4.9-HBase-1.2-cdh5.9的基础上修改cdh版本为cdh5.10.2，我这边分别编译了Phoenix支持cdh5.9.3
荒野雄兵·2023-11-04 19:25

谷粒商城笔记+踩坑（11）——性能压测和调优，JMeter压力测试+jvisualvm监控性能+资源动静分离+修改堆内存

导航：谷粒商城笔记+踩坑汇总篇目录1.JMeter压力测试1.1压力测试的性能指标1.2JMeter安装1.3JMeter中文配置1.4JMeter压测示例1.4.1添加线程组1.4.2添加HTTP请求1.4.3添加监听器1.4.4启动压测1.4.5查看分析结果1.5错误解决JMeterAddressAlreadyinuse，Windows端口访问机制2.性能监控2.1回顾jvm内存模型2.2回顾
程序员小海绵【vincewm】·2023-11-04 18:40

数据仓库Hive安装部署与测试练习

环境说明10.176.2.101(10.176.2.121)master10.176.2.103zjx0310.176.2.105zjx05cent-os6.5zookeepercdh3.4.5hadoopapache2.7.7jdk1.8.191mysql5.17sqoop1.4.7hbase1.2.7hiveapache2.3.4
zwb_jianshu·2023-11-04 15:21

该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系

项目场景：通过CDH集群对大数据集群实行监控管理问题描述：某台服务器主机与ClouderaManagerServer失去联系的时间过长，到时候该主机相关实例角色（组件实例）停止，严重影响集群稳定性以及任务执行
海边捡贝壳的老头·2023-11-04 15:18

【CDH】该主机与 Cloudera Manager Server 失去联系的时间过长。该主机未与 Host Monitor 建立联系。

clouderamanager运维【出现问题】：该主机与ClouderaManagerServer失去联系的时间过长。该主机未与HostMonitor建立联系。【解决办法】问题节点上的代理Agent未启动，即servicecloudera-scm-agentstatus显示active(running)未启动，执行：servicecloudera-scm-agentstart，解决。
暖暖_Christine·2023-11-04 15:18

cdh监控mysql_clouderaManager出现HostMonitor异常,监控无法展示

我在把错误信息帖下，大家看下2015-04-0702:09:59,453WARN929083949@scm-web-73:com.cloudera.server.cmf.tsquery.TimeSeriesQueryService:com.cloudera.server.cmf.tsquery.TimeSeriesQueryService@3c01063afailedonnozzleHOST_MO
聂家麒·2023-11-04 15:16

CentOS7+CDH5.14.0安装CDH错误排查：该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系...

主机错误：该主机与ClouderaManagerServer失去联系的时间过长。该主机未与HostMonitor建立联系解决办法：首先查看该主机NTP服务是否启动：https://www.cnblogs.com/sisimi/p/7698452.html如果已经启动，请查看客户端服务是否启动：/opt/cm-5.14.0/etc/init.d/cloudera-scm-agentstart启动之后
weixin_34146410·2023-11-04 15:16

CDH6：该主机已与 Cloudera Manager Server 建立联系。 该主机未与 Host Monitor 建立联系

问题导致原因：CDH6修改了hive会话超时参数hive.server2.session.check.interval5分钟改为2分钟hive.server2.idle.session.timeout5
killwolf0·2023-11-04 15:16

代理与cloudera Management Service 的host monitor 未建立连接。

cdh中由于其中一台从节点的应用更改导致代理与clouderaManagementService的hostmonitor未建立连接。
赤子juan·2023-11-04 15:15

CDH问题：该主机已与 Cloudera Manager Server 建立联系。 该主机未与 Host Monitor 建立联系。

active的2.查看agent的日志：tail-f/var/log/cloudera-scm-agent/cloudera-scm-agent.log我这边原因为ntp时间同步服务出了问题,ntp服务恢复后CDH
lishengping_max·2023-11-04 15:44

【大数据】Hadoop （一） 入门

课程链接：尚硅谷大数据Hadoop3.x（入门搭建+安装调优）_哔哩哔哩_bilibili(Hadoop到底是干什么用的？
一个平凡de人·2023-11-04 11:27

Impala 入门

是CDH平台首选的PB级大数据实时查询分析引擎。1.2Impala的优缺点1.2.1优点基于内存运算，不需要把中间结果写入磁盘，省掉了大量的I/O开销无需转换为MR，直接访问存储在HDFS，HBas
djm猿·2023-11-04 09:26

windows下火狐浏览器中配置kerberos客户端

1.环境1.操作系统：windows2.CDH版本信息:5.16.2-1.cdh5.16.2.p0.83.浏览器：火狐浏览器4.kdc客户端：kfw-4.1-amd642.安装火狐浏览器与kdc2.1火狐浏览器略
脸ル粉嘟嘟·2023-11-04 08:18

CDH/CDP中开启kerberos后如何访问HDFS/YARN/HIVESERVER2 等服务的webui

CDH/CDP中开启kerberos后如何访问HDFS/YARN/HIVESERVER2等服务的webui在CDH/CDP等大数据平台中，当开启kerberos安全后，如何访问HDFS/YARN/HIVESERVER2
明哥的IT随笔·2023-11-04 08:16

0706-6.2.0-Windows Kerberos客户端配置并访问CDH

Fayson的github：https://github.com/fayson/cdhproject推荐关注微信公众号：“Hadoop实操”，ID：gh_c4c535955d0f1文档编写目的在使用CDH
Hadoop_SC·2023-11-04 08:16

CDH大数据安装手册--cdh安装

ClouderaManager安装以下步骤在1号机(host1)上进行。--安装cm自带oracle-j2sdksudoyuminstall-yoracle-j2sdk1.7--安装ClouderaManagersudoyuminstall-ycloudera-manager-daemonscloudera-manager-server--配置ClouderaManager数据库。注意，cm数据库
SmartNewSexy·2023-11-04 02:50

MySQL数据库入门到大牛_00_大纲及适用人群

数据库概述与MySQL安装篇2.SQL之SELECT使用篇3.SQL之DDL、DML、DCL使用篇4.其它数据库对象篇5.MySQL8新特性篇二、MySQL高级特性篇大纲1.MySQL架构篇2.索引及调优篇
十月旧城·2023-11-04 01:05

【协议森林】Linux TCP/IP网络性能调优方法

1.简述TCP全称为TransmissionControlProtocol，每一个IT人士对TCP都有一定了解。TCP协议属于底层协议，对于大部分研发人员来说，这是透明的，无需关心TCP的实现与细节。不过如果想做深入的性能优化，TCP是绕不过去的一环。2.proc参数BDP（Bandwidth-delayproduct，带宽延迟积）数据链路的容量与其端到端延迟的乘积。这个结果就是任意时刻处于在途未
协议森林·2023-11-04 01:33

性能测试学习笔记

性能测试概念性能测试针对系统的性能指标，建立性能测试模型，制定性能测试方案，制定监控策略，在场景条件之下执行性能场景，分析判断性能瓶颈并调优，最终得出性能结果来评估系统的性能指标是否满足既定值。
代码小姐·2023-11-03 23:04

性能测试常用术语

负载对被测系统不断施加压力，直到性能指标超过预期或某项资源使用达到饱和，以验证系统的处理极限，为系统性能调优提供依据；并发①狭义上的并发：所有用户在同一时间点进行同样的操作，一般指同一类型的业务场景，比如
软件测试玲雪·2023-11-03 19:49

python并发编程调优_Python并发编程-线程

Python作为一种解释型语言，由于使用了全局解释锁(GIL)的原因，其代码不能同时在多核CPU上并发的运行。这也导致在Python中使用多线程编程并不能实现并发，我们得使用其他的方法在Python中实现并发编程。一、全局解释锁(GIL)Python中不能通过使用多线程实现并发编程主要是因为全局解释锁的机制，所以首先解释一下全局解释锁的概念。首先，我们知道C++和Java是编译型语言，而Pytho
无fa可说·2023-11-03 19:29

kafka调优

配置参数调优broker配置num.recovery.threads.per.data.dir对于如下3种情况，Kafka会使用可配置的线程池来处理日志片段：服务器正常启动，用于打开每个分区的日志片段；
刘栉风·2023-11-03 18:32

XGBoost调参指南

本文内容结构主要参考CompleteGuidetoParameterTuninginXGBoostwithcodesinPython及其中文翻译XGBoost参数调优完全指南。
井底蛙蛙呱呱呱·2023-11-03 16:34

人工智能大模型技术基础系列之：自动模型搜索与架构优化

因为任何模型都需要大量的参数配置，耗费大量的时间进行训练和调优。因此，如何有效的快速搜集到足够多的深度学习模型，然后对它们进行评估、比较和
禅与计算机程序设计艺术·2023-11-03 15:41

Unity手机游戏性能优化系列：针对CPU端的性能调优

做手机游戏开发的时,经常会遇到手机游戏的性能问题，手机游戏的性能问题可能有很多的方面，今天我们从CPU调优的角度来給大家介绍一下常用的CPU调优的一些经验和手段。
Clank的游戏栈·2023-11-03 14:02

技术分享 | 基于 GTID 的多源复制

作者：马文斌MySQLOCP认证，PostgresSQLPGCA认证，擅长MySQL、PostgreSQL、dble等开源数据库相关产品的备份恢复、读写分离、SQL调优、监控运维、高可用架构设计等。
爱可生开源社区·2023-11-03 12:34

路线_机器学习

3.3.1python3.3.2R3.3.3其他语言3.3.4大数据相关3.3.5操作系统3.4基本工作流程3.4.1抽象成数学问题3.4.2获取数据3.4.3特征预处理与特征选择3.4.4训练模型与调优
榴霖燚炀·2023-11-03 11:36

MySQL 优化思路篇

查看慢查询数目3.3、慢查询日志的分析工具mysqldumpslow3.4、关闭慢查询日志3.5、慢查询日志的删除与重建4、SHOWPROFILE：查看SQL执行成本1、MySQL查询的优化步骤数据库调优流程
STRANG-P·2023-11-03 08:04

windows server 2016调优

1.增加TCP连接的最大数量：在您当前的注册表路径（HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\Tcpip\Parameters）中的右侧窗格，右击空白处，选择“新建”->“DWORD(32位)值”。为新的值命名为TcpNumConnections。双击新创建的TcpNumConnections，在“数值数据”框中设置您想要的最大连接数
ascarl2010·2023-11-03 05:44

【MySQL索引与优化篇】数据库调优策略

数据库调优策略文章目录数据库调优策略1.数据库调优的措施1.1调优目标1.2如何定位调优问题1.3调优的维度和步骤第1步：选择合适的DBMS第2步：优化表设计第3步：优化逻辑查询第4步：优化物理查询第5
比尔高特·2023-11-03 05:22

绝对实用-Docker单节点和跨服务搭建CDH6.3.2集群

前言承蒙朋友的关照，让我在短时间内从零学会安装使用CDH和Docker，并将其融会贯通，完成Docker搭建CDH集群的工作。
secretWHD·2023-11-03 03:08

Oracle 11g的自动统计信息收集

（一）统计信息收集概述在Oracle11g中，默认有3个自动任务，分别是：自动统计信息收集、SQL调优顾问、段空间调整顾问，查看方法如下：SQL>SELECTCLIENT_NAME,TASK_NAME,
科技改变未来·2023-11-03 01:17

Spark性能优化之Java虚拟机垃圾回收调优

一、Java虚拟机垃圾回收调优的背景如果在持久化RDD的时候,持久化了大量数据，那么Java虚拟机的垃圾回收就可能成为一个性能瓶颈。
有一束阳光叫温暖·2023-11-03 00:07

性能测试知多少---性能分析与调优的原理

最近一直纠结性能分析与调优如何下手，先从硬件开始，还是先从代码或数据库。
test卓然·2023-11-03 00:21
上一页 34 35 36 37 38 39 40 41 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他