cdh调优

阿里云PTS如何使用？

阿里云PTS（PerformanceTestingService）是阿里巴巴提供的一款云端性能测试服务，它帮助企业进行大规模、高并发场景下的系统性能评估和调优。
云服务商呀·2024-01-24 10:12

HBase详细概述

本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据、HBase数据模型、HBase物理存储、HBase系统架构，HBase调优、HBaseShell访问等。
a867901084·2024-01-24 08:49

利用 Mountpoint for Amazon S3 在 Kubernetes 上加速 LLM 的训练

本文通过在EC2g5.2xl实例上完成LLaMA2的调优训练，读者可以利用较少的GPU资源学习复现本
亚马逊云开发者·2024-01-24 06:25

Go每日精选（2019-06-14）- 进阶部分

5.redigo的redis.Pool配置参数调优
凯文不上班·2024-01-24 00:39

mysql5.7性能调优

一千个DBA就有一千种配置方式!大家一定记得不要轻易去看网上，要看只看官网！网上很多博客都是错的，连参数都列错了，5.7很多参数和5.6是完全不一样的。可能你从未看到过这样的一篇集中火力式的把mysql参数列了这么全的文章，很有兴曾参与过超3万并发的18～19年的数轮520、618、双11、双12保卫战。因此这一篇是汇集了最精华和实战的内容把mysql所有的参数列在这边供大家参考。并且以（64cc
周识儒ice·2024-01-23 19:05

Java相关的性能调优方案

本文介绍了在性能测试过程中Java进程消耗CPU过高的问题排查方法、线程死锁问题排查方法和内存泄露的排查方法Java进程消耗CPU过高的问题排查方法CPU利用率过高，查看JVM中线程占用cpu大小的方法ps–Lfppidtop–ppid-H查看高占用的线程并转化为十六进制的方法printf"%x\n"其中x为线程号然后jstack-l16进制的线程号线程死锁问题排查方法死锁定义线程死锁是指由于两个
测试开发Kevin·2024-01-23 19:13

最新| ClickHouse入门、调优、实战一条龙全解秘籍

Clickhouse是一个高性能且开源的数据库管理系统，主要用于在线分析处理(OLAP)业务。它采用列式存储结构，可使用SQL语句实时生成数据分析报告，另外它还支持索引，分布式查询以及近似计算等特性，凭借其优异的表现，ClickHouse在各大互联网公司均有广泛地应用。WhyClickHouse首先我们来看一下OLAP场景下的关键特征。1.大多数数据库访问都是读请求。2.数据总是以批量形式写入数据
小晨说数据·2024-01-23 15:37

JVM调优

何时进行JVM调优Heap内存（老年代）持续上涨达到设置的最大内存值；FullGC次数频繁；GC停顿时间过长（超过1秒）；应用出现OutOfMemory等内存异常；应用中有使用本地缓存且占用大量内存空间
请不要问我是谁·2024-01-23 14:16

Java设计模式-适配器模式（8）

馆长准备了很多学习资料，其中包含java方面，jvm调优，spring/springboot/springcloud，微服务，分布式，前端，js书籍资料，视频资料，以及各类常用软件工具，破解工具等资源。
艾利克斯冰·2024-01-23 12:22

Java设计模式-代理模式（7）

馆长准备了很多学习资料，其中包含java方面，jvm调优，spring/springboot/springcloud，微服务，分布式，前端，js书籍资料，视频资料，以及各类常用软件工具，破解工具等资源。
艾利克斯冰·2024-01-23 12:52

JVM实战篇：GC调优

目录一.GC调优的核心指标1.1吞吐量（Throughput）1.2延迟（Latency）1.3内存使用量二.GC调优的方法2.1监控工具Jstat工具VisualVm插件Prometheus+Grafana2.2
汤姆&Tom·2024-01-23 09:46

你还在 Select * 吗？

有人会说性能调优是数据库管理员（DBA）的事，然而性能调优跟程序员们也有莫大的关系。程序中嵌入的一行行的SQL语句，如果使用了一些优化小技巧，定能达到事半功倍的效果。
良月柒·2024-01-23 07:45

cdh6.3.2的hive配udf

背景大数据平台的租户要使用udf，他们用beeline连接，意味着要通过hs2，但如果有多个hs2，各个hs2之间不能共享，需要先把文件传到hdfs，然后手动在各hs2上createfunction。之后就可以永久使用了，重启hs2也可以调研先查的hive官网https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF#La
zdkdchao·2024-01-23 07:02

头疼！卷积神经网络是什么？CNN结构、训练与优化一文全解

深入分析了背景和重要性、定义与层次介绍、训练与优化，详细分析了其卷积层、激活函数、池化层、归一化层，最后列出其训练与优化的多项关键技术：训练集准备与增强、损失函数、优化器、学习率调整、正则化技巧与模型评估调优
AI小白龙*·2024-01-23 04:48

二刷Java多线程：线程池详解

一、使用线程池的好处降低资源消耗：通过重复利用已创建的线程降低线程创建和销毁造成的消耗提高响应速度：当任务到达时，任务可以不需要等到线程创建就能立即执行提高线程的可管理性：使用线程池可以统一分配、调优和监控二
邋遢的流浪剑客·2024-01-23 02:18

别让你的云端“瘫痪”——教你如何优化云平台性能测试

目录引言目的测试指标系统性能指标资源指标中间件指标数据库指标稳定性指标批量处理指标可扩展性指标可靠性指标性能测试的过程测试计划性能测试项目检测与控制测试分析测试设计测试执行测试完成性能分析性能分析的前提性能分析的流程可能瓶颈点方法调优引言你有没有遇到过这样的情况
锦都不二·2024-01-22 23:59

CDH6.2 集群离线部署

文章目录CDH6.2集群离线部署服务器集群节点角色规划系统环境准备cm-server配置ssh免密码登录认证在cm-server服务器上下载CDH6.2相关的安装包安装nginx做cm本地yumrepo
那些、快乐。·2024-01-22 21:44

大数据平台的硬件规划、网络调优、架构设计、节点规划

1.大数据平台硬件选型要对Hadoop大数据平台进行硬件选型，首先需要了解Hadoop的运行架构以及每个角色的功能。在一个典型的Hadoop架构中，通常有5个角色，分别是NameNode、StandbyNameNode、ResourceManager、NodeManager、DataNode以及外围机。其中NameNode负责协调集群上的数据存储，StandbyNameNode属于NameNode
小枫@码·2024-01-22 17:18

Nginx 实战指南

本实战指南将带你深入了解Nginx的安装、基础配置、高级配置、最佳实践以及性能调优。
ivwdcwso·2024-01-22 15:04

再见23你好24

2.今年把GDB和火焰图的东西写了博客，对调优调试有一点理解。3.汇编级调优没有什么实质上进展，。4.PMP证书考下了。2、期望的事情有的做了一些，但是还不到位。今年知道做什么，就是没有动力。
csdn_dyq111·2024-01-22 10:06

《机器学习》客户流失判断-python实现

实现读取数据并初步了解导入宏包读取数据查看数据类型检查缺失值描述性统计分析可视化分析用户流失分析特征分析任期年数与客户流失的关系：服务类属性分析特征相关性分析数据预处理类别编码转换划分训练数据与测试数据归一化处理模型建立逻辑回归支持向量机（SVM）K近邻（KNN）XGBoost-贝叶斯搜索超参数调优随机森林
汐ya~·2024-01-22 09:44

从严治党，真抓实干，夯实细节，着眼长效

一是立足区位优势、坚持问题导向、创新工作方式、凝聚内生动力，调优产业结构，培育富民产业，坚持把多样化种植产业作为产业结构调整的主攻方向，以专业合作社为龙头，种植马铃薯6.9万亩，种植玉米3900亩，西红柿
Cooo1·2024-01-22 08:42

架构师才需要知道的知识：如何做容量预估和调优

为了构建高并发、高可用的系统架构，压测、容量预估必不可少，在发现系统瓶颈后，需要有针对性地扩容、优化。结合楼主的经验和知识，本文做一个简单的总结，欢迎探讨。1、QPS保障目标一开始就要明确定义QPS保障目标，以此来推算所需的服务、存储资源。可根据历史同期QPS，或者平时峰值的2到3倍估算。压测目标示例：qps达到多少时，服务的负载正常，如平均响应时间、95分位响应时间、cpu使用率、内存使用率、消
Java爱好者·2024-01-22 08:09

【SpringBoot技术专题】「开发实战系列」Undertow web容器的入门实战及调优方案精讲

Undertowweb容器的入门实战及调优方案精讲Undertowweb容器Undertow介绍官网API给出一句话概述Undertow：官网API总结特点：Lightweight（轻量级）HTTPUpgradeSupport
洛神灬殇·2024-01-22 08:50

03-Flink内存模型

.1.1JVM内存管理的不足1.1.1有效数据密度低存储：对象头、实例数据、对齐填充部分导致JVM中有效信息的存储密度很低1.1.2垃圾回收FullGC会严重影响性能以及和集群中的心跳信息超时，使得无法进行调优
情深@骚明·2024-01-22 08:48

Flink TaskManager 内存管理机制介绍与调优总结

作者：董伟柯，腾讯CSIG高级工程师概要Flink的新版内存管理机制，要追溯到2020年初发布的Flink1.10版本。当时Flink社区为了实现三大目标：流和批模式下内存管理的统一，即同一套内存配置既可用于流作业也可用于批作业管控好RocksDB等外部组件的内存，避免在容器环境下用量不受控导致被KILL消除不同部署模式下配置参数的歧义，消除cut-off等参数语义模糊的问题提出了两个设计提案FL
腾讯云大数据·2024-01-22 08:09

二进制部署高可用k8s集群V1.20.11版本

将桥接的IPv4流量传递到iptables的链7、时间同步二、部署Etcd集群1、准备cfssl证书生成工具2、生成Etcd证书2.1、自签etcd证书颁发机构（根CA）2.2、使用自签的CA来签发EtcdHTTPS
不知名运维:·2024-01-22 07:57

innodb status解读

showengineinnodbstatus输出中，显示除了大量的内部信息，它输出就是一个单独的字符串，没有行和列，内容分为很多小段，每一段对应innodb存储引擎不同部分的信息，其中有一些信息对于innodb调优的时候
mysia·2024-01-22 03:47

mysql调优show profile工具

1.showProfile是什么showProfile:是mysql提供用来分析当前回话中语句执行消耗资源的情况，可以用来SQL调优。
喜羊羊love红太狼·2024-01-22 01:06

个性化风控！消费贷客群分群模型应用实践

这三个方面在任何场景的模型中都是至关重要的，无论是针对ABC卡、策略调优、拒绝回捞、动支模型、营销响应模型还是流失模型等等，只要涉及到建模，都需要依赖于这三个模块。
风控小兵突击·2024-01-21 18:02

玩转Mysql 八 （MySQ优化入门篇）

前言：一个高性能，稳定的数据库集群并不是指的某一特性优化，就能保证系统的的稳定，需要从网络、硬件资源、操作系统、操作系统参数设置、数据库选型，执行SQL效率几个方面进行整体调优。
董乐，快乐的乐！·2024-01-21 16:49

XGBoost在时间序列分析中的高级应用

在时间序列问题中的应用场景2.1金融数据预测2.2销售预测2.3能源消耗预测2.4网络流量分析2.5医疗时间序列分析3.实际应用场景3.1一个简单的例子3.2广告领域的demo4.时间序列预测中的XGBoost参数调优
theskylife·2024-01-21 15:51

XGBoost系列3——XGBoost在多分类问题中的应用

1.4多分类问题的应用场景2.XGBoost中的多分类支持2.1分类原理2.2Softmax损失函数2.3One-vs-All与One-vs-One2.4多分类性能优势2.5超参数调优2.6特征重要性分析
theskylife·2024-01-21 15:50

常用监控指标及调优步骤

诊断性能问题，需要清楚监控的关键指标，以此辅助试验诊断，最后验证推测。常用监控的关键指标通常情况下，性能测试监控指标主要分为：资源指标和系统指标。资源指标：CPU使用率：指单位时间内进程使用cpu时间的百分比，这是对一个时间段内CPU使用状况的统计，通过这个指标可以看出在某一个时间段内CPU被占用的情况，如果被占用时间很高，那么就需要考虑CPU是否已经处于超负荷运作，长期超负荷运作对于机器本身来说
HuiTest·2024-01-21 14:30

java进阶-jvm精讲及实战

深入了解jvm及实战1.引言2.jvm概念理解1.引言jvm是深入了解java底层逻辑的必备知识储备,在中大型开发团队里,中高级工程师必须要了解和掌握,也是中高级工程师面试必考题,在实战中用于程序性能调优
蒋增奎·2024-01-21 12:16

100 springboot项目优化和jvm调优

https://blog.csdn.net/huangjinjin520/article/details/103231775项目调优作为一名工程师，项目调优这事，是必须得熟练掌握的事情。
滔滔逐浪·2024-01-21 12:54

【转载】《软件性能测试、分析与调优实践之路》学习

这是一本理论和实践相结合的同时面向研发和测试岗的关于性能分析诊断调优实践的图书，比起其他的很多性能测试的图书，本书中内容更侧重于介绍如何去发现性能问题、分析诊断性能问题以及对发现的性能问题进行调优。
来自火星的我哈哈·2024-01-21 09:51

【Spark分布式内存计算框架——Spark SQL】14. 分布式SQL引擎

语句方式二：启动服务HiveServer2（HiveThriftServer2)将Hive当做一个服务启动(类似MySQL数据库，启动一个服务)，端口为100001)、交互式命令行，bin/beeline，CDH
csdnGuoYuying·2024-01-21 06:38

架构师之路：一个Java架构师需要掌握的知识技能，带思维导图

架构师=前端工程师+后端程序员+系统分析师+关键技术解决+各种技术搭配+设计模式+部署调优+其他，可见架构师是多面手，在项目当中起到连接管理与项目成员的重要角色。
Java黎先生·2024-01-21 06:50

soar-php 2.0 - SQL 语句优化器和重写器的 PHP 扩展包、 方便 SQL 语句调优

soar-php是一个基于小米公司开源的soar开发的PHP扩展包，方便框架中SQL语句调优。
guanguans·2024-01-21 03:51

mysql explain ref const_MySQL EXPLAIN 详解

这条命令并没有提供任何调整建议，但它能够提供重要的信息帮助你做出调优决策。
网件NETGEAR·2024-01-21 02:34

一文了解java多线程(超详细+干货满满)

2.提高响应速度,当任务到达时,任务可以不需要等到线程创建就能立即执行3.提高线程的可管理性,线程是稀缺资源,如果无限制的创建,不仅会消耗系统资源,还会降低系统的稳定性,使用线程池可以进行统一的分配,调优和监控线程池的真正实现类是
GeekInk小火龙·2024-01-20 21:26

Java设计模式详解

谢谢馆长准备了很多学习资料，其中包含java方面，jvm调优
艾利克斯冰·2024-01-20 14:25

Hive性能调优(二)——一文搞懂HiveSQL执行计划

测试的数据请看上一篇博客，数据行数500万。目录一.简单SQL的执行计划二.带普通函数SQL的执行计划三.带聚合函数SQL的执行计划四.带窗口函数SQL的执行计划五.表连接的SQL的执行计划一.简单SQL的执行计划explainselects_age,s_scorefromstudent_tb_seqwheres_age=20;+----------------------------------
程研板·2024-01-20 13:19

强力收藏！一文说全HiveConf类（Hive3.1.2版本）

一文说全HiveConf类（Hive3.1.2版本）作者：Eeeddieee工作中大部分时间都用到了Hive，虽然对Hive的架构、运行原理、调优方式有一定了解，但是很多都是在前人总结的基础上进行学习，
Eeeddieee·2024-01-20 13:17

Hive调优一文打尽

一、调优概述Hive作为大数据领域常用的数据仓库组件，在平时设计和查询时要特别注意效率。
跟着大数据和AI去旅行·2024-01-20 13:16

JVM调优

前言本系列系统的介绍了jvm调优及相关工具的使用。笔者会先介绍jvm的基本概念，然后介绍常用命令、常用工具，最后通过一篇实战讲解内存泄漏查找方法。
Nick_4438·2024-01-20 12:51

CDH禁用Kerberos

禁用Kerberos，由于没有按钮可以直接操作，需要我们手动一个个修改开启了Kerberos的组件的配置。修改步骤按以下来：1.先关闭集群（如果yarn上有任务则等待停止，或手动停止）。2.修改zookeeper的配置enableSecurity取消勾选，EnableKerberosAuthentication取消勾选，在zoo.cfg的Server高级配置代码段（安全阀）写入skipACL:ye
sf_www·2024-01-20 11:23

Linux性能测试与调优的15条常用命令

一、CPU性能评估通过下面的命令能了解到CPU是否出现性能瓶颈，再结合top、ps等命令进一步检查，即可定位到那些进程导致CPU负载过大vmstat命令：查看CPU负载[oracle@oraclebackup]$vmstat23#间隔2s,打印3次procs-----------memory-------------swap-------io------system-------cpu-----r
数据与人·2024-01-20 10:47

JVM调优开启开启ZGC参数

jdk启动脚本#!/bin/bashPATH=${PATH}:/opt/HIEXSORT64/binLD_LIBRARY_PATH=${LD_LIBRARY_PATH}:/opt/HIEXSORT64/libNLSPATH=${NLSPATH}:/opt/HIEXSORT64/%L/%N.catexportPATHLD_LIBRARY_PATHNLSPATHBATCH_ROOT_PATH=$(pw
离离原上草77·2024-01-20 09:17
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他