CDH调优

大数据开发（Hive面试真题-卷二）

5、Hive如果不用参数调优，在map和reduce端应该做什么？6、Hive的三种自定义函数是什么？实现步骤与流程？它们之间的区别？作用是什么？7、Hive分区和分桶的区别？8、Hive的执行流程？
Key-Key·2024-03-20 05:14

Linux——系统优化

https://blog.csdn.net/li_wen01/article/details/82699167系统调优概述系统的运行状况：CPU->MEM->DISK*->NETWORK->应用程序调优系统性能优化的
@小官人^·2024-03-19 14:25

tomcat调优

一、tomcat线程数可以参照https://blog.csdn.net/luoyang_java/article/details/85790435Tomcat配置文件server.xml中：Connector的主要功能，是接收连接请求，创建Request和Response对象用于和请求端交换数据；然后分配线程让Engine（也就是Servlet容器）来处理这个请求，并把产生的Request和Re
Liu.Yongqian·2024-03-19 02:39

JVM，GC算法，垃圾回收器，类加载器，进行线上JVM性能调优。

JVM（JavaVirtualMachine，Java虚拟机）是Java程序的运行环境，它在操作系统上提供了一个抽象层，使得Java程序可以独立于硬件平台运行。JVM有自己的指令集和内存管理机制，它负责将Java字节码转换为机器码并执行。垃圾回收（GarbageCollection，GC）是JVM的一个重要特性，它负责自动回收不再使用的内存。GC的目标是尽可能地回收垃圾对象，以释放内存空间，并确保
刘小董·2024-03-18 04:10

MySQL索引优化分析

1、SQL性能下降的原因数据太多：考虑分库分表关联了太多的表：SQL优化没有充分利用到索引：建立索引服务器调优及各个参数设置：调整my.cnf2、索引简介除了数据本身之外，数据库还维护着一个满足特定查找算法的数据结构
JBryan·2024-03-14 09:42

JVM调优之jstack找出最耗cpu的线程并定位代码

jstack可以定位到线程堆栈，根据堆栈信息我们可以定位到具体代码，所以它在JVM性能调优中使用得非常多。
机灵鬼鬼·2024-03-13 11:27

浅谈Tomcat调优步骤和例子

Tomcat调优分析Tomcat是JavaWeb应用程序中广泛使用的Web服务器和Servlet容器。为了获得更好的性能和稳定性，可以进行Tomcat调优。
xiongyi01·2024-03-09 14:12

大数据开源框架技术汇总

目录系统平台（Hadoop、CDH、HDP）监控管理（CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle）文件系统（HDFS、GPFS、Ceph、Gluster
浪尖聊大数据-浪尖·2024-03-08 20:48

Redis优化与应用

Redis性能调优-Redis的性能调优是一个比较复杂的过程，需要从多个方面进行优化，如内存使用、命令使用等。-案例：减少不必要的持久化操作。默认情况下，Redis会执行RDB和AOF两种持久化方式。
V火居道士V·2024-03-06 22:19

【python】密码字典生成器

二、安装确保已安装gitgitclonehttps://gitee.com/harryxiaocn/harry-passwd-dict-creator.gitcdhar
HarryXYC·2024-03-05 03:54

第5章：性能优化《Nginx实战：从入门到精通》

Nginx性能调优基础优化Nginx性能的第一步是理解和配置它的工作模式和工作参数，以适应你的具体需求和服务器环境。工作进程和连接数worker_processes：这个指令告诉Nginx启动多
运维家·2024-03-02 05:47

万字带你走过数据库的这激荡的三年

关于AndyPavlo：卡内基梅隆大学计算机科学系数据库学副教授，数据库调优公司OtterTune的CEO兼联合创始人。为了聚焦于数据库技术趋势演变，本文未对原文“寒暄式”开头和注释性语句作翻译。
·2024-03-01 17:11

挑战杯 基于机器学习与大数据的糖尿病预测

数据导入处理3数据可视化分析4特征选择4.1通过相关性进行筛选4.2多重共线性4.3RFE（递归特征消除法）4.4正则化5机器学习模型建立与评价5.1评价方式的选择5.2模型的建立与评价5.3模型参数调优
laafeer·2024-02-29 07:45

浅谈web性能测试

性能测试，简而言之就是模仿用户对一个系统进行大批量的操作，得出系统各项性能指标和性能瓶颈，并从中发现存在的问题，通过多方协助调优的过程。
.咖啡加剁椒·2024-02-27 08:17

开源大数据管理平台选型

随着CDH和HDP的闭源，还有国内信创需求，经过前期调研和后期实践，目前主要有两个产品满足要求：apachebigtop和DataSophon符合要求。因为这两个产品都是完全开源的，自助可控。
大数据AI·2024-02-25 02:41

ThreadPool 模式设计与流程演示

线程池的使用能够有效提升线程的可管理性，依据系统承受能力，调整线程池中工作线程的数量，对线程进行统一的分配、调优和监控。该方式能够提高任务响应速度，当任务到达时，无需等待线程创建即可立即执行。由于时序
KaiwuDB 数据库·2024-02-20 22:14

Linux调优指南

更多相关知识可以阅读：https://www.yuque.com/treblez/qksu6c/yxl59pkvczqot9ushttps://www.yuque.com/treblez/qksu6c/nqe8ip59cwegl6rk本文不会讲解基础知识。CPU设置调度器这几个调度类的优先级如下：Deadline>Realtime>Fair如果你的某些任务对延迟容忍度很低，比如说在嵌入式系统中就有
SakamataZ·2024-02-20 20:14

Hive 基于MapReduce引擎 map和reduce数的参数控制原理与调优经验

1.概述主要对基于MR的map数和reduce数测试与调优2.数据准备（1）表信息本次测试的表和sql都是使用的TPC-DS，表文件存储格式为text表名是否压缩总数占用空间文件数date_dim否730499.8M1item
abcdggggggg·2024-02-20 20:03

第3.2章：Doris-2.0数据导入——Compaction机制

概述1.2Compaction概述1.3Rowset数据版本1.4Compaction优点1.5Compaction问题1.5.1Compaction速度低1.5.2写放大问题1.6Compaction调优
爱吃辣条byte·2024-02-20 20:30

(17)Hive ——MR任务的map与reduce个数由什么决定？

对于每一个输入的文件会有一个mapsplit，每一个分片会开启一个map任务，很容易导致小文件问题（如果不进行小文件合并，极可能导致Hadoop集群资源雪崩）hive中小文件产生的原因及解决方案见文章：(14)Hive调优
爱吃辣条byte·2024-02-20 20:27

相机图像质量研究(13)常见问题总结：光学结构对成像的影响--鬼影

系列文章目录相机图像质量研究(1)Camera成像流程介绍相机图像质量研究(2)ISP专用平台调优介绍相机图像质量研究(3)图像质量测试介绍相机图像质量研究(4)常见问题总结：光学结构对成像的影响--焦距相机图像质量研究
上天肖·2024-02-20 19:22

16.用Hadoop命令向CDH集群提交MR作业

16.1实验环境介绍内容概述环境准备Kerberos环境和非Kerberos集群测试环境Kerberos集群CDH5.11.2，OS为Redhat7.2非Kerberos集群CDH5.13，OS为CentOS6.5
大勇任卷舒·2024-02-20 19:27

Python中Thop库的基本介绍和参数说明

通过这个库，开发者可以更好地理解和评估模型的复杂度，这对于模型优化和性能调优是非常有帮助的
肆十二·2024-02-20 18:30

相机图像质量研究(39)常见问题总结：编解码对成像的影响--运动模糊

系列文章目录相机图像质量研究(1)Camera成像流程介绍相机图像质量研究(2)ISP专用平台调优介绍相机图像质量研究(3)图像质量测试介绍相机图像质量研究(4)常见问题总结：光学结构对成像的影响--焦距相机图像质量研究
上天肖·2024-02-20 18:24

相机图像质量研究(36)常见问题总结：编解码对成像的影响--块效应

系列文章目录相机图像质量研究(1)Camera成像流程介绍相机图像质量研究(2)ISP专用平台调优介绍相机图像质量研究(3)图像质量测试介绍相机图像质量研究(4)常见问题总结：光学结构对成像的影响--焦距相机图像质量研究
上天肖·2024-02-20 18:53

相机图像质量研究(38)常见问题总结：编解码对成像的影响--呼吸效应

系列文章目录相机图像质量研究(1)Camera成像流程介绍相机图像质量研究(2)ISP专用平台调优介绍相机图像质量研究(3)图像质量测试介绍相机图像质量研究(4)常见问题总结：光学结构对成像的影响--焦距相机图像质量研究
上天肖·2024-02-20 18:53

相机图像质量研究(29)常见问题总结：图像处理对成像的影响--图像插值Demosaic

系列文章目录相机图像质量研究(1)Camera成像流程介绍相机图像质量研究(2)ISP专用平台调优介绍相机图像质量研究(3)图像质量测试介绍相机图像质量研究(4)常见问题总结：光学结构对成像的影响--焦距相机图像质量研究
上天肖·2024-02-20 18:20

MySQL 性能优化 - 多表查询优化

上一篇讲到了单表数据查询的性能优化，已经掌握了简单的查询优化，这一篇主要针对两表、三表以及多表联查的情况进行分析，看看该如何进行调优。
搬运Gong·2024-02-20 17:39

MySQL 性能优化思路和工具

我们说到性能调优，大部分时候想要实现的目标是让我们的查询更快。一个查询的动作又是由很多个环节组成的，每个环节都会消耗时间。我们要减少查询所消耗的时间，就要从每一个环节入手。
helloworld6379·2024-02-20 17:38

[CDH] Spark 属性、内存、CPU相关知识梳理

version：2.4.0-cdh6.3.0文章目录sparkproperties常用配置sparktasksparktask使用的cpu核数sparkarchitecturesparkmemorysparkonyarn
枪枪枪·2024-02-20 15:24

云上业务一键性能调优，应用程序性能诊断工具 Btune 上线

01终于等来了预算，这就把服务迁移到最新的CPU平台上去，这样前端的同事立马就能感受我们带来的速度提升了。可是……这些性能指标怎么回事？不仅没有全面提升，有些反而下降了。不应该这样啊，这可怎么办？花费了几个月时间终于搞定了业务模块的重构，立刻部署升级让业务焕然一新。可是……长尾延迟居然还增加了一倍，说好的业务效果提升呢，到底是哪里出了问题？上面的这些问题，对于开发运维工程师来说一定不陌生，经常被这
·2024-02-20 14:15

Tomcat8 设置JAVA_OPTS启动参数，Tomcat服务器调优

Tomcat8设置JAVA_OPTS启动参数，Tomcat服务器调优Tomcat8设置JAVA_OPTS启动参数，Tomcat服务器调优1.在apache-tomcat/bin目录下新建setenv.sh
不如打代码KK·2024-02-20 12:06

JVM java虚拟机入门指南

JVMJVM的执行流程JVM的组成部分类加载运行时数据区本地方法接口执行引擎垃圾回收什么样的对象是垃圾呢内存溢出和内存泄漏定位垃圾的方法对象的finalization机制垃圾回收算法分代回收垃圾回收器JVM调优参数
屈家全·2024-02-20 12:31

mongodb 性能优化

调优：mongoDB是使用
mask哥·2024-02-20 10:31

Flink部署——弹性扩缩容

文章目录Reactive模式入门用法配置建议局限性Adaptive调度器用法局限性AdaptiveBatchScheduler用法启用AdaptiveBatchScheduler配置算子的并行度为-1性能调优局限性在
京河小蚁·2024-02-20 09:31

APP开发者对接穿山甲广告联盟，有哪些特点？收益如何？

AdSet官网|聚合SDK广告变现平台-上海神蓍信息科技有限公司通过穿山甲广告GroMore的Bidding竞价能力，不断提升自身的变现效率，新手可直接上手，避免繁琐调优流程，并且针对瀑布流模式进行优化
AdSet聚合广告平台·2024-02-20 09:13

openGauss学习笔记-222 openGauss性能调优-系统调优-操作系统参数调优

文章目录openGauss学习笔记-222openGauss性能调优-系统调优-操作系统参数调优222.1前提条件222.2内存相关参数设置222.3网络相关参数设置222.4I/O相关参数设置openGauss
superman超哥·2024-02-20 08:44

openGauss学习笔记-223 openGauss性能调优-系统调优-数据库系统参数调优-数据库内存参数调优

文章目录openGauss学习笔记-223openGauss性能调优-系统调优-数据库系统参数调优-数据库内存参数调优223.1逻辑内存管理参数223.2执行算子是否下盘的参数openGauss学习笔记
superman超哥·2024-02-20 08:44

openGauss学习笔记-221 openGauss性能调优-确定性能调优范围-分析作业是否被阻塞

文章目录openGauss学习笔记-221openGauss性能调优-确定性能调优范围-分析作业是否被阻塞221.1操作步骤openGauss学习笔记-221openGauss性能调优-确定性能调优范围
superman超哥·2024-02-20 08:13

openGauss学习笔记-220 openGauss性能调优-确定性能调优范围-查询最耗性能的SQL

文章目录openGauss学习笔记-220openGauss性能调优-确定性能调优范围-查询最耗性能的SQL220.1操作步骤openGauss学习笔记-220openGauss性能调优-确定性能调优范围
superman超哥·2024-02-20 08:04

大数据分析学习第十五课 自建云服务器集群离线安装Ambari2.7.5和HDP3.1.5(一)

之前了解了很多关于大数据平台一站式部署管理的工具，比如ApacheAmbari和CDH，目前最新的CDH已经没有了社区版，也就是说以后使用新版本的ClouderaManager和CDH都是要收费的，这对于很多小公司来说
猫头鹰数据分析·2024-02-20 08:29

浏览器缓存机制(expires,cache-control,last-modified,etag)与Nginx配置调优

目录1.HTTP状态码2.last-modified3.etag4.cache-control4.1浏览器对cache-control几种值的不同表现4.1.1打开新窗口4.1.2在原窗口按Enter键4.1.3点击刷新按钮4.1.4点击后退按钮5.expires6.以上几种属性的优先级7.可能出现的问题缓存可以说是性能优化中简单高效的一种优化方式了,一个优秀的缓存策略可以缩短网页请求资源的距离,
Scoful·2024-02-20 07:02

【ASP.NET Core 基础知识】--最佳实践和进阶主题--性能调优和缓存

一、性能调优在ASP.NETCore中进行性能调优，代码优化是至关重要的一部分。
喵叔哟·2024-02-20 07:58

Java线程池面试题

线程是稀缺资源，如果无限制地创建，不仅会消耗系统资源，还会降低系统稳定性，使用线程池可以进行同意分配、调优和监控Java线程池创建无论是创建何种类型线程池(FixedThr
陈二狗想吃肉·2024-02-20 07:56

生产环境下，应用模式部署flink任务，通过hdfs提交

前言  通过通过yarn.provided.lib.dirs配置选项指定位置，将flink的依赖上传到hdfs文件管理系统1.实践  （1）生产集群为cdh集群，从cm上下载配置文件，设置环境exportHADOOP_CONF_DIR
但行益事莫问前程·2024-02-20 07:04

深度学习技巧应用37-模型训练过程中训练曲线的观察方法与超参数随机搜索方法

这两种方法在模型训练和调优过程中起着重要作用，有助于提高模型性能和泛化能力。文章目录一、方法背景二、
微学AI·2024-02-20 02:59

JVM调优之GC调优——响应时间优先（三）

GC调优之响应时间优先上一节简单介绍了GC调优的吞吐量优先，详见：https://blog.csdn.net/Winner941112/article/details/102679614，这一节将会考虑响应时长进行调优
Winner941112·2024-02-19 23:02

【Jvm】性能调优（下）线上问题排查思路汇总

文章目录前言性能调优（上）线上问题排查工具汇总JVM调优（中）Java中不得不了解的OOMError一.JVM参数1.参数分类2.非稳定参数（-XX）说明3.查询JVM默认参数及运行时生效参数4.常用参数
墩墩分墩·2024-02-19 23:00

技术选型指南：Oracle、SQL Server还是DB2？

但是，要保持这种精准的性能，背后需要不少技术维护和调优工作。SQLServer:在性能
小郑说编程i·2024-02-19 22:15

相机图像质量研究(19)常见问题总结：CMOS期间对成像的影响--Sensor Noise

系列文章目录相机图像质量研究(1)Camera成像流程介绍相机图像质量研究(2)ISP专用平台调优介绍相机图像质量研究(3)图像质量测试介绍相机图像质量研究(4)常见问题总结：光学结构对成像的影响--焦距相机图像质量研究
上天肖·2024-02-19 21:12
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他