hadoop配置调优

Linux 常见命令

Linux常见命令Linux基础命令目录与文件查找文件地址scp复制文件和目录查看文件（日志）查看普通的文件grepawk分隔cut查看压缩的文件解压压缩Linux系统调优topvmstatpidstatpsvi
disgare·2023-08-09 02:44

sql调优的几种方式

sql调优的几种方式：避免使用select*、用unionall代替union、小表驱动大表、批量操作、多用limit、in中值太多、增量查询、高效的分页、用链接查询代替子查询、join数量不宜过多、join
_不吃猫的鱼_·2023-08-08 23:01

2022面试遇到的问题总结

JVM调优什么是JVM调优：减少fullgc、降低gc的停顿时间、提高吞吐量；调优步骤：===提高吞吐量>降低gc停顿时间（在满足提高吞吐量的前提下再去减低gc的停顿时间；若不能同时满足上面两个条件则选择一个最适合系统的一种调优结果
默语玄·2023-08-08 20:53

后台常见的错误

JVM调优总结java.lang.OutOfMemoryError:PermGenspace持久代被占满大量的反射不断的被类里加载，最终导致perm区域占满；解决：-XX:MaxPermSize=16m
Twins_zuoyou·2023-08-08 19:13

MySQL的关键指标及采集方法

1、延迟应用程序会向MySQL发起SELECT、UPDATE等操作，处理这些请求花费了多久，是非常关键的，甚至我们还想知道具体是哪个SQL最慢，这样就可以有针对性地调优。在客户端埋点。
key_3_feng·2023-08-08 15:16

2023最新性能测试面试题（带答案）

)第二步：编写测试计划，人员、时间周期、工具第三步：环境搭建第四步：造数据第五步：场景测试（单接口基准测试、单接口压力测试、混合接口测试、稳定性测试）第六步：结果分析，提交测试报告第七步：等待开发性能调优
潇潇说测试·2023-08-08 15:12

掌握 JVM 调优命令

常用命令1、jps查看当前java进程2、jinfo实时查看和调整JVM配置参数3、jstat查看虚拟机统计信息4、jstack查看线程堆栈信息5、jmap查看堆内存的快照信息JVM日常调优总结起来就是
redstone618·2023-08-08 15:58

Elasticsearch使用优化之拙见

在维护ElastciSearch集群的时候，对Elasticsearch进行了一些调优和分析，现整理成文，纯属拙见，如果有不合理之处，欢迎指出探讨。我所使用的Elasticsearch版本为5.x。
xiaotian是个混子·2023-08-08 14:33

自然语言处理：长文本场景下的关键词抽取实践

NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、性能调优、模型压缩算法等专栏详细介绍：NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能·2023-08-08 14:47

自然语言处理[信息抽取]：MDERank关键词提取方法及其预训练模型----基于嵌入的无监督 KPE 方法 MDERank

NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、性能调优、模型压缩算法等专栏详细介绍：NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能·2023-08-08 14:47

自然语言处理文本分割[Text segmentation]：PoNet算法使用多粒度Pooling结构替代attention的网络

NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、性能调优、模型压缩算法等专栏详细介绍：NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能·2023-08-08 14:46

Redis BigKey案例

BigKey你做过调优吗？惰性释放lazyfree了解过吗？Morekey问题，生产上redis数据库有1000W记录，你如何遍历？key*可以
Please Sit Down·2023-08-08 13:50

JVM的艺术—JAVA内存模型

对后续的jvm调优打下坚实的基础。而对于现在的互联网行业来说，高并发，高可用已经必不可少，而学好
雕爷的架构笔记·2023-08-08 11:46

通向架构师的道路之weblogic与apache的整合与调优

一、BEAWeblogic的历史BEAWebLogic是用于开发、集成、部署和管理大型分布式Web应用、网络应用和数据库应用的Java应用服务器。将Java的动态功能和JavaEnterprise标准的安全性引入大型网络应用的开发、集成、部署和管理之中。BEAWebLogicServer拥有处理关键Web应用系统问题所需的性能、可扩展性和高可用性。与BEAWebLogicCommerceServe
进击的雷神·2023-08-08 08:01

内存泄漏调优案列

案列背景最近在做公司项目核心接口压测和稳定性压测时，各接口的成功率不足99.99%，通过分割压测之后发现，在压测A服务时，内存上升明显，且伴有频繁的fgc发生jvm老年代内存使用率已经达到了100%且应用的fgc有5000+次，fgc频率大概在2s左右，怀疑有内存泄漏问题产生压测工具tps表现和现象内存飙升导致频繁的fgc，导致在压测时出现tps不稳定现象，出现毛刺现象Tps火焰图如下：排查过程内
昱宸星光·2023-08-08 07:57

037 诗经 国风·邶风·旄丘

结构明晰，递进有序；艺术手法巧妙，运用铺陈对比，写得情景如画；感情基调优柔敦厚
beikerray119·2023-08-08 07:30

elasticsearch 调优参考 转载和整理（3）

Elasticsearch常用配置及性能参数本文转载自https://www.cnblogs.com/kaynet/p/5861926.htmlcluster.name:estest集群名称node.name:“testanya”节点名称node.master:false是否主节点node.data:true是否存储数据index.store.type:niofs读写文件方式index.cache
大晚上开车不开灯·2023-08-07 23:59

4_回归算法（算法原理推导+实践）

3模型效果判断4机器学习调参5梯度下降算法5.1梯度方向5.2批量梯度下降算法（BGD）5.3随机梯度下降算法（SGD）5.4BGD和SGD算法比较5.5小批量梯度下降法（MBGD）5.6梯度下降法—调优策略
少云清·2023-08-07 21:52

模型训练技术指南

目录引言1.模型训练的重要性2.数据预处理3.特征工程4.模型选择与评估5.参数调优6.模型集成7.过拟合与欠拟合8.模型保存与加载9.分布式训练与加速10.最佳实践与常见问题引言模型训练是机器学习领域中至关重要的一步
Yan-英杰·2023-08-07 20:33

高通SDX12：USB眼图调优及PCIe眼图测试

一、USB眼图调优先检查sdxnightjar-usb.dtsi中的相关配置，如下：qusb_phy:qusb@79000{compatible="qcom,qusb2phy";reg=;reg-names
Gabriel.Tian·2023-08-07 20:30

岷江夜曲-洞箫独奏

《岷江夜曲》是一首情调浪漫的歌曲，节奏活泼轻快，曲调优美动听，歌词描绘了一幅月色朦胧的晚上，岸边树影摇曳，江上渔火点点，悠扬的船歌随风传送的迷人景象，充满了诗情画意，令人陶醉。
琴臺樂坊·2023-08-07 16:06

2022-04-19晨间日记

今天是什么日子起床：6点50分就寝：1点天气：下雨心情：一般纪念日：暂无发现叫我起床的不是闹钟是梦想年度目标及关键点：盈利20万，调通商业模式，测试定价与成本结构调优本月重要成果：今日三只青蛙/番茄钟1
鱼笨自由·2023-08-07 08:39

mac安装Graphviz及使用（火焰图、树形）

反正需要性能调优时这个图形化界面可以很直观的看到进程的性能状态。安装Graphviz使用brew安装Graphviz，其中mac安装brew可参照写的另一篇博客：mac安装brew_借我三行代码的
骑着蜗牛打天下·2023-08-07 03:06

USB采集卡如何打pts

一、使用采集卡提供的pts二、手动打pts1.usb采集设备pts的问题2.采集卡驱动，UVC/UAC，ffmpeg的关系3.如何自己打pts4.音视频同步调优5.NTP等联网调时工具带来的不同步问题一
、、、、南山小雨、、、、·2023-08-07 00:36

Elasticsearch 性能调优指南

目录1、通用优化策略1.1通用最小化法则1.2职责单一原则1.3其他2、写性能调优2.1基本原则2.2优化手段2.2.1增加flush时间间隔，2.2.2增加refresh_interval的参数值2.2.3
技术专家乄·2023-08-06 18:11

使用es必须要知道的一些知识点：索引篇

文章目录一、索引创建二、经验篇使用动态模板（DynamicTemplate）优化索引动态模板（DynamicTemplate）批量处理器（BulkProcessor）不建议处理多个索引模板的请求三、性能调优多条搜索
子涵先生·2023-08-06 16:04

技术人成长之源码阅读心法

优质的开源项目，不论是从业务概念上的抽象，还是实实在在、反反复复的调优、验证，很可能是凝聚了一个团队几年的心血，甚至有着庞大的体系。开
子涵先生·2023-08-06 16:02

不经意间，你可能正过着一种“二手人生”

比如说，怎么搭配衣服才低调优雅，去哪吃饭便宜又美味，买哪款耳机更划算，工作还是考研，要不要入手比特币，都有人替你解答了。
Aric臻强·2023-08-06 16:36

Arthas（阿尔萨斯）监控线上Java程序，解决无法线上性能调优问题

1、Arthas介绍Arthas是阿里在2018年9月开源的Java诊断工具，支持JDK6+，采用的是命令交互模式，提供Tab自动补全，在线排查问题，无需重启，动态跟踪Java代码，实时监控JVM状态，方便Java大佬们定位和诊断线上程序运行问题。开源地址：https://github.com/alibaba/arthas官方文档：https://arthas.aliyun.com/doc/2、A
站在巨人的肩膀上遥望·2023-08-06 14:06

机器学习模型选择评估和超参数调优

如何选择模型？如何评估模型？如何调整模型的超参数？模型评估要在测试集上进行，不能在训练集上进行，否则评估的准确率总是100%，模型调参要在验证集上迭代进行。所以，一般我们准备好数据集后，要将其分为训练集和测试集，分配比例一般在5：5到8：2之间，即最多训练集80%，测试集20%，验证集包含在训练集中。sklearn中有sklearn.model_selection.train_test_split
一马平川的大草原·2023-08-06 14:34

性能调试【学习笔记】

什么是调优？每执行一个Java命令，就分配一个JVM，调优时不要混淆。
helen_elva·2023-08-06 13:31

【性能调优-实例演示】CPU爆了怎么定位问题--》调试指令&性能分析工具

性能调优定位生产性能问题生产环境，CPUMemory告警top：找出占CPU比较高的进程${pid}（内存增长，CPU居高不下）top-Hp${pid}：显示所有线程的CPU占比，观察进程中的线程，找出哪个线程
helen_elva·2023-08-06 13:31

Go实战性能调优

性能调优原则：要依据数据而不是猜测要定位最大瓶颈而不是细枝末节不要过早优化不要过度优化，系统可能要继续开发，任意产生不兼容的情况学习使用性能调优优化工具pprof性能优化调优案例:业务服务优化基本概念服务
还不快去卷！·2023-08-06 12:20

Cilium系列-13-启用XDP加速及Cilium性能调优总结

Cilium系列文章前言将Kubernetes的CNI从其他组件切换为Cilium,已经可以有效地提升网络的性能.但是通过对Cilium不同模式的切换/功能的启用,可以进一步提升Cilium的网络性能.具体调优项包括不限于
东风微鸣·2023-08-06 10:44

QLoRA：一种高效LLMs微调方法，48G内存可调65B 模型，调优模型Guanaco 堪比Chatgpt的99.3%！

引言本文是华盛顿大学刚刚发布的一篇文章。作者提出了QLoRA，它是一种「高效的微调方法」，可以在保持完整的16位微调任务性能的情况下，将内存使用降低到足以「在单个48GBGPU上微调650亿参数模型」。QLORA通过冻结的4位量化预训练语言模型向低秩适配器(LoRA)反向传播梯度。作者公布了他们训练的系列模型Guanaco，与之前公开发布的所有模型相比，在Vicuna基准测试中表现更好，「只需要在
u013250861·2023-08-06 10:52

PHP框架之 Laravel 高并发调优笔记

:cache/phpartisanconfig:cachecomposerdump-autoload--optimizephpartisanoptimize其他可能开启OPcachephp-fpm配置调优
it阿布·2023-08-06 09:47

MATLAB算法实战应用案例精讲-【模型调优】调参和参数初始化

目录BatchSize1.什么是batchsize2.batchsize对网络的影响3.batchsize的选择参数初始化
林聪木·2023-08-06 09:51

Linux运维工程师面试常用知识点总结

Linux基础命令部分1.查看某进程所打开的所有文件2.添加一条静态路由3.打包一个目录下文件，除了该目录下某个文件4.提取本地网卡ip地址5.如何在某个文本的每行前面添加#字符6.centos7系统调优
江湖有缘·2023-08-06 08:37

SOLR管理配置和性能优化JVM参数调优

我个配置：JAVA_OPTIONS="-Xmx1024m-Xms1024m-Xmn512m-XX:MaxPermSize=128m-XX:SurvivorRatio=65536-XX:MaxTenuringThreshold=0-Xnoclassgc-XX:+DisableExplicitGC-XX:+UseParNewGC-XX:+UseConcMarkSweepGC-XX:+UseCMSCom
liangpz521·2023-08-06 06:00

JVM 调优

“设为星标”，就能第一时间收到更新推送啦~~~JVM调优是一项重要的任务，可以提高Java应用程序的性能和稳定性。
追梦@Java·2023-08-06 02:03

线程池

线程是稀缺资源，如果无限制的创建，不仅会消耗系统资源，还会降低系统的稳定性，使用线程池可以进行统一的分配，调优和监控。但是要做到合理的利用线程池，必须对其原理了如指掌。线程池的使用线程池的
潜心做学霸·2023-08-06 02:20

Linux内核网络参数调优命令

文章目录ulimit-nsomaxconnSocket参数netdev_max_backlog参数tcp_max_syn_backlog参数ulimit-nulimit-n是用于查看或设置当前用户进程打开文件描述符的最大值。文件描述符是操作系统用来访问文件或者其他I/O资源的一种抽象表示。在Linux和类Unix系统中，每个进程可以同时打开一定数量的文件描述符。通过ulimit-n命令可以查看当前
ZWZhangYu·2023-08-06 01:52

Go语言性能优化建议与pprof性能调优详解——结合博客项目实战

文章目录性能优化建议Benchmark的使用slice优化预分配内存大内存未释放map优化字符串处理优化结构体优化atomic包小结pprof性能调优采集性能数据服务型应用gotoolpprof命令项目调优分析修改
Palp1tate·2023-08-05 23:51

elasticSearch常见的面试题

调优技巧原文参考：干货|BAT等一线大厂Elasticsearch面试题解读-掘金设计阶段的调优根据业务增长的需求，采取日期模版创建索引，通过rolloverAPI实现滚动索引定义条件，生成新的索引，但都指向一个别名
shigen01·2023-08-05 23:20

mysql调优

mysql优化；1、优化方向优化成本硬件升级>系统配置>表结构设计>sql语句及索引优化效果：硬件升级/home/www/loadtomem.sql在需要数据预热时，比如重启数据库,执行命令：mysql-uroot/dev/null2>&12、表结构设计优化1）中间表（如报表，晚上计算放在中间表）2）冗余字段3）拆表3）要有主键，最好int类型，建议自增主键，分布式系统采用雪花算法，雪花算法是数字
weixin_40974880·2023-08-05 22:59

实战系列 – 陌生项目，JAVA性能快速调优实战

进入一个新项目，如何快速入手并进行性能优化理解、思考1从业务分析第一步先理解工作业务（做什么，解决了什么，流程是什么）了解技术栈系统的业务架构是什么（有哪些模块，与哪些外部系统有交互）外部接口方式，承接的协议是什么内部各个模块如何划分，模块职责是什么，分层抽象的东西是什么系统构建的脚本，代码的结构怎么样的2理解问题项目上对接手的前人代码进行性能优化。场景大概是创建一个项目时，因为涉及到大量数据的查
minute_5·2023-08-05 22:26

原型模式与享元模式：提升系统性能的利器

原型模式和享元模式，前者是在创建多个实例时，对创建过程的性能进行调优；后者是用减少创建实例的方式，来调优系统性能。这么看，你会不会觉得两个模式有点相互矛盾呢？
肥春勿扰·2023-08-05 19:07

从应用的角度讲讲Tomcat的三大参数 maxThreads、acceptCount、maxConnections

Tomcat实战参数理解文章目录Tomcat实战参数理解前言一、首先讲讲三大参数的含义二、如何调优三、总结前言这几天因为公司项目搞活动，导致接口的请求负载非常高，甚至有些接口会直接报连接超时，所以研究了下
小胖子——鑫·2023-08-05 18:31

Cilium系列-11-启用带宽管理器

Cilium系列文章前言将Kubernetes的CNI从其他组件切换为Cilium,已经可以有效地提升网络的性能.但是通过对Cilium不同模式的切换/功能的启用,可以进一步提升Cilium的网络性能.具体调优项包括不限于
东风微鸣·2023-08-05 16:28

Cilium系列-12-启用 Pod 的 BBR 拥塞控制

Cilium系列文章前言将Kubernetes的CNI从其他组件切换为Cilium,已经可以有效地提升网络的性能.但是通过对Cilium不同模式的切换/功能的启用,可以进一步提升Cilium的网络性能.具体调优项包括不限于
东风微鸣·2023-08-05 16:58
上一页 55 56 57 58 59 60 61 62 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他