青春不散场
青春不散场

JVM调优

JVM调优

面试真题：说一下JVM调优

  • JVM调优问题一般分为四个步骤
  • 第一步：发现问题，即运用JVM监控工具监控服务器运行时情况，做好告警阈值，通过告警工具设置告警，方便及时介入问题保留现场。
  • 第二步：分析问题，根据现场，保留JVM运行时内存，CPU，IO，GC，线程，请求量等，甚至阈值时打印的GC日志，以及Dump的堆内存情况
    • 找方向：根据掌握情况，分析具体原因，硬件问题，软件问题，配置问题，代码问题，系统问题等方向
    • 找原因：根据方向，找到最终原因，提出有针对性优化方向
    • 注意：很多情况下是代码问题导致，
  • 第三步：解决问题，根据分析问题结果，解决问题。
  • 第四步：验证结果：基于严谨，可以在灰度或压测环境，验证新解决的方案，没有问题再上生产

生产调优详细过程

  • 第一步：发现问题-监控告警
    • 运用普罗米修斯，阿尔萨斯，阿里Arams等或者devops工具对运行情况监控。
    • 运用钉钉告警等工具，出现设置的阈值时进行告警，运维人员及时解决异常干预。同时dump保留现场情况。
  • 第二步：分析问题-有针对性分析
    • 分析问题现场，例如：内存，CPU，线程，GC，访问超时，访问异常等情况表现，例如内存暴增，CPU暴增，线程数量变化，GC频繁，频繁报错等
    • 有条件则分析dump的内存情况，通过MAT工具分析堆内存对象情况，线程死锁等情况，定位代码出现问题地方，优化代码。
    • 对于GC问题，通过打印JVM日志分析GC过程，查看GC前后的年轻代，老年代的回收情况。
    • 重要的是结合当前系统情况，以及访问情况分析
  • 第三步：解决问题–提解决方案
    • 根据分析问题结果，提出解决方案
    • 例如内存使用率暴增：分析堆内存，查看对象占用问题，是否有内存泄漏，是否加载超大对象，
    • 例如CPU使用率暴增：分析是否有比较吃CPU的方法或循环依赖等情况。
    • 例如频繁GC等：是否年轻代或老年代分配过小，比率是否正确，
  • 第四步：验证结果
    • 修改配置或修改代码后，可以在灰度环境压测，没有问题再上生产
    • 可以尝试多个方案的压测效果，选择成本最小，效果最好的上生产。

优化各个环节落地

  • 监控指标

    • 通过监控工具
      • 堆内存占用比率
      • 线程数量比率
      • FullGC情况
      • 程序错误情况
    • 通过打印GC日志
      • 设定触发dump出实时内存情况
      • 打印FullGC的情况
      • 通过下载GC的dump文件
    • 了解服务器机器参数
      • CPU核数
      • 内存大小
      • 集群模式
      • 数据库服务
      • JDK版本

  • 监控告警工具

    • jps 查看当前虚拟机运行的jar项目
    • jinfo 查看和调整JVM启动和运行参数
    • jstack 虚拟机线程信息监控
    • jstat 查看JVM的统计信息
      • jstat –gcutil -h 20 pid 1000 100
      • jstat -gccause -h 20 pid 1000 100
    • jmap JVM内存占用信息和快照信息
      • 手动获取dump:jmap -dump:format=b,file=filename.hprof pid
      • 被动获取dump: -XX:+HeapDumpOnOutOfMemoryError - - -XX:HeapDumpPath=/tmp/heapdump.hprof
      • 获取dump后通过MAT工具分析堆内存占用情况
    • GCeasy分析GC日志的在线网站，根据GC日志查看数据
    • MAT工具-内存分析工具 [离线常用]
      • IBM Memory Analizer 内存分析工具
      • JvisualVM JDK自带离线分析工具
      • JMC工具，用来追溯热点代码和热点线程
        • 先录制，分析线程 内存 锁 文件 Socket 方法调用 垃圾回收 JIT TLAB 等
    • OQL 工具：类似于SQL语句，查看内存中的对象占用情况
    • 基准测试 JMH 单元测试形式测试多线程情况
    • Arthas在线分析工具[测试环境常用]
      • 在线分析类加载以及异常
      • 在线查看代码执行流程，查看反编译的代码
      • 在线调试，在线debug以及事故重现
      • JVM运行监控
      • 监控JVM的实时运行情况
    • 普罗米修斯的线上监控工具[生产常用]
      • 内存和CPU负载
      • 线程数量
      • GC情况
      • 请求量和并发量监控

  • 分析问题工具

    • 通过MAT工具
      • BMAT工具，堆内存分析统计，堆内存对象分析，用于分析内存泄漏原因
      • JVM工具：用于在线分析和离线分析，堆内存分析，线程分析
    • 通过GCeasy分析工具
      • 年轻代，老年代，元空间，整体的最大值最小值分析
      • 吞吐量指标，百分比越高GC开销月底
      • GC延迟指标，平均GC暂停时间和最大暂停时间分析
      • 时间线可视化加过：判断GC的时间点以及GC内存
      • GC统计：统计年轻代，老年代，元空间，FullGC等指标
      • GC原因分析，
    • 通过arthas在线分析
    • 通过VM工具在线分析
      • 分析点
        • 堆内存的年轻代的回收比率
        • 堆内存老年代的回收比率
        • 堆内存元数据的回收比率

优化方案-视具体情况分析

  • 内存飙升，居高不下
    • 内存泄漏问题
      • 系统资源在堆栈线程错误使用情况下，使用完毕的资源无法回收问题
      • 通过打印堆内存泄漏
      • 分析内存泄漏的原因
    • 通过MAT工具分析堆内存，分析例如：缓存使用不合理导致,全局对象未回收，大对象过多，对象嵌套过深等
    • 请求飙升导致，可以使用集群，增加服务器，
  • CPU飙升，居高不下
    • 凭经验分析：例如内部有大型的公式计算，不合理的算法等
    • 通过Jstack等分析，一些特殊情况：例如不合理使用大量正则，循环调用，并发线程不合理等
  • IO负载过高
    • 频繁读写磁盘文件，频繁请求外部文件等情况，可以采用零拷贝，外部缓存等方式
    • 可能是堆外内存泄漏，考虑Netty，Dubbo等不合理使用导致。
  • 频繁GC-结合printGC日志分析
    • 调整堆内存，单个线程栈内存，元空间等大小
    • 调整年轻代，老年代的比率，阈值等
    • 通过MAT可以查看堆内存情况，找到问题代码，进行代码优化，例如减少大对象生成
    • 调整GC回收器类型，例如并发回收器改为CMS，CMS回收器改为G1回收器等
  • 提高吞吐量和并发量
    • 吞吐量和并发量是衡量系统高性能标准
    • 优化java代码
    • 优化JVM参数配置，垃圾回收器种类等

生产调优实战

  • 1、提前做好JVM内存监控以及阈值预警
  • 2、针对不同的情况做对应的分析，
    • 能够在五分钟内解决就快速修复上线，否则就考虑回滚
  • 3、响应延迟问题：【考虑线程阻塞】
    • 通过JSP查看存活线程，以及存活时间，定位出现阻塞问题的线程
  • 4、内存暴增问题：【考虑内存泄漏】
    • 通过dump堆内存，通过IAM或VM等工具分析内存，找到堆内存中对象，从而定位问题，解决问题
  • 5、频繁GC造成卡顿问题：考虑JVM配置不合理
    • 通过分析QPS，考虑是否要增加堆内存大小，栈内存，线程栈内存的大小
    • 通过dump虚拟机的GC日志，分析youngGC，minioGC,OldGC分析堆内存的年轻代老年代的比率
    • 通过GC的停顿时间，考虑是否需要更换年轻代和老年代的回收器组合，并配置回收器的参数
  • 6、上线前预防
    • 在非生产环境安装althas工具，分析虚拟机的线程堆栈以及代码问题，定位快

开发中碰到的JVM调优问题

  • 发现JVM在访问量高的时候频繁GC-上线一个新功能后发现GC频繁，几乎几分钟一次，通过dump代码后发现是JVM堆内存的年轻代和老年代配置过小导致
  • 发现JVM的内存在上线内存使用率暴增-例如上线OKHTTP后访问发现内存飙升，最后通过dump对内存后分析发现是OKhttp的连接存在内存泄漏问题
  • 发现JVM的IO频繁问题-上线后发现某个访问接口频繁超时异常，但是JVM的内存，GC都是正常，dump下堆内存后分析发现是shardingjdbc的连接池过小，而且没有使用分表键。

你可能感兴趣的:(jvm)

  • 简单了解 JVM 记得开心一点啊 jvm
    目录♫什么是JVM♫JVM的运行流程♫JVM运行时数据区♪虚拟机栈♪本地方法栈♪堆♪程序计数器♪方法区/元数据区♫类加载的过程♫双亲委派模型♫垃圾回收机制♫什么是JVMJVM是JavaVirtualMachine的简称，意为Java虚拟机。虚拟机是指通过软件模拟的具有完整硬件功能的、运行在一个完全隔离的环境中的完整计算机系统（如：JVM、VMwave、VirtualBox）。JVM和其他两个虚拟机
  • JVM、JRE和 JDK：理解Java开发的三大核心组件 Y雨何时停T Javajava
    Java是一门跨平台的编程语言，它的成功离不开背后强大的运行环境与开发工具的支持。在Java的生态中，JVM（Java虚拟机）、JRE（Java运行时环境）和JDK（Java开发工具包）是三个至关重要的核心组件。本文将探讨JVM、JDK和JRE的区别，帮助你更好地理解Java的运行机制。1.JVM：Java虚拟机（JavaVirtualMachine）什么是JVM？JVM，即Java虚拟机，是Ja
  • 深入浅出 -- 系统架构之负载均衡Nginx的性能优化 xiaoli8748_软件开发 系统架构系统架构负载均衡nginx
    一、Nginx性能优化到这里文章的篇幅较长了，最后再来聊一下关于Nginx的性能优化，主要就简单说说收益最高的几个优化项，在这块就不再展开叙述了，毕竟影响性能都有多方面原因导致的，比如网络、服务器硬件、操作系统、后端服务、程序自身、数据库服务等，对于性能调优比较感兴趣的可以参考之前《JVM性能调优》中的调优思想。优化一：打开长连接配置通常Nginx作为代理服务，负责分发客户端的请求，那么建议开启H
  • 常见的 JVM 调优方法有哪些？ 爪哇天下 jvm
    常见的JVM调优方法有哪些？可以具体到调整哪个参数，调成什么值？对年轻代的EdenSurvivor的比例进行配置-XX:SurvivorRatio=8：表示设置2个Survivor区：1个Eden区的大小比值为2:8，这意味着Survivor区占整个年轻代的1/5，这个参数默认为8如果经常性的SurvivorTo放不下YGC的剩余的对象时候，可以适当的调整比例常用的CMS收集器：设置回收阈值，需要
  • JVM源码分析之堆外内存完全解读 HeapDump性能社区
    概述广义的堆外内存说到堆外内存，那大家肯定想到堆内内存，这也是我们大家接触最多的，我们在jvm参数里通常设置-Xmx来指定我们的堆的最大值，不过这还不是我们理解的Java堆，-Xmx的值是新生代和老生代的和的最大值，我们在jvm参数里通常还会加一个参数-XX:MaxPermSize来指定持久代的最大值，那么我们认识的Java堆的最大值其实是-Xmx和-XX:MaxPermSize的总和，在分代算法
  • 程序计数器的作用 毕加涛 java
    程序计数器的作用就是**用来记住下一条jvm指令的执行地址。**它的特点是**线程私有的**，也就是一人一个。然后cpu会给每个线程分配时间片，然后等待这个线程的时间片用完之后就会轮到下一个线程来执行。所以此时就需要计数器来记录线程运行的下一行指令的地址，等到下次轮到这个线程执行的时候来到上次执行的指令地址来继续执行指令。所以它的作用就是：为了保证程序的执行遵循自上而下有顺序的执行。
  • JVM 调优篇7 调优案例1-堆空间的优化解决 健康平安的活着 jvm调优jvm
    一jvm优化1.1优化实施步骤*1)减少使用全局变量和大对象；2)调整新生代的大小到最合适；3)设置老年代的大小为最合适；4)选择合适的GC收集器；1.2关于GC优化原则多数的Java应用不需要在服务器上进行GC优化；多数导致GC问题的Java应用，都不是因为我们参数设置错误，而是代码问题；在应用上线之前，先考虑将机器的JVM参数设置到最优（最适合）；减少创建对象的数量；减少使用全局变量和大对象；
  • JVM简介 林小果呀 jvmjvmjava开发语言
    JVM简介JVM本质上是一个运行在计算机上的程序，他的职责是运行Java字节码文件。JVM功能解释和运行：对字节码文件中的指令，实时的解释成机器码，让计算机执行内存管理：自动为对象、方法等分配内存自动的垃圾回收机制，回收不再使用的对象即时编译：对热点代码进行优化，提升执行效率常见的JVM
  • synchronized锁升级过程 liang8999 javajvm开发语言
    一、synchronized锁加到什么地方synchronized上锁，其实锁信息是加在对象头中的markdown，对象中的前四个字节表示markdown；markdown还记录了对象的gc、hashcode信息注意：markdown结构与jvm虚拟机的实现有关，I）32位Hotspot虚拟机markdown结构如下：II）64位Hotspot虚拟机的markdown结构如下：二、synchron
  • 互联网 Java 工程师面试题（Java 面试题四） 苹果酱0567 面试题汇总与解析java中间件开发语言springboot后端
    下面列出这份Java面试问题列表包含的主题多线程，并发及线程基础数据类型转换的基本原则垃圾回收（GC）Java集合框架数组字符串GOF设计模式SOLID抽象类与接口Java基础，如equals和hashcode泛型与枚举JavaIO与NIO常用网络协议Java中的数据结构和算法正则表达式JVM底层Java最佳实JDBCDate,Time与CalendarJava处理XMLJUnit编程现在是时候给
  • Java String 文字（Literal）和 对象（Object）初始化 HoneyMoose
    当我们创建String对象的时候，如果使用new()的方式来创建一个String对象，JVM将会每次都会在heap内存中为我们创建的String对象开辟一个存储空间来进行存储。但是，如果我们使用赋值方式创建String对象的话，JVM首先将会对我们赋的值到StringPool中进行查找，如果找到的话，就返回已经存在这个值的引用。如果没有找到，就创建一个新的String对象并且返回这个创建对象的引用
  • Java面试题--JVM大厂篇之深入解析JVM中的Serial GC：工作原理与代际区别 青云交 Java大厂面试题Java虚拟机（JVM）专栏Java技术栈SerialGC工作原理年轻代垃圾回收MinorGC老年代垃圾回收MajorGCFullGC年轻代和老年代的区别SerialGC垃圾收集器单线程垃圾收集器
    目录引言：正文：一、SerialGC工作原理年轻代垃圾回收（MinorGC）：老年代垃圾回收（MajorGC或FullGC）：二、年轻代和老年代的区别年轻代（YoungGeneration）：老年代（OldGeneration）：结束语：引言：Java虚拟机（JVM）作为Java程序的运行环境，其性能和稳定性在很大程度上依赖于垃圾收集器（GC）的效率。SerialGC是JVM中最古老也是最简单的一
  • JAVA相关知识 M_灵均 javajvm开发语言
    JAVA基础知识说一下对象创建的过程？类加载检查：当Java虚拟机（JVM）遇到一个类的new指令时，它首先检查这个类是否已经被加载、链接和初始化。如果没有，JVM会通过类加载器（ClassLoader）加载这个类。分配内存：JVM为新对象分配内存。这个内存分配是在堆（Heap）上进行的，堆是JVM用来存储对象实例的地方。分配内存的大小在类加载时就已经确定，因为类的结构（包括字段和方法）已经确定。
  • Java中的垃圾回收机制是如何工作的？ Good_tea_h javajvm算法
    Java中的垃圾回收机制（GarbageCollection,GC）是Java虚拟机（JVM）的一个重要组成部分，它负责自动管理内存的分配和释放，以减轻程序员在内存管理方面的负担，并防止内存泄漏和内存溢出等问题。一、垃圾回收机制的核心思想Java的垃圾回收机制主要基于两个核心思想：标记和回收。标记：垃圾收集器会定期自动扫描内存中的对象，根据特定的算法（如可达性分析法）来判断哪些对象已经不再被程序使
  • JVM---内存管理 Wangwq. 八股文JVM
    JVM是一种用于计算设备的规范，他是一个虚构的计算机。是通过在实际的计算机上的仿真模拟各种计算机的功能来实现的。引入java虚拟机后，java语言在不同的平台上运行时不需要重新编译，运行字节码即可。五大内存区域1、方法区（1）所有线程共享的内存区域（2）用于存储已被虚拟机加载的类信息、常量、静态常量等。如：被static修饰的常量（3）方法区中的信息来源于类装载子系统，其加载class信息（4）这
  • Android 高频面试必问之Java基础 2401_86022611 android面试java
    常用的JVM调参如下表：|参数|作用描述||—|—||-XX:MetaspaceSize|分配给Metaspace（以字节计）的初始大小。如果不设置的话，默认是20.79M，这个初始大小是触发首次MetaspaceFullGC的阈值，例如-XX:MetaspaceSize=256M||-XX:MaxMetaspaceSize|分配给Metaspace的最大值，超过此值就会触发FullGC，此值默认
  • 源码到class字节码的编译流程 & 字节码到内存的Java类加载流程 Tinty0o0 java开发语言
    类加载：字节码—>内存Java类的加载流程是一个复杂但有序的过程，它确保了类文件能够被正确地加载到Java虚拟机（JVM）中，并被正确地初始化和使用。这个过程主要包括以下几个阶段：1.加载（Loading）加载阶段是类加载过程的第一个阶段。在这个阶段，JVM通过类加载器（ClassLoader）完成以下三件事情：通过一个类的全限定名（包括包名和类名）来获取定义此类的二进制字节流。将这个字节流所代表
  • Java面试题--JVM大厂篇之JVM大厂面试题及答案解析（5） 青云交 Java虚拟机（JVM）专栏Java大厂面试题javajvm垃圾收集器类加载器JVM面试题JVM大厂面试题及答案解析
    亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：1.
  • Java面试题--JVM大厂篇之未来已来：为什么ZGC是大规模Java应用的终极武器？ 青云交 Java虚拟机（JVM）专栏Java技术栈Javajavajvm大规模Java应用的终极武器ZGC的技术进化历程ZGC的优势解析ZGC在不同场景中的应用ZGC未来发展和改进方向
    亲爱的朋友们，热烈欢迎你们来到我的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：1.Ja
  • 揭秘Java世界的清洁工——JVM垃圾回收机制 青云交 Java大厂面试题Java虚拟机（JVM）专栏javajvmJava世界的清洁工JVM垃圾回收机制堆内存引用计数vs.可达性分析标记清扫压缩
    在我们深入探索Java虚拟机（JVM）神秘世界的奇幻之旅中，有一件魔法工具始终令我着迷--那就是JVM的垃圾回收机制。这项技术就像一个无形的魔法师，默默清理掉那些被遗忘的、不再需要的东西，保证了Java世界的整洁和有序。今天，让我们从Java之父的视角，一探究竟。引言：在设计Java的过程中，我们有一个宏伟的梦想：打造一种能够自行处理零碎和废弃数据的语言，让开发者能够释放其创造力，不再被繁琐的内存
  • Java程序员必学：JVM架构完全解读 青云交 javajvm架构类加载机制JVM性能调优内存管理垃圾回收
    引言:在Java的世界里，Java虚拟机（JVM）扮演着不可或缺的角色——它是Java的心脏，是Java能够跨平台运行的原因之一。对Java开发者来说，深入理解JVM的内部机制，不仅能够编写更高效的代码，还能够有效地调优和解决生产环境中的问题。本文旨在提供一篇全面而深入的探讨，解析JVM的工作原理和优化策略，为Java开发者提升技能提供指导。JVM基础知识深入浅出地介绍Java虚拟机的基石——从J
  • JVM 架构 : 运行时数据区 & 内存结构 光剑书架上的书
    JVM:JavaVirtualMachine架构JVMArchitectureRuntimeDataArea/MemoryStructureClassloaderClassloaderisasubsysteminJVM,whichisprimarilyresponasibleforloadingthejavaclasses,thereare3differentclassloaders:Bootst
  • java正常_Java正常关闭资源的方式 这是eno java正常
    在实际开发中，经常需要在程序中打开一些物理资源，如数据库连接、网络连接、磁盘文件等，打开这些物理资源之后必须显式关闭，否则将会引起资源泄漏。JVM的垃圾回收机制不会回收这些资源，垃圾回收机制属于Java内存管理的一部分，它只是负责回收堆内存中分配出来的内存，至于程序中打开的物理资源，垃圾回收机制是无能为力的。为了正常关闭程序中打开的物理资源，应该使用finally块来保证回收。下面程序示范了常见的
  • JVM垃圾回收（Garbage Collection）机制 小码ssim jvm
    1、定义描述Java的垃圾回收（GarbageCollection，GC）机制是Java虚拟机（JVM）的一项关键功能，旨在自动管理内存，回收不再使用的对象，保证程序运行过程中不出现内存泄漏和内存溢出。2、回收位置VM内存结构中，垃圾回收的主要工作集中在堆内存区域（回收无引用或循环的废弃对象实例）。其他内存区域，如方法区（存储元数据，常量、静态变量和即将编译的代码，垃圾回收不频繁，且不如堆内存高效
  • 多线程的使用--＞5：并发编程的特性 路ZP java开发语言
    目录1.并发编程特性：2.并发编程的特性之一：原子性3.并发编程的特性之一：可见性3.1JVM内存模型3.2JMM（Java内存模型）4.并发编程的特性之一：有序性1.并发编程特性：多线程是一种程序开发或设计环境并发编程是一种程序设计概念或设计目标，在多线程开发环境中，同一系列的程序设计与机制的使用，确保多线程开发环境是稳定的，快速的，性能优秀的。并发编程具有3个特征原子性可见性有序性在多线程开发
  • Kotlin 极简小抄 P1（变量与常量、基本数据类型、流程控制） 我命由我12345 Kotlin-极简小抄kotlin开发语言android后端学习javajava-ee
    一、KotlinKotlin由JetBrains开发，是一种在JVM（Java虚拟机）上运行的静态类型编程语言Kotlin旨在提高开发者的编码效率和安全性，同时保持与Java的高度互操作性Kotlin是Android应用开发的首选语言，也可以与Java一样用于服务器端开发二、Kotlin极简小抄1、初体验funmain(){println("HelloWorld")}2、注释//这是单行注释/*这
  • JVM工作过程 一只BI鱼 每日面经整理笔记jvmjava
    将JVM工作过程粗略分为5个阶段，包括加载阶段、链接阶段、初始化阶段、执行阶段、回收阶段其中，（1）加载阶段、链接阶段的解析部分主要由类加载器完成（2）初始化阶段是由JVM的类加载机制在类加载过程的最后阶段自动触发的。（3）执行阶段主要由执行引擎负责（4）回收阶段主要是垃圾收集器（GarbageCollector）负责。所以，在Java虚拟机（JVM）中，读取字节码文件、解析字节码文件为类信息，并
  • 什么是JVM？它有什么作用？ xiangpingeasy Java面试题jvm
    Java虚拟机（JVM）是运行所有Java程序的软件平台，它独立于硬件和操作系统。JVM是Java技术的核心部分，使得Java能够实现“一次编写，到处运行”（WriteOnce,RunAnywhere，WORA）的特性。JVM主要有以下作用：1.程序的执行JVM负责读取Java字节码（.class文件），并将其转换为机器码执行。这个过程可以通过解释执行（逐行转换并运行）或JIT编译执行（将字节码编
  • Redis:缓存雪崩 我的程序快快跑啊 缓存redisjava
    缓存雪崩：大量的key同时失效或redis服务宕机，导致大量请求直接到达数据库,造成巨大压力解决方案：1.给不同的key的TTL+随机数，使其分散在一个时间段内2.利用redis集群提高redis服务的可靠性3.给缓存业务添加降级限流策略4.添加多级缓存(nginx,jvm等)
  • JVM是什么？ .suki... JVM1024程序员节
    JVM是java虚拟机栈，用于运行java执行字节码文件的。是java实现跨平台的核心机制，因为它的目的是使用相同的字节码文件，在不同的操作系统运行的结果相同。一、java内存模型在JDK1.8之前，它是分为线程共享和线程私有的，在线程共享的部分分为堆区和方法区；在线程私有的部分分为jvm虚拟机栈、程序计数器、本地方法栈。在1.8之后，它是将方法区换为元空间。jvm虚拟机栈：是由一个个的栈帧组成，
  • ASM系列五 利用TreeApi 解析生成Class lijingyao8206 ASM字节码动态生成ClassNodeTreeAPI
       前面CoreApi的介绍部分基本涵盖了ASMCore包下面的主要API及功能，其中还有一部分关于MetaData的解析和生成就不再赘述。这篇开始介绍ASM另一部分主要的Api。TreeApi。这一部分源码是关联的asm-tree-5.0.4的版本。          在介绍前，先要知道一点， Tree工程的接口基本可以完
  • 链表树——复合数据结构应用实例 bardo 数据结构树型结构表结构设计链表菜单排序
    我们清楚：数据库设计中，表结构设计的好坏，直接影响程序的复杂度。所以，本文就无限级分类（目录）树与链表的复合在表设计中的应用进行探讨。当然，什么是树，什么是链表，这里不作介绍。有兴趣可以去看相关的教材。 需求简介： 经常遇到这样的需求，我们希望能将保存在数据库中的树结构能够按确定的顺序读出来。比如，多级菜单、组织结构、商品分类。更具体的，我们希望某个二级菜单在这一级别中就是第一个。虽然它是最后
  • 为啥要用位运算代替取模呢 chenchao051 位运算哈希汇编
        在hash中查找key的时候，经常会发现用&取代%，先看两段代码吧，     JDK6中的HashMap中的indexFor方法： /** * Returns index for hash code h. */ static int indexFor(int h, int length) {
  • 最近的情况 麦田的设计者 生活感悟计划软考想
          今天是2015年4月27号      整理一下最近的思绪以及要完成的任务             1、最近在驾校科目二练车，每周四天，练三周。其实做什么都要用心，追求合理的途径解决。为
  • PHP去掉字符串中最后一个字符的方法 IT独行者 PHP字符串
    今天在PHP项目开发中遇到一个需求，去掉字符串中的最后一个字符 原字符串1,2,3,4,5,6, 去掉最后一个字符","，最终结果为1,2,3,4,5,6 代码如下： $str = "1,2,3,4,5,6,"; $newstr = substr($str,0,strlen($str)-1); echo $newstr;
  • hadoop在linux上单机安装过程 _wy_ linuxhadoop
    1、安装JDK     jdk版本最好是1.6以上，可以使用执行命令java -version查看当前JAVA版本号，如果报命令不存在或版本比较低，则需要安装一个高版本的JDK，并在/etc/profile的文件末尾，根据本机JDK实际的安装位置加上以下几行：    export JAVA_HOME=/usr/java/jdk1.7.0_25  
  • JAVA进阶----分布式事务的一种简单处理方法 无量 多系统交互分布式事务
    每个方法都是原子操作： 提供第三方服务的系统，要同时提供执行方法和对应的回滚方法 A系统调用B,C,D系统完成分布式事务 =========执行开始======== A.aa(); try { B.bb(); } catch(Exception e) { A.rollbackAa(); } try { C.cc(); } catch(Excep
  • 安墨移动广 告：移动DSP厚积薄发 引领未来广 告业发展命脉 矮蛋蛋 hadoop互联网
    　　“谁掌握了强大的DSP技术，谁将引领未来的广 告行业发展命脉。”2014年，移动广 告行业的热点非移动DSP莫属。各个圈子都在纷纷谈论，认为移动DSP是行业突破点，一时间许多移动广 告联盟风起云涌，竞相推出专属移动DSP产品。 　　到底什么是移动DSP呢? 　　DSP(Demand-SidePlatform)，就是需求方平台，为解决广 告主投放的各种需求，真正实现人群定位的精准广
  • myelipse设置 alafqq IP
      在一个项目的完整的生命周期中，其维护费用，往往是其开发费用的数倍。因此项目的可维护性、可复用性是衡量一个项目好坏的关键。而注释则是可维护性中必不可少的一环。 注释模板导入步骤  安装方法： 打开eclipse/myeclipse 选择 window-->Preferences-->JAVA-->Code-->Code
  • java数组 百合不是茶 java数组
    java数组的   声明  创建  初始化；   java支持C语言      数组中的每个数都有唯一的一个下标 一维数组的定义 声明： int[] a = new int[3];声明数组中有三个数int[3] int[] a 中有三个数，下标从0开始，可以同过for来遍历数组中的数
  • javascript读取表单数据 bijian1013 JavaScript
    利用javascript读取表单数据，可以利用以下三种方法获取： 1、通过表单ID属性：var a = document.getElementByIdx_x_x("id"); 2、通过表单名称属性：var b = document.getElementsByName("name"); 3、直接通过表单名字获取：var c = form.content.
  • 探索JUnit4扩展：使用Theory bijian1013 javaJUnitTheory
    理论机制（Theory） 一.为什么要引用理论机制（Theory）         当今软件开发中，测试驱动开发（TDD — Test-driven development）越发流行。为什么 TDD 会如此流行呢？因为它确实拥有很多优点，它允许开发人员通过简单的例子来指定和表明他们代码的行为意图。 TDD 的优点：     &nb
  • [Spring Data Mongo一]Spring Mongo Template操作MongoDB bit1129 template
    什么是Spring Data Mongo Spring Data MongoDB项目对访问MongoDB的Java客户端API进行了封装，这种封装类似于Spring封装Hibernate和JDBC而提供的HibernateTemplate和JDBCTemplate，主要能力包括 1. 封装客户端跟MongoDB的链接管理 2. 文档-对象映射，通过注解:@Document(collectio
  • 【Kafka八】Zookeeper上关于Kafka的配置信息 bit1129 zookeeper
    问题： 1. Kafka的哪些信息记录在Zookeeper中 2. Consumer Group消费的每个Partition的Offset信息存放在什么位置 3. Topic的每个Partition存放在哪个Broker上的信息存放在哪里 4. Producer跟Zookeeper究竟有没有关系？没有关系！！！   //consumers、config、brokers、cont
  • java OOM内存异常的四种类型及异常与解决方案 ronin47 java OOM 内存异常
          　OOM异常的四种类型： 　　　 　　一：　StackOverflowError ：通常因为递归函数引起（死递归，递归太深）。-Xss 128k 一般够用。     　  二：　out Of memory: PermGen Space：通常是动态类大多，比如web 服务器自动更新部署时引起。-Xmx
  • java-实现链表反转-递归和非递归实现 bylijinnan java
    20120422更新： 对链表中部分节点进行反转操作，这些节点相隔k个： 0->1->2->3->4->5->6->7->8->9 k=2 8->1->6->3->4->5->2->7->0->9 注意1 3 5 7 9 位置是不变的。 解法： 将链表拆成两部分： a.0-&
  • Netty源码学习-DelimiterBasedFrameDecoder bylijinnan javanetty
    看DelimiterBasedFrameDecoder的API，有举例： 接收到的ChannelBuffer如下： +--------------+ | ABC\nDEF\r\n | +--------------+ 经过DelimiterBasedFrameDecoder(Delimiters.lineDelimiter())之后，得到： +-----+----
  • linux的一些命令 -查看cc攻击-网口ip统计等 hotsunshine linux
    Linux判断CC攻击命令详解 2011年12月23日 ⁄ 安全 ⁄ 暂无评论 查看所有80端口的连接数 netstat -nat|grep -i '80'|wc -l 对连接的IP按连接数量进行排序 netstat -ntu | awk '{print $5}' | cut -d: -f1 | sort | uniq -c | sort -n 查看TCP连接状态 n
  • Spring获取SessionFactory ctrain sessionFactory
    String sql = "select sysdate from dual"; WebApplicationContext wac = ContextLoader.getCurrentWebApplicationContext(); String[] names = wac.getBeanDefinitionNames(); for(int i=0; i&
  • Hive几种导出数据方式 daizj hive数据导出
    Hive几种导出数据方式   1.拷贝文件   如果数据文件恰好是用户需要的格式，那么只需要拷贝文件或文件夹就可以。 hadoop fs –cp source_path target_path   2.导出到本地文件系统   --不能使用insert into local directory来导出数据，会报错 --只能使用
  • 编程之美 dcj3sjt126com 编程PHP重构
    我个人的 PHP 编程经验中，递归调用常常与静态变量使用。静态变量的含义可以参考 PHP 手册。希望下面的代码，会更有利于对递归以及静态变量的理解   header("Content-type: text/plain"); function static_function () { static $i = 0; if ($i++ < 1
  • Android保存用户名和密码 dcj3sjt126com android
    转自：http://www.2cto.com/kf/201401/272336.html 我们不管在开发一个项目或者使用别人的项目，都有用户登录功能，为了让用户的体验效果更好，我们通常会做一个功能，叫做保存用户，这样做的目地就是为了让用户下一次再使用该程序不会重新输入用户名和密码，这里我使用3种方式来存储用户名和密码 1、通过普通 的txt文本存储 2、通过properties属性文件进行存
  • Oracle 复习笔记之同义词 eksliang Oracle 同义词Oracle synonym
    转载请出自出处：http://eksliang.iteye.com/blog/2098861 1.什么是同义词       同义词是现有模式对象的一个别名。       概念性的东西，什么是模式呢？创建一个用户，就相应的创建了 一个模式。模式是指数据库对象，是对用户所创建的数据对象的总称。模式对象包括表、视图、索引、同义词、序列、过
  • Ajax案例 gongmeitao Ajaxjsp
    数据库采用Sql Server2005 项目名称为:Ajax_Demo 1.com.demo.conn包 package com.demo.conn; import java.sql.Connection;import java.sql.DriverManager;import java.sql.SQLException; //获取数据库连接的类public class DBConnec
  • ASP.NET中Request.RawUrl、Request.Url的区别 hvt .netWebC#asp.nethovertree
      如果访问的地址是：http://h.keleyi.com/guestbook/addmessage.aspx?key=hovertree%3C&n=myslider#zonemenu那么Request.Url.ToString() 的值是：http://h.keleyi.com/guestbook/addmessage.aspx?key=hovertree<&
  • SVG 教程 （七）SVG 实例，SVG 参考手册 天梯梦 svg
    SVG 实例 在线实例 下面的例子是把SVG代码直接嵌入到HTML代码中。 谷歌Chrome，火狐，Internet Explorer9，和Safari都支持。 注意：下面的例子将不会在Opera运行，即使Opera支持SVG - 它也不支持SVG在HTML代码中直接使用。   SVG 实例 SVG基本形状 一个圆 矩形 不透明矩形 一个矩形不透明2 一个带圆角矩
  • 事务管理 luyulong javaspring编程事务
    事物管理 spring事物的好处 为不同的事物API提供了一致的编程模型 支持声明式事务管理 提供比大多数事务API更简单更易于使用的编程式事务管理API 整合spring的各种数据访问抽象 TransactionDefinition 定义了事务策略 int getIsolationLevel()得到当前事务的隔离级别 READ_COMMITTED 
  • 基础数据结构和算法十一：Red-black binary search tree sunwinner AlgorithmRed-black
      The insertion algorithm for 2-3 trees just described is not difficult to understand; now, we will see that it is also not difficult to implement. We will consider a simple representation known
  • centos同步时间 stunizhengjia linux集群同步时间
    做了集群，时间的同步就显得非常必要了。 以下是查到的如何做时间同步。 在CentOS 5不再区分客户端和服务器，只要配置了NTP，它就会提供NTP服务。 1)确认已经ntp程序包： # yum install ntp 2)配置时间源（默认就行，不需要修改） # vi /etc/ntp.conf server pool.ntp.o
  • ITeye 9月技术图书有奖试读获奖名单公布 ITeye管理员 ITeye
    ITeye携手博文视点举办的9月技术图书有奖试读活动已圆满结束，非常感谢广大用户对本次活动的关注与参与。 9月试读活动回顾：http://webmaster.iteye.com/blog/2118112本次技术图书试读活动的优秀奖获奖名单及相应作品如下（优秀文章有很多，但名额有限，没获奖并不代表不优秀）：      《NFC：Arduino、Andro
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他