- Virtualbox6.1 SATA控制器默认设置导致jbd2低效磁盘访问
快乐的阿常艾念宝
笔记virtualboxjbd2ubuntu
在Ubuntu20.04桌面环境中，我安装了Virtualbox6.1虚拟机环境，并新增了Ubuntu18.04Server的虚拟机玩玩在Ubuntu18.04虚拟机中，安装软件资源时，总是耗费比较长的时间，而在另外一个以Centos7为Host环境虚拟机中没有产生类似问题，所以，觉得有必要深入跟踪下。幸而，Linux中提供了各种'''*top‘’‘’工具，用**iotop**查看了下竟然是系统进
- 记录一次jbd2不停写磁盘原因追查
mini-coco
linux服务器运维jbd2ubuntuext4
起因最近买了两块16T氦气硬盘挂在小主机上当仓库盘使用,硬盘配置了自动休眠,具体系统配置如下:CPU:IntelN5105操作系统:ubuntu20.04硬盘休眠:hd-idle因为是企业盘的原因，并不支持电源管理，要么运行，要么停止，试了一下就只有hd-idle能让他停下，hdparam是基于电源管理的，对这个机械硬盘并不起作用。一切配置好后本以为万事大吉了，谁成想到时间后硬盘就是不能休眠，观察
- Jbd2：Hadoop
JxWang05
Juicy_Big_Datahadoopbigdatahdfs
Jbd2：Hadoop1.发展历史2.主要特性3.部分组件3.1HDFS3.2HBase3.3Sqoop3.4Zookeeper4.实践操作4.1创建Hadoop用户4.2安装Java4.2.1安装jdk4.2.2修改环境变量4.2.3SSH登录权限设置4.3单机版Hadoop4.3.1安装Hadoop4.3.2修改系统环境变量4.3.3修改hadoop-env.sh文件配置4.4伪分布式Hado
- 解决 Ubuntu 20.04 硬盘灯不停闪的问题
stlinax
信息整理安装技巧ubuntu
1、通过iotop命令查出占用硬盘IO多的进程sudoaptinstalliotopsudoiotop查出[jbd2/sda1-8]，占用一直在20%左右。上网查了，大概是因为这个jbd2进程关系到硬盘报告日志时是即时的，因而一刻也不停的读取和写入日志。这是一个内核进程，用sudokill命令是杀不死的。这是个时不时会出现的老毛病，曾经在Ubuntu以前的多次内核升级中出现过问题（目前我的电脑Ub
- jbd2导致系统IO使用率高问题
wangtingting_100
Linux
收到IO占用高告警系统信息：Linuxversion2.6.32-696.18.7.1.el6.ucloud.x86_64(root@59c188f3c79d)(gccversion4.4.620120305(RedHat4.4.6-5)(GCC))#1SMPFriJan516:48:58CST20181、到机器上看到io使用率忽高，同时iowait也高$iostat-d-x1Linux2.6.3
- 限制系统资源的方法
weixin_34010566
[root@db-mysql-1~]#/etc/init.d/cgconfigstart[root@db-mysql-1~]#chkconfigcgconfigon[root@db-mysql-1~]#iotopTIDPRIOUSERDISKREADDISKWRITESWAPINIO>COMMAND12704be/3root0.00B/s0.00B/s0.00%99.99%[jbd2/sdb-8]
- 解决挂载ext4格式文件系统错误 JBD2: Unrecognised features on journal问题
这个ID洒家要了
工具类
1.mountdemo.img/mntdmesg报如下错误[1479130.280508]JBD2:Unrecognisedfeaturesonjournal[1479130.280512]EXT4-fs(loop1):errorloadingjournal2.原因出现该问题主要是由于host上新版的mkfs.ext4工具在制作镜像时部分默认的特性在orangePi的内核上不支持；3.解决办法：去
- iotop发现jdb2/sdb1-8 io使用过高解决办法
sky_cheng
一、现象[root@push-5-221~]#iotopotalDISKREAD:0.00B/s|TotalDISKWRITE:6.26M/sTIDPRIOUSERDISKREADDISKWRITESWAPINIO>COMMAND795be/3root0.00B/s0.00B/s0.00%95.80%[jbd2/dm-0-8]22952be/4rabbitmq0.00B/s4.04M/s0.00%
- ext4日志系统分析（二）
ppingfann
linux内核源码分析
一、背景上篇博客介绍了jbd2模块的安装与卸载。同时也讲了安装时初始化函数会在/proc/fs下创建一个jbd2目录。这篇博客打算介绍一下在jbd2模块被安装后内核是如何对日志系统进行初始化的，以及jbd2目录下的文件是从哪里来的。这里所涉及的东西较多，所以我只挑重点功能函数来讲。二、jbd2目录不知道大家还记得吗，上一篇博客我提到在安装jbd2模块时，内核会在/proc/fs下创建一个jbd2目
- 性能分析之IO分析-jbd2引起的IO高
花露丝雨
性能测试
性能分析之IO分析-jbd2引起的IO高这几天进入了一个项目组做性能测试、性能调优分析相关的工作。今天在压力起来之后，几个命令就看到了一个问题。分享一下。系统架构就不说了，典型的java应用。脚本是用jmeter写的javarequest。压力发起来之后，并发线程的增加并没有看到TPS明显的提升。于是看了一下top中的状态：从上图可以看到CPU总体使用率并不高。但是有一个地方需要格外注意。第一个C
- 限制系统资源的方法
chenshifei
系统资源
[root@db-mysql-1~]#/etc/init.d/cgconfigstart[root@db-mysql-1~]#chkconfigcgconfigon[root@db-mysql-1~]#iotopTIDPRIOUSERDISKREADDISKWRITESWAPINIO>COMMAND12704be/3root0.00B/s0.00B/s0.00%99.99%[jbd2/sdb-8]
- 系统负载很高但cpu很空闲
小雨yyy
SDAJBD2
系统负载很高但cpu很空闲前端一台apache负载突然到1000但进服务器查看并没有什么进程占用cpu而且系统很正常于是top看了下异常进程，vmstat查看到有一些io等待时间，仔细看了下有个jbd2/sda6-8的进程一直在运行，但占的cpu也不高，网上查了下，没找到原因我又看了一眼注意到了sda6以为硬盘坏了df-h看了下，/usr/local目录空间满了正好挂载的是sda6，赶紧清理了下，
- 系统负载很高但cpu很空闲
小雨yyy
sdajbd2笔记
系统负载很高但cpu很空闲前端一台apache负载突然到1000但进服务器查看并没有什么进程占用cpu而且系统很正常于是top看了下异常进程，vmstat查看到有一些io等待时间，仔细看了下有个jbd2/sda6-8的进程一直在运行，但占的cpu也不高，网上查了下，没找到原因我又看了一眼注意到了sda6以为硬盘坏了df-h看了下，/usr/local目录空间满了正好挂载的是sda6，赶紧清理了下，
- 一次非线上iowait高的情况的检查
wait
一、现象
iowait高达30%。使用iotop查知jbd2/sda6-8占用60%的io写入。mongodb每秒写入达400k。
必然复现
二、排查
1、先检查是不是mongodb引起的
将mongodb的数据文件放入tmpfs并在tmpfs上启动mongodb。iowait降低为正常范围，说明是由mongodb引起的。
由于mongodb的直接处理方为另一进
- JDB2导致磁盘io使用率高
Jx战壕
IOkernelbugext4barrierJBD2
前几天碰到jbd2进程占用大量的磁盘io，用iotop查看到的情况大致如下：系统版本：CentOS6.5-64bit 经查为ext4文件系统的一个bug: 先给出解决方案，处理此问题的优先级为：1、yumupdatekernel用yum升级系统内核，重启之后查看是否有效；2、缓解方法：修改commit值，降低文件系统提交次数或者禁用barrier特性；建议文件系统参数为：def
- JDB2导致磁盘io使用率高
Jx战壕
IOkernelbugext4barrierJBD2
前几天碰到jbd2进程占用大量的磁盘io，用iotop查看到的情况大致如下：系统版本：CentOS6.5-64bit 经查为ext4文件系统的一个bug: 先给出解决方案，处理此问题的优先级为：1、yumupdatekernel用yum升级系统内核，重启之后查看是否有效；2、缓解方法：修改commit值，降低文件系统提交次数或者禁用barrier特性；建议文件系统参数为：def
- JDB2导致磁盘io使用率高
Jx战壕
kernelbugIOSystem/Service
前几天碰到jbd2进程占用大量的磁盘io，用iotop查看到的情况大致如下：系统版本：CentOS6.5-64bit经查为ext4文件系统的一个bug:先给出解决方案，处理此问题的优先级为：1、yumupdatekernel用yum升级系统内核，重启之后查看是否有效；2、缓解方法：修改commit值，降低文件系统提交次数或者禁用barrier特性；建议文件系统参数为：defaults,noatim
- RHEL 6.4（centOs 6.4) jdb2进程占用io过高
heishi317
mysql检测去哪里linux
某日在检测一系统性能时，发现io性能总是无故被消耗，即使应用程序很空闲，io使用程度也很高.使用iotop工具查看io情况.TotalDISKREAD:0.00B/s|TotalDISKWRITE:0.00B/sTIDPRIOUSERDISKREADDISKWRITESWAPINIO>COMMAND3584be/4mysql0.00B/s0.00B/s0.00%0.00%[jbd2/dm-0-8]
- JBD2:Deteced IO errors while flushing fle datea on dm-0-8
fengyuzaitu
JBD2
问题分析：一：JBD2是什么二：dm-0-8是什么使用iotop查看进程产生IO读写的性能： 403be/3root 0.00B 516.00K 0.00% 0.00%[jbd2/dm-0-8] 378be/4root 0.00B 0.00B 0.00% 0.00%[kcopyd]
- [ext4]08 磁盘布局 - CheckSums
iamonlyme
ext4磁盘布局
从2012年开始，Ext4和jbd2的元数据中都开始加入checksums。特性标识是metadata_csum。Checksum算法是在super_block中指定：structext4_super_block{… __u8 s_log_groups_per_flex; /*FLEX_BGgroupsize*/ __u8 s_checksum_type; /*metadatache
- 认识linux进程
yang2001
linux用户进程守护空间服务
这些进程是干嘛的？[ksuspend_usbd] [kstriped] [ksnapd] [kondemand/0] [kondemand/1] [kconservative/0] [kconservative/1][usbhid_resumer] [kdmflush] [ksnaphd] [jbd2/dm-0-8
- iotop 进程简介
xitong
top
ksuspend_usbd]
[kstriped]
[ksnapd]
[kondemand/0]
[kondemand/1]
[kconservative/0]
[kconservative/1]
[usbhid_resumer]
[kdmflush]
[ksnaphd]
[jbd2/dm-0-8]
[ksnaphd]
这些 进程简介得还行
- iotop 进程简介
xitong
top
ksuspend_usbd]
[kstriped]
[ksnapd]
[kondemand/0]
[kondemand/1]
[kconservative/0]
[kconservative/1]
[usbhid_resumer]
[kdmflush]
[ksnaphd]
[jbd2/dm-0-8]
[ksnaphd]
这些 进程简介得还行
- Linux Kernel v2.6.27.8
izuoyan
kernel
Linux Kernel v2.6.27.8 已正式发布，作为 Linux 系统的内核，Linux Kernel 的每一次版本更新都会带来大量新增特性。
Linux Kernel v2.6.27.8 主要更新如下： =========================== jbd: ordered data integrity fix jbd2: don't give up looking fo
- 深入浅出Java Annotation(元注解和自定义注解）
Josh_Persistence
Java Annotation元注解自定义注解
一、基本概述
Annontation是Java5开始引入的新特征。中文名称一般叫注解。它提供了一种安全的类似注释的机制，用来将任何的信息或元数据（metadata）与程序元素（类、方法、成员变量等）进行关联。
更通俗的意思是为程序的元素（类、方法、成员变量）加上更直观更明了的说明，这些说明信息是与程序的业务逻辑无关，并且是供指定的工具或
- mysql优化特定类型的查询
annan211
java工作mysql
本节所介绍的查询优化的技巧都是和特定版本相关的，所以对于未来mysql的版本未必适用。
1 优化count查询
对于count这个函数的网上的大部分资料都是错误的或者是理解的都是一知半解的。在做优化之前我们先来看看
真正的count()函数的作用到底是什么。
count()是一个特殊的函数，有两种非常不同的作用，他可以统计某个列值的数量，也可以统计行数。
在统
- MAC下安装多版本JDK和切换几种方式
棋子chessman
jdk
环境：
MAC AIR,OS X 10.10,64位
历史：
过去 Mac 上的 Java 都是由 Apple 自己提供，只支持到 Java 6，并且OS X 10.7 开始系统并不自带（而是可选安装）（原自带的是1.6）。
后来 Apple 加入 OpenJDK 继续支持 Java 6，而 Java 7 将由 Oracle 负责提供。
在终端中输入jav
- javaScript （1）
Array_06
JavaScriptjava浏览器
JavaScript
1、运算符
运算符就是完成操作的一系列符号，它有七类： 赋值运算符（=,+=,-=,*=,/=,%=,<<=,>>=,|=,&=）、算术运算符(+,-,*,/,++,--,%)、比较运算符(>,<,<=,>=,==,===,!=,!==)、逻辑运算符(||,&&,!)、条件运算(?:)、位
- 国内顶级代码分享网站
袁潇含
javajdkoracle.netPHP
现在国内很多开源网站感觉都是为了利益而做的
当然利益是肯定的,否则谁也不会免费的去做网站
&
- Elasticsearch、MongoDB和Hadoop比较
随意而生
mongodbhadoop搜索引擎
IT界在过去几年中出现了一个有趣的现象。很多新的技术出现并立即拥抱了“大数据”。稍微老一点的技术也会将大数据添进自己的特性，避免落大部队太远，我们看到了不同技术之间的边际的模糊化。假如你有诸如Elasticsearch或者Solr这样的搜索引擎，它们存储着JSON文档，MongoDB存着JSON文档，或者一堆JSON文档存放在一个Hadoop集群的HDFS中。你可以使用这三种配
- mac os 系统科研软件总结
张亚雄
mac os
1.1 Microsoft Office for Mac 2011
大客户版，自行搜索。
1.2 Latex （MacTex）:
系统环境：https://tug.org/mactex/
&nb
- Maven实战（四）生命周期
AdyZhang
maven
1. 三套生命周期 Maven拥有三套相互独立的生命周期，它们分别为clean，default和site。 每个生命周期包含一些阶段，这些阶段是有顺序的，并且后面的阶段依赖于前面的阶段，用户和Maven最直接的交互方式就是调用这些生命周期阶段。 以clean生命周期为例，它包含的阶段有pre-clean, clean 和 post
- Linux下Jenkins迁移
aijuans
Jenkins
1. 将Jenkins程序目录copy过去 源程序在/export/data/tomcatRoot/ofctest-jenkins.jd.com下面 tar -cvzf jenkins.tar.gz ofctest-jenkins.jd.com &
- request.getInputStream()只能获取一次的问题
ayaoxinchao
requestInputstream
问题：在使用HTTP协议实现应用间接口通信时，服务端读取客户端请求过来的数据，会用到request.getInputStream()，第一次读取的时候可以读取到数据，但是接下来的读取操作都读取不到数据
原因： 1. 一个InputStream对象在被读取完成后，将无法被再次读取，始终返回-1； 2. InputStream并没有实现reset方法（可以重
- 数据库SQL优化大总结之 百万级数据库优化方案
BigBird2012
SQL优化
网上关于SQL优化的教程很多，但是比较杂乱。近日有空整理了一下，写出来跟大家分享一下，其中有错误和不足的地方，还请大家纠正补充。
这篇文章我花费了大量的时间查找资料、修改、排版，希望大家阅读之后，感觉好的话推荐给更多的人，让更多的人看到、纠正以及补充。
1.对查询进行优化，要尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。
2.应尽量避免在 where
- jsonObject的使用
bijian1013
javajson
在项目中难免会用java处理json格式的数据，因此封装了一个JSONUtil工具类。
JSONUtil.java
package com.bijian.json.study;
import java.util.ArrayList;
import java.util.Date;
import java.util.HashMap;
- [Zookeeper学习笔记之六]Zookeeper源代码分析之Zookeeper.WatchRegistration
bit1129
zookeeper
Zookeeper类是Zookeeper提供给用户访问Zookeeper service的主要API，它包含了如下几个内部类
首先分析它的内部类，从WatchRegistration开始，为指定的znode path注册一个Watcher，
/**
* Register a watcher for a particular p
- 【Scala十三】Scala核心七：部分应用函数
bit1129
scala
何为部分应用函数？
Partially applied function: A function that’s used in an expression and that misses some of its arguments.For instance, if function f has type Int => Int => Int, then f and f(1) are p
- Tomcat Error listenerStart 终极大法
ronin47
tomcat
Tomcat报的错太含糊了，什么错都没报出来，只提示了Error listenerStart。为了调试，我们要获得更详细的日志。可以在WEB-INF/classes目录下新建一个文件叫logging.properties，内容如下
Java代码
handlers = org.apache.juli.FileHandler, java.util.logging.ConsoleHa
- 不用加减符号实现加减法
BrokenDreams
实现
今天有群友发了一个问题，要求不用加减符号(包括负号)来实现加减法。
分析一下，先看最简单的情况，假设1+1，按二进制算的话结果是10，可以看到从右往左的第一位变为0，第二位由于进位变为1。
- 读《研磨设计模式》-代码笔记-状态模式-State
bylijinnan
java设计模式
声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/
/*
当一个对象的内在状态改变时允许改变其行为，这个对象看起来像是改变了其类
状态模式主要解决的是当控制一个对象状态的条件表达式过于复杂时的情况
把状态的判断逻辑转移到表示不同状态的一系列类中，可以把复杂的判断逻辑简化
如果在
- CUDA程序block和thread超出硬件允许值时的异常
cherishLC
CUDA
调用CUDA的核函数时指定block 和 thread大小，该大小可以是dim3类型的（三维数组），只用一维时可以是usigned int型的。
以下程序验证了当block或thread大小超出硬件允许值时会产生异常！！！GPU根本不会执行运算！！！
所以验证结果的正确性很重要！！！
在VS中创建CUDA项目会有一个模板，里面有更详细的状态验证。
以下程序在K5000GPU上跑的。
- 诡异的超长时间GC问题定位
chenchao051
jvmcmsGChbaseswap
HBase的GC策略采用PawNew+CMS, 这是大众化的配置，ParNew经常会出现停顿时间特别长的情况，有时候甚至长到令人发指的地步，例如请看如下日志：
2012-10-17T05:54:54.293+0800: 739594.224: [GC 739606.508: [ParNew: 996800K->110720K(996800K), 178.8826900 secs] 3700
- maven环境快速搭建
daizj
安装mavne环境配置
一 下载maven
安装maven之前，要先安装jdk及配置JAVA_HOME环境变量。这个安装和配置java环境不用多说。
maven下载地址：http://maven.apache.org/download.html，目前最新的是这个apache-maven-3.2.5-bin.zip，然后解压在任意位置，最好地址中不要带中文字符，这个做java 的都知道，地址中出现中文会出现很多
- PHP网站安全，避免PHP网站受到攻击的方法
dcj3sjt126com
PHP
对于PHP网站安全主要存在这样几种攻击方式:1、命令注入(Command Injection)2、eval注入(Eval Injection)3、客户端脚本攻击(Script Insertion)4、跨网站脚本攻击(Cross Site Scripting, XSS)5、SQL注入攻击(SQL injection)6、跨网站请求伪造攻击(Cross Site Request Forgerie
- yii中给CGridView设置默认的排序根据时间倒序的方法
dcj3sjt126com
GridView
public function searchWithRelated() {
$criteria = new CDbCriteria;
$criteria->together = true; //without th
- Java集合对象和数组对象的转换
dyy_gusi
java集合
在开发中，我们经常需要将集合对象（List，Set）转换为数组对象，或者将数组对象转换为集合对象。Java提供了相互转换的工具，但是我们使用的时候需要注意，不能乱用滥用。
1、数组对象转换为集合对象
最暴力的方式是new一个集合对象，然后遍历数组，依次将数组中的元素放入到新的集合中，但是这样做显然过
- nginx同一主机部署多个应用
geeksun
nginx
近日有一需求，需要在一台主机上用nginx部署2个php应用，分别是wordpress和wiki，探索了半天，终于部署好了，下面把过程记录下来。
1. 在nginx下创建vhosts目录，用以放置vhost文件。
mkdir vhosts
2. 修改nginx.conf的配置， 在http节点增加下面内容设置，用来包含vhosts里的配置文件
#
- ubuntu添加admin权限的用户账号
hongtoushizi
ubuntuuseradd
ubuntu创建账号的方式通常用到两种：useradd 和adduser . 本人尝试了useradd方法，步骤如下：
1:useradd
使用useradd时，如果后面不加任何参数的话，如：sudo useradd sysadm 创建出来的用户将是默认的三无用户：无home directory ,无密码,无系统shell。
顾应该如下操作：
- 第五章 常用Lua开发库2-JSON库、编码转换、字符串处理
jinnianshilongnian
nginxlua
JSON库
在进行数据传输时JSON格式目前应用广泛，因此从Lua对象与JSON字符串之间相互转换是一个非常常见的功能；目前Lua也有几个JSON库，本人用过cjson、dkjson。其中cjson的语法严格（比如unicode \u0020\u7eaf），要求符合规范否则会解析失败（如\u002），而dkjson相对宽松，当然也可以通过修改cjson的源码来完成
- Spring定时器配置的两种实现方式OpenSymphony Quartz和java Timer详解
yaerfeng1989
timerquartz定时器
原创整理不易，转载请注明出处：Spring定时器配置的两种实现方式OpenSymphony Quartz和java Timer详解
代码下载地址：http://www.zuidaima.com/share/1772648445103104.htm
有两种流行Spring定时器配置：Java的Timer类和OpenSymphony的Quartz。
1.Java Timer定时
首先继承jav
- Linux下df与du两个命令的差别？
pda158
linux
一、df显示文件系统的使用情况，与du比較，就是更全盘化。 最经常使用的就是 df -T，显示文件系统的使用情况并显示文件系统的类型。 举比例如以下： [root@localhost ~]# df -T Filesystem Type &n
- [转]SQLite的工具类 ---- 通过反射把Cursor封装到VO对象
ctfzh
VOandroidsqlite反射Cursor
在写DAO层时，觉得从Cursor里一个一个的取出字段值再装到VO(值对象)里太麻烦了，就写了一个工具类，用到了反射，可以把查询记录的值装到对应的VO里，也可以生成该VO的List。
使用时需要注意：
考虑到Android的性能问题，VO没有使用Setter和Getter，而是直接用public的属性。
表中的字段名需要和VO的属性名一样，要是不一样就得在查询的SQL中
- 该学习笔记用到的Employee表
vipbooks
oraclesql工作
这是我在学习Oracle是用到的Employee表，在该笔记中用到的就是这张表，大家可以用它来学习和练习。
drop table Employee;
-- 员工信息表
create table Employee(
-- 员工编号
EmpNo number(3) primary key,
-- 姓
