Touchl
Touchl

RAID

文章目录

  • RAID
    • RAID 阵列概述
    • RAID实现方式
    • RAID技术
      • 分条
      • 数据镜像
      • 奇偶检验
    • RAID级别
      • RAID 0 : 无容错性分条阵列
      • RAID 1 : 磁盘镜像
      • 嵌套 RAID
        • RAID 1+0 (Striped Mirror, 分条的镜像)
        • RAID 0+1 (Mirrored Stripe, 镜像的分条)
        • RAID 3 : 专用奇偶校验磁盘
        • RAID 4 : 带独立磁盘访问和专用校验磁盘的分条阵列
        • RAID 5 : 带独立磁盘访问和分布式校验的分条阵列
        • RAID 6 : 带独立磁盘访问和双重分布式校验的分条阵列
    • RAID对磁盘性能的影响
      • 写代价
    • 各种RAID的比较

RAID

RAID 阵列概述

  • 独立冗余磁盘阵列
    • Redundant Arrays of Inexpensive Disks
    • 通过硬件/软件技术, 将多个较小/低速的磁盘整合成一个大磁盘
    • 阵列的价值 : 提升I/O效率、硬件级别的数据冗余
    • 不同RAID级别的功能、特性各不相同

RAID实现方式

  • 软件RAID
    • 由主机中的软件来提供RAID功能
    • 主板 -> 磁盘 -> 操作系统 -> RAID软件 -> 数据
  • 硬件RAID
    • 由集成在主机或存储阵列上专用硬件实现功能
      • RAID控制卡(主机上)
      • RAID控制器(存储阵列上)
        • 磁盘聚合
        • 逻辑磁盘和物理磁盘I/O请求
        • 故障时数据再生
    • 主板 -> 阵列卡 -> 磁盘 -> 操作系统 -> 数据

RAID技术

分条

	分条是将数据分布在多块磁盘以实现磁盘的并行使用的技术. 
	条带 : 磁盘上一块由若干地址连续的磁盘块构成的、大小固定的区域定义为条带(strip)
	分条 : 位于 RAID集所有磁盘上相同位置的条带构成了分条
	条带尺寸 : strip size 也称为分条深度, stripe depth 描述了构成条带的磁盘块(Disk Block)数目, 如果数据访问总是从条带的起始位置开始, 那么条带尺寸就等于从单个磁盘一次所能读取或写入的最大数据量.分条中所有的条带都含有相同数目的磁盘块. 而减小条带尺寸就意味着数据被分成更小的块存储在多个物理磁盘上.
	分条尺寸 : stripe size 是条带尺寸与RAID集中硬盘数量的乘积. 例如: 一个由5块磁盘组成, 条带尺寸为64KB的RAID集的分条尺寸为320KB(64KB * 5)
	分条宽度 : stripe width 是一个分条所包含的数据条带的数目

RAID_第1张图片

数据镜像

  • 镜像技术将同一数据存储在两个不同的磁盘上
  • 控制器会自动利用幸存磁盘上的数据镜像继续对主机的数据请求进行响应
  • 替换损坏磁盘时, 控制器会自动将数据将幸存磁盘中的数据副本拷贝回去
  • 镜像能提高读访问的性能, 但会降低写访问的性能 因此每次访问都要两块磁盘进行反应

RAID_第2张图片

奇偶检验

  • 奇偶检验是一种既能为分条RAID提供数据保护, 又能避免镜像所需开销的方法.
实现方法:
	往分条中增加一个磁盘来存储校验值, 通过数学方法构造的校验值能够重建丢失的数据, 这种冗余校验能够提供完全的数据保护, 且不需要完整的数据副本.
在真实的检验值计算中采用的是位异或操作

RAID_第3张图片

**优点**
```
相比于镜像技术100%的额外存储开支, 对于4块磁盘用于存储数据, 奇偶检验的开支只有25%
```
**缺点**
```
由于校验信息是根据数据磁盘上的数据产生, 一旦数据改变, 就要重新计算校验值. 耗时的校验计算将影响RAID控制器性能
```

RAID级别

级别 简单描述
RAID 0 无容错性分条阵列
RAID 1 磁盘镜像
嵌套的 多个RAID级别的组合, 如RAID 1 + RAID 0
RAID 3 带专用校验磁盘的并行访问分条阵列
RAID 4 带独立磁盘访问和专用校验磁盘的分条阵列
RAID 5 带独立磁盘访问和分布式校验的分条阵列
RAID 6 带独立磁盘访问和双重分布式校验的分条阵列

RAID 0 : 无容错性分条阵列

  • 数据是分条存储在RAID集的各个硬盘上的, 因此利用了全部的存储空间
  • 读取数据时, 控制器会将各条带数据重新组合起来
  • 适用于那些对I/O带宽需求很大的应用程序
  • 缺点 : 无法提供高可用性

RAID_第4张图片

RAID 1 : 磁盘镜像

  • RAID 1 基于磁盘镜像技术, 通过数据镜像来提供容错性
  • 一个RAID 1组至少由两块硬盘构成
  • 磁盘故障时, RAID 1 的数据恢复代价是所有RAID级别中最小的.
  • RAID 1 适用于那些对高可用性有需求但没成本限制的应用.

RAID_第5张图片

嵌套 RAID

  • 许多数据中心对RAID阵列的数据冗余和性能都有需求, 因此出现了RAID 1+0 和 RAID 0+1
  • 这类RAID需要由偶数数量的磁盘构建, 且至少需要4块硬盘

RAID 1+0 (Striped Mirror, 分条的镜像)

  • RAID 1+0 也被称为 RAID 10 或 RAID1/0
  • RAID 1+0 适用于写密集、随机访问、数据量小的I/O负载, 如以下应用:
    • 高事务率的在线事务处理(Online Transaction Processing, OLTP)
    • 大型消息服务
    • 负载多为写密集和随机访问的数据库应用
  • RAID 1+0 的基本构成是镜像对. 数据先被镜像, 然后再将两个副本分别分条存储在RAID集的多个硬盘上
  • 当替换故障磁盘时, 阵列控制器利用镜像组中的幸存磁盘来完成数据恢复, 并继续提供服务. 幸存磁盘中的数据将被复制到新替换的磁盘上

RAID_第6张图片

RAID 0+1 (Mirrored Stripe, 镜像的分条)

  • RAID 0+1 也被称为 RAID 01 或 RAID 0/1
  • RAID 0+1 的基本构成是条带
  • 数据将首先分条存储到各个磁盘上, 然后再对整个分条生成镜像.
  • 当一块磁盘失效时, 整个分条都将失效
  • 重建过程中, 幸存分条中各个磁盘的数据复制到故障分条集的相应替代磁盘去. 这将给幸存磁盘带来额外和不必要的I/O负载, 使RAID集更容易收到二次磁盘失效的影响

RAID_第7张图片

RAID 3 : 专用奇偶校验磁盘

  • RAID 3 通过存储分带提供高性能, 利用就检验提高容错性.
  • RAID 3 中, 数据总是以整个分条为单位对所有磁盘并行读写的, 不存在只更新同一分条中某些条带的部分写操作
  • RAID 3 适用于数据备份及视频流服务等涉及大量顺序数据访问的应用, 可以提供很好的性能

RAID_第8张图片

RAID 4 : 带独立磁盘访问和专用校验磁盘的分条阵列

  • 与RAID 3 类似, 不同的是RAID 4的数据磁盘支持独立访问, 因此某个数据单元可以从某块磁盘中读写, 而无需访问整个分条
  • RAID 4 提供了很好的读吞吐率和可接受的写吞吐率

RAID 5 : 带独立磁盘访问和分布式校验的分条阵列

  • RAID 5 是一种适用性很强的RAID实现, 同RAID 4 一样也采用了分条技术 与 磁盘可独立访问技术
  • 不同的是在于存储校验值的位置, 由于RAID 4 将校验值存储在一个专用的磁盘上, 这就使校验磁盘成为写性能瓶颈.
  • 在RAID 5 中, 校验值是分布存储在所有磁盘上的, 这种方法客服了校验值写性能瓶颈的缺陷
  • RAID 5 适用于较多随机读写及密集型的应用, 如:
    • 消息系统、数据挖掘、中等性能的媒体服务器
    • 以及数据库管理员(DBA)优化数据访问所用的关系数据库管理系统(RDBMS)

RAID_第9张图片

RAID 6 : 带独立磁盘访问和双重分布式校验的分条阵列

  • RAID 6 的工作模式和 RAID 5基本相同
  • 引入了第二个校验元素以应对RAID组中的两块磁盘同时失效的情况
  • 因此 RAID 6 至少需要4 块磁盘
  • RAID 6 也将校验值分布在所有磁盘上, 由于RAID 6的写代价比RAID 5大, 因此RAID 5的写性能要比RAID 6好
  • RAID 6 有两个校验集, 因此它的重建操作要比RAID 5 更耗时

RAID对磁盘性能的影响

  • 在选择RAID级别时充分考虑它对磁盘性能和应用程序I/O吞吐率(Input/Output Operations Per Second IOPS)的影响是至关重要的

写代价

  • 对于RAID 1 ,每个写操作都要在构成镜像的两块磁盘上同时进行
  • 对于RAID 5 ,每个写操作都会产生4个实际I/O操作
  • 当RAID 5 阵列执行大量琐碎的写操作时, 对于每次写操作, 控制器都要对每个校验段进行读取 计算和回写

各种RAID的比较

RAID 最少磁盘数 存储利用率% 开销 读性能 写性能 写代价 数据保护
0 2 100 低 随机与顺序读都很好 很好 无 无保护
1 2 50 高 较好,比单个磁盘高 较好,比单个磁盘略慢 中 镜像保护
3 3 (n-1)*100/n 中 对随机读较好,对顺序读很好 对琐碎的随机写不太好, 对大型连续写较好 高 可应对单磁盘的失效的校验保护
4 3 (n-1)*100/n 中 随机和顺序读很好 随机和顺序写都较好 高 可应对单磁盘的失效的校验保护
5 3 (n-1)*100/n 中 随机和顺序读很好 随机和顺序写都较好 高 可应对单磁盘的失效的校验保护
6 4 (n-2)*100/n 中 随机和顺序读很好 随机和顺序写都较好 非常高 可应对双磁盘的失效的校验保护
1+0和0+1 4 50 高 很好 较好 中 镜像保护

你可能感兴趣的:(Linux基础,raid)

  • snmp v2 trap搭建监控端 小黑要上天 snmplinux服务器centos运维snmp
    1.基础环境配置为了防止防火墙及selinux等的影响，需关闭防火墙及selinux等，具体参考：Linux常规基础配置_linux基础配置-CSDN博客2.安装snmpyum源配置，具体参考：Linux常规基础配置_linux基础配置-CSDN博客snmp安装命令：yuminstall-ynet-snmpnet-snmp-utils[root@kibana~]#yuminstall-ynet-s
  • Linux基础入门 --10 DAY 安红豆. Linux学习linux运维服务器
    文本常见处理工具文件内容查看命令cat格式：cat[OPTION]...[FILE]...常见选项：-E：显示行结束符-A：显示所有控制符-n：对显示出的每一行进行编号-b：对非空行进行编号-s：压缩连续的空行成一行范例：[root@localhost~]#cat-A-nmyasm.s1.section.text$2.global_start$3$4_start:$5^Imovr0,#1$6^Ia
  • MegaCli查看RAID z1119400608 linux运维服务器
    文章本身我不做过多修改了，在这里我就把自己在安装时候碰到的难点跟大家提下。1.何处下载？首先，根据文章中的路径已经下载不到相应的文件了，在此我们就自己到http://www.lsi.com的网站上去搜，尝试了各种组合最后终于用linux_cli.zip在搜索栏中搜索出相应结果，找到linux版本，下载即可。为了安全起见我还将文件上传至下载空间，以备不时之需。http://down.51cto.co
  • 使用MegaCli工具管理Raid 行者靖 服务器linux运维
    1、确认是否已安装#rpm-qa|egrep'Lib_Utils|MegaCli'2、确定操作系统架构#arch3、MegaCli工具的安装命令#rpm-ivhMegaCli-1.01.24-0.i386.rpm4、创建软链接到/usr/bin目录#ln-sf/opt/MegaRAID/MegaCli/MegaCli/usr/bin/megacli(32bit系统)#ln-sf/opt/MegaR
  • CCF-CSP认证考试准备第十二天 201903-3 损坏的RAID5(大模拟) 爱coding的橙子 CCF-CSP认证算法c++开发语言
    今天开始第3题大模拟，加油！###Day12:1.201903-3####1.201903-3:损坏的RAID5(大模拟)(1)本题的难点为理解题意（**比较难**）然后找规律和异或运算题目可以这样理解：1.先介绍**RAID5基本算法**，基本原理是异或运算，即在p与a1…an这(n＋1)个数中，由任意n个可以推知其余的一个2.介绍硬盘的基本单位为**块**3.介绍条带：**条带**是指连续、等
  • Linux基础入门 --8 DAY 安红豆. Linux学习linux运维服务器
    文件权限管理设置文件的所有者chown格式：chown[OPTION]...[OWNER][:[GROUP]]FILE...chown[OPTION]...--reference=RFILEFILE...示例：chownadmin（所有者）：admin（所属组）f1.txtchownadmin（所有者）.admin（所属组）f1.txtchown--reference=f1.txtf2.txt参考
  • Linux基础入门 --9 DAY 安红豆. Linux学习linux运维服务器
    文本处理工具之神vimvi和vim简介一、vi编辑器vi是Unix及类Unix系统（如Linux）下最基本的文本编辑器，全称为“visualinterface”，即视觉界面。尽管其名称中包含“visual”，但vi编辑器实际上工作在字符模式下，并不提供图形界面。vi编辑器以其强大的功能和灵活性著称，是Linux系统中不可或缺的工具之一。vi编辑器具有三种主要的工作模式：命令模式（CommandMo
  • linux基础命令-管道符“|” gaozhanghappy001 linuxlinuxc#运维
    管道符与命令结合应用：实现文本数据处理与分析在Linux操作系统中，管道符|是一个强大的工具，它允许将一个命令的输出直接传递给另一个命令的输入，实现不同命令之间的协同工作。结合管道符和各种命令，您可以在文本数据处理和分析方面做出令人惊叹的事情。本文将深入探讨使用管道符与一些常用命令结合的应用案例、原理以及实际操作。管道符的基本原理管道符|在Linux中的工作原理很简单。当您运行一个命令并在其后添加
  • android Camera操作类 天下乌鸦不尽黑 androidandroid
    publicclassCameraOperate{privatestaticCameraOperatemCameraOperate;privateCameramCamera;privateintmStatus=0;privateintmCameraId=-1;privateintmSurfaceViewOrientation=0;privateintmPictureOrientation=0;pu
  • 浅尝辄止3-Linux基础-加载库 阿棍儿_Leon
    当我们用C/C++做Linux开发时，肯定会遇到加载库的问题，具体加载的方法要根据具体情况决定。库文件形式常见的C/C++库文件有2中形式，即*.a和*.so文件，前者是静态链接库，后者是动态链接库。静态链接库静态链接库的文件名一般为*.a，这个a就是archive，即存档的意思。这个文件的内容实际上是*.o的打包。动态链接库动态链接库的文件名一般为*.so，相当于windows环境里的*.dll
  • 【Linux】Linux基础入门 我和程序有一个能跑就行 Linuxlinux运维服务器
    专栏文章索引：Linux有问题可私聊~目录一、什么是计算机1.计算机的组成2.计算机各个部件简单工作原理3.计算机的功能二、操作系统简介1.操作系统是什么？2.操作系统的主要功能：3.操作系统内核的功能：三、为什么要学习Linux四、Linux入门1.开源共享精神2.Linux的诞生与特点（1）Linux的诞生（2）Linux的特点（3）Linux的应用领域（4）Linux的组成（5）Linux的
  • 使用CSS、JavaScript、jQuery三种方式实现手风琴效果 蒲公英1001 javascriptcssjquery
    手风琴效果有不少，王者荣耀官网（源网址https://pvp.qq.com/raiders/）有一处周免英雄，使用的就是手风琴效果，如图所示。我试着用css、js、jQuery三种方式实现了这种效果，最终效果差不多，美中不足的是，css方式当鼠标离开后，会恢复到初始状态，也就是显示第一张大图片的状态。而使用js和jQuery方式，则会停留在鼠标进入的那一张，不恢复到第一张的状态。如何使用纯CSS，
  • linux基础之目录结构 甜航一直在 linux基础linux运维服务器笔记
    目录1.简介2.linux的目录结构分类3.详细目录介绍4.总结1.简介Linux是一个基于Unix的开源操作系统，其文件系统具有层次化的目录结构，这种结构以根目录/作为起点，向下展开成一个倒置的树状结构。每个文件或目录在这个结构中都有自己独特的路径名称，便于定位和访问。Linux的目录设计遵循一定的惯例和标准，旨在使文件组织合理化并方便管理和维护。2.linux的目录结构分类Linux的目录结构
  • raid数据恢复技术文章规范篇 weixin_33802505 运维前端操作系统ViewUI
    （1）RAID技术规范简介冗余磁盘阵列技术最初的研制目的是为了组合小的廉价磁盘来代替大的昂贵磁盘，以降低大批量数据存储的费用，同时也希望采用冗余信息的方式，使得磁盘失效时不会使对数据的访问受损失，从而开发出一定水平的数据保护技术，并且能适当的提升数据传输速度。过去RAID一直是高档服务器才有缘享用，一直作为高档SCSI硬盘配套技术作应用。近来随着技术的发展和产品成本的不断下降，IDE硬盘性能有了很
  • RAID 磁盘数据恢复 twosecond tangtang杂谈磁盘服务器咨询工作电话ibm
    RAID磁盘阵列设备，在使用过程中，经常会遇到一些常见故障，这也使得RAID在给我们带来海量存储空间的应用之外，也带来了很多难以估计的数据风险。本文将重点介绍RAID常见故障及相关处理方式。RAID故障注意事项1、数据丢失后，用户千万不要对硬盘进行任何操作，将硬盘按顺序卸下来，用镜像软件将每块硬盘做成镜像文件，也可以交给专业数据恢复中心进行。2、不要对Raid卡进行Rebuild操作，否则会加大恢
  • Linux基础入门 --1 DAY 安红豆. linux运维服务器
    用户root用户一个特殊的管理账户，也被称之为超级用户,拥有已接近完整的系统控制,对系统的伤害几乎有无线能力.普通用户权限有限,造成损害能力比较有限.终端terminal设备终端:键盘,鼠标,显示器查看当前终端设备tty命令可以查看当前终端tty范例:[root@localhost~]#tty/dev/pts/0查看所有终端设备who命令可以查看所有终端设备who范例:[root@localhos
  • Linux基础入门 --2 DAY 安红豆. linux运维服务器
    常见命令查看硬件信息查看cpulscpucat/proc/cpuinfo范例：[root@localhost~]#lscpuArchitecture:x86_64CPUop-mode(s):32-bit,64-bitByteOrder:LittleEndianCPU(s):8On-lineCPU(s)list:0-7Thread(s)percore:1Core(s)persocket:2Socke
  • 菜鸟的ai进阶之路（持续更新中...） 夸父的天空 AI进阶linux基础操作python基础语法计算机视觉基础docker基础操作
    Day1：1、linux基础指令：Pwd:查看当前所在路径；cat/proc/cpuinfo：查看cpuLs:当前所在路径下有哪些内容；ls-l:以长格式显示(long)；Ls-a:显示所有（包含隐藏）all；La-al/ls-la：以长格式显示所有文件；2、路径：绝对路径：以/开始的路径/home/tarena相对路径：不以/开始的路径…:上一级目录~：主目录/home/gary3、cd:切换目
  • Linux基础2 Lfei5120 linux
    文章目录RHCSA课程回顾注：自动化的前提是标准化、规范化。1.网卡命令的步骤：2.ifconfig命令操作3.IP命令及操作4.ss命令操作5.网卡的配置6.硬盘命令7.fdisk命令及操作8.格式化9挂载10.永久挂载11.计划任务12.日志服务与管理13.httpd编译安装apr-util安装http安装http安装RHCSA课程回顾注：自动化的前提是标准化、规范化。网卡回归传统命名一般是：
  • Linux基础 奋斗的小花生 linux
    目录Linux基础知识：Linux基础指令：问题：重启虚拟机后共享文件丢失编辑配置文件：sudovi/etc/fstab末尾添加新代码：.host://mnt/hgfsfuse.vmhgfs-fuseallow_other00重启虚拟机：rebootLinux快捷键：ctrl+alt+t：打开Linux终端ctrl+shift++：终端显示文本放大ctrl+-：终端显示文本缩小ctrl+L==cl
  • DragonFireFury lanyue456
    Alongtimeago,inapowerfulcountry,therewasakingwholovedmoneyverymuch.Hewantedatreasurewithalotofgemsinthemountainsbuthewasveryafraidofthetyrannosaurusthatguardedthetreasure.Sohecameupwithastrategy,hecal
  • 在线raid详解 潘志成_82ef
    在线制作举例：注意：如果在线做raid要先卸载磁盘再做，要不然磁盘盘位会后移/opt/MegaRAID/MegaCli/MegaCli64-CfgLdAdd-r（raid级别）[enclosure号:slot号]WBRADirectCachedBadBBU-a阵列卡号/opt/MegaRAID/MegaCli/MegaCli64-CfgLdAdd-r0[8:5]WBRADirectCachedBa
  • Oracle数据库在企业级应用中的优势与最佳实践 Lill_bin java数据库oracleapache分布式安全springjava
    引言Oracle数据库是世界上领先的关系型数据库管理系统之一，以其高性能、可靠性、安全性和可扩展性而闻名。在企业级应用中，Oracle数据库提供了强大的数据管理能力，支持着全球众多大型企业的业务运营。Oracle数据库的核心优势高性能：Oracle数据库拥有先进的查询优化器和并行处理能力，能够处理大量并发事务和复杂的查询。可靠性：通过使用RAID、数据镜像和自动故障转移等技术，Oracle确保了数
  • Linux基础入门 LIPAH linux运维服务器
    课程链接：黑马程序员新版Linux零基础快速入门到精通，全涵盖linux系统知识、常用软件环境部署、Shell脚本、云平台实践、大数据集群项目实战等_哔哩哔哩_bilibili声明：该文章为本人的学习笔记，非专业教程目录声明：本文章为本人的学习笔记，非正版教程第一章概述操作系统概述硬件和软件操作系统初始LinuxLinux诞生Linux内核Linux发行版虚拟机概念VMwareWorkStatio
  • Linux简单命令 Yz9876 linux服务器运维bigdata大数据
    1.Linux基础命令cd切换文件夹命令cd/路径切换到指定路径cd/进入到根路径cd~进入当前用户的家目录pwd进入当前路径的全路径cd-从哪里来到哪里去cd./进入当前路径./代表当前路径cd../返回当前路径的上一级路径ls查看命令ls展示当前路径所有的文件及文件夹ls/路径展示指定路径的文件及文件夹ls-l(ll)以详细的形式展示文件及文件夹ls-a查看当前路径下的包含的隐藏文件ls-al
  • Linux基础软件-lvm dessler Linux进阶#Linux基础软件linux运维服务器
    作者介绍：简历上没有一个精通的运维工程师。希望大家多多关注作者，下面的思维导图也是预计更新的内容和当前进度(不定时更新)。Linux进阶部分又分了很多小的部分,我们刚讲完了Linux日常运维。讲的那些东西都算是系统自带的，但是Linux作为一个服务器操作系统，肯定是要安装运行软件来满足我们的业务需要，本章基础软件部分，将从下面几个部分来讲解：Linux基础软件-软件安装Linux基础软件-yum(
  • RAID磁盘阵列 一个小运维
    需要服务器硬件RAID卡•廉价冗余磁盘阵列–RedundantArraysofInexpensiveDisks–通过硬件/软件技术，将多个较小/低速的磁盘整合成一个大磁盘–阵列的价值：提升I/O效率、硬件级别的数据冗余–不同RAID级别的功能、特性各不相同image.png•RAID0，条带模式–同一个文档分散存放在不同磁盘–并行写入以提高效率–至少需要两块磁盘组成，磁盘利用率100%•RAID1
  • Linux&Shell作业题-1 Monyan Linuxlinux操作系统shell
    J-Linux&Shell-W1Linux基础知识（共10分）一、判断题（共4题，每题0.25分）软件是与数据处理系统操作有关的计算机程序和相关数据等的总称。（√）操作系统是裸机之上的第一层软件，与硬件关系尤为密切。（√）hda表示电脑内串口硬盘的第一块硬盘。（×）任何分区表都只支持最多4个主分区。（×）二、单项选择题（共3题，每题0.5分）下列不属于操作系统类型的是（B）A.批处理系统B.模拟系
  • Linux基础操作之文件从压缩到编辑 小橞 linux运维
    归档及压缩归档：将许多小的零件整理为一个文件文件总大小不变压缩：按照某种算反将文件占用空间减小文件总大小不变Linux压缩格式gzip----->.gz速度最快比例最大（大部分情况）bzip2----->.bz2中xz------>.xz速度最慢比列最小数据压缩工具tar-c：创建归档-x：释放归档-f：指定归档文件名称（必须在所有选项的最后）-z、-j、-J：调用.gz、.bz2、.xz格式的工
  • 利用OneDrive网盘建站 Talmai_dev githubphp开发语言
    规划劝退(顾名思义如果你无法准备以下环境那就请右上角关闭教程)1全程各种页面都可能因为国内访问不了嗯2linux基础php环境(调用别人的打包文件需要这个环境建站)3购买域名或者想办法得到二级域名用于解析你的站4注册微软帐号officee5申请->root->子帐号5会用vps甲骨文免费vps主机https://zhuanlan.zhihu.com/p/796789056下载站环境https://
  • JAVA中的Enum 周凡杨 javaenum枚举
    Enum是计算机编程语言中的一种数据类型---枚举类型。 在实际问题中，有些变量的取值被限定在一个有限的范围内。     例如，一个星期内只有七天 我们通常这样实现上面的定义： public String monday; public String tuesday; public String wensday; public String thursday
  • 赶集网mysql开发36条军规 Bill_chen mysql业务架构设计mysql调优mysql性能优化
    (一)核心军规 (1)不在数据库做运算    cpu计算务必移至业务层； (2)控制单表数据量    int型不超过1000w，含char则不超过500w；    合理分表；    限制单库表数量在300以内； (3)控制列数量    字段少而精，字段数建议在20以内
  • Shell test命令 daizj shell字符串test数字文件比较
    Shell test命令 Shell中的 test 命令用于检查某个条件是否成立，它可以进行数值、字符和文件三个方面的测试。 数值测试 参数 说明 -eq 等于则为真 -ne 不等于则为真 -gt 大于则为真 -ge 大于等于则为真 -lt 小于则为真 -le 小于等于则为真 实例演示： num1=100 num2=100if test $[num1]
  • XFire框架实现WebService(二) 周凡杨 javawebservice
       有了XFire框架实现WebService(一)，就可以继续开发WebService的简单应用。 Webservice的服务端(WEB工程)： 两个java bean类： Course.java    package cn.com.bean; public class Course {     private
  • 重绘之画图板 朱辉辉33 画图板
           上次博客讲的五子棋重绘比较简单，因为只要在重写系统重绘方法paint（）时加入棋盘和棋子的绘制。这次我想说说画图板的重绘。        画图板重绘难在需要重绘的类型很多，比如说里面有矩形，园，直线之类的，所以我们要想办法将里面的图形加入一个队列中，这样在重绘时就
  • Java的IO流 西蜀石兰 java
    刚学Java的IO流时，被各种inputStream流弄的很迷糊，看老罗视频时说想象成插在文件上的一根管道，当初听时觉得自己很明白，可到自己用时，有不知道怎么代码了。。。 每当遇到这种问题时，我习惯性的从头开始理逻辑，会问自己一些很简单的问题，把这些简单的问题想明白了，再看代码时才不会迷糊。 IO流作用是什么？ 答：实现对文件的读写，这里的文件是广义的； Java如何实现程序到文件
  • No matching PlatformTransactionManager bean found for qualifier 'add' - neither 林鹤霄
    java.lang.IllegalStateException: No matching PlatformTransactionManager bean found for qualifier 'add' - neither qualifier match nor bean name match!   网上找了好多的资料没能解决，后来发现：项目中使用的是xml配置的方式配置事务，但是
  • Row size too large (> 8126). Changing some columns to TEXT or BLOB aigo column
    原文：http://stackoverflow.com/questions/15585602/change-limit-for-mysql-row-size-too-large   异常信息： Row size too large (> 8126). Changing some columns to TEXT or BLOB or using ROW_FORMAT=DYNAM
  • JS 格式化时间 alxw4616 JavaScript
    /** * 格式化时间 2013/6/13 by 半仙 [email protected] * 需要 pad 函数 * 接收可用的时间值. * 返回替换时间占位符后的字符串 * * 时间占位符:年 Y 月 M 日 D 小时 h 分 m 秒 s 重复次数表示占位数 * 如 YYYY 4占4位 YY 占2位<p></p> * MM DD hh mm
  • 队列中数据的移除问题 百合不是茶 队列移除
         队列的移除一般都是使用的remov();都可以移除的,但是在昨天做线程移除的时候出现了点问题,没有将遍历出来的全部移除,  代码如下;      // package com.Thread0715.com; import java.util.ArrayList; public class Threa
  • Runnable接口使用实例 bijian1013 javathreadRunnablejava多线程
    Runnable接口 a.       该接口只有一个方法：public void run(); b.       实现该接口的类必须覆盖该run方法 c.       实现了Runnable接口的类并不具有任何天
  • oracle里的extend详解 bijian1013 oracle数据库extend
    扩展已知的数组空间，例： DECLARE TYPE CourseList IS TABLE OF VARCHAR2(10); courses CourseList; BEGIN -- 初始化数组元素，大小为3 courses := CourseList('Biol 4412 ', 'Psyc 3112 ', 'Anth 3001 '); --
  • 【httpclient】httpclient发送表单POST请求 bit1129 httpclient
    浏览器Form Post请求 浏览器可以通过提交表单的方式向服务器发起POST请求，这种形式的POST请求不同于一般的POST请求 1. 一般的POST请求，将请求数据放置于请求体中，服务器端以二进制流的方式读取数据，HttpServletRequest.getInputStream()。这种方式的请求可以处理任意数据形式的POST请求，比如请求数据是字符串或者是二进制数据 2. Form
  • 【Hive十三】Hive读写Avro格式的数据 bit1129 hive
     1. 原始数据 hive> select * from word; OK 1 MSN 10 QQ 100 Gtalk 1000 Skype      2. 创建avro格式的数据表   hive> CREATE TABLE avro_table(age INT, name STRING)STORE
  • nginx+lua+redis自动识别封解禁频繁访问IP ronin47
    在站点遇到攻击且无明显攻击特征，造成站点访问慢，nginx不断返回502等错误时，可利用nginx+lua+redis实现在指定的时间段 内，若单IP的请求量达到指定的数量后对该IP进行封禁，nginx返回403禁止访问。利用redis的expire命令设置封禁IP的过期时间达到在 指定的封禁时间后实行自动解封的目的。 一、安装环境： CentOS x64 release 6.4(Fin
  • java-二叉树的遍历-先序、中序、后序（递归和非递归）、层次遍历 bylijinnan java
    import java.util.LinkedList; import java.util.List; import java.util.Stack; public class BinTreeTraverse { //private int[] array={ 1, 2, 3, 4, 5, 6, 7, 8, 9 }; private int[] array={ 10,6,
  • Spring源码学习-XML 配置方式的IoC容器启动过程分析 bylijinnan javaspringIOC
    以FileSystemXmlApplicationContext为例，把Spring IoC容器的初始化流程走一遍： ApplicationContext context = new FileSystemXmlApplicationContext ("C:/Users/ZARA/workspace/HelloSpring/src/Beans.xml&q
  • [科研与项目]民营企业请慎重参与军事科技工程 comsci 企业
         军事科研工程和项目 并非要用最先进，最时髦的技术，而是要做到“万无一失”    而民营科技企业在搞科技创新工程的时候，往往考虑的是技术的先进性，而对先进技术带来的风险考虑得不够，在今天提倡军民融合发展的大环境下，这种“万无一失”和“时髦性”的矛盾会日益凸显。。。。。。所以请大家在参与任何重大的军事和政府项目之前，对
  • spring 定时器-两种方式 cuityang springquartz定时器
    方式一： 间隔一定时间 运行 <bean id="updateSessionIdTask" class="com.yang.iprms.common.UpdateSessionTask" autowire="byName" /> <bean id="updateSessionIdSchedule
  • 简述一下关于BroadView站点的相关设计 damoqiongqiu view
    终于弄上线了，累趴，戳这里http://www.broadview.com.cn   简述一下相关的技术点   前端：jQuery+BootStrap3.2+HandleBars，全站Ajax（貌似对SEO的影响很大啊！怎么破？），用Grunt对全部JS做了压缩处理，对部分JS和CSS做了合并（模块间存在很多依赖，全部合并比较繁琐，待完善）。   后端：U
  • 运维 PHP问题汇总 dcj3sjt126com windows2003
    1、Dede(织梦)发表文章时,内容自动添加关键字显示空白页 解决方法： 后台>系统>系统基本参数>核心设置>关键字替换（是/否），这里选择“是”。 后台>系统>系统基本参数>其他选项>自动提取关键字，这里选择“是”。   2、解决PHP168超级管理员上传图片提示你的空间不足 网站是用PHP168做的，反映使用管理员在后台无法
  • mac 下 安装php扩展 - mcrypt dcj3sjt126com PHP
    MCrypt是一个功能强大的加密算法扩展库，它包括有22种算法，phpMyAdmin依赖这个PHP扩展，具体如下： 下载并解压libmcrypt-2.5.8.tar.gz。 在终端执行如下命令： tar zxvf libmcrypt-2.5.8.tar.gz cd libmcrypt-2.5.8/ ./configure --disable-posix-threads --
  • MongoDB更新文档 [四] eksliang mongodbMongodb更新文档
    MongoDB更新文档 转载请出自出处：http://eksliang.iteye.com/blog/2174104 MongoDB对文档的CURD，前面的博客简单介绍了，但是对文档更新篇幅比较大，所以这里单独拿出来。 语法结构如下： db.collection.update( criteria, objNew, upsert, multi) 参数含义 参数   
  • Linux下的解压，移除，复制，查看tomcat命令 y806839048 tomcat
    重复myeclipse生成webservice有问题删除以前的，干净 1、先切换到：cd usr/local/tomcat5/logs 2、tail -f catalina.out 3、这样运行时就可以实时查看运行日志了 Ctrl+c 是退出tail命令。 有问题不明的先注掉   cp /opt/tomcat-6.0.44/webapps/g
  • Spring之使用事务缘由(3-XML实现) ihuning spring
      用事务通知声明式地管理事务   事务管理是一种横切关注点。为了在 Spring 2.x 中启用声明式事务管理，可以通过 tx Schema 中定义的 <tx:advice> 元素声明事务通知，为此必须事先将这个 Schema 定义添加到 <beans> 根元素中去。声明了事务通知后，就需要将它与切入点关联起来。由于事务通知是在 <aop:
  • GCD使用经验与技巧浅谈 啸笑天 GC
    前言 GCD(Grand Central Dispatch)可以说是Mac、iOS开发中的一大“利器”，本文就总结一些有关使用GCD的经验与技巧。 dispatch_once_t必须是全局或static变量 这一条算是“老生常谈”了，但我认为还是有必要强调一次，毕竟非全局或非static的dispatch_once_t变量在使用时会导致非常不好排查的bug，正确的如下： 1
  • linux（Ubuntu）下常用命令备忘录1 macroli linux工作ubuntu
    在使用下面的命令是可以通过--help来获取更多的信息1,查询当前目录文件列表：ls ls命令默认状态下将按首字母升序列出你当前文件夹下面的所有内容，但这样直接运行所得到的信息也是比较少的，通常它可以结合以下这些参数运行以查询更多的信息：  ls / 显示/.下的所有文件和目录  ls -l 给出文件或者文件夹的详细信息 ls -a 显示所有文件，包括隐藏文
  • nodejs同步操作mysql qiaolevip 学习永无止境每天进步一点点mysqlnodejs
    // db-util.js var mysql = require('mysql'); var pool = mysql.createPool({ connectionLimit : 10, host: 'localhost', user: 'root', password: '', database: 'test', port: 3306 });
  • 一起学Hive系列文章 superlxw1234 hiveHive入门
      [一起学Hive]系列文章 目录贴，入门Hive，持续更新中。   [一起学Hive]之一—Hive概述，Hive是什么 [一起学Hive]之二—Hive函数大全-完整版 [一起学Hive]之三—Hive中的数据库(Database)和表(Table) [一起学Hive]之四-Hive的安装配置 [一起学Hive]之五-Hive的视图和分区 [一起学Hive
  • Spring开发利器：Spring Tool Suite 3.7.0 发布 wiselyman spring
    Spring Tool Suite(简称STS)是基于Eclipse，专门针对Spring开发者提供大量的便捷功能的优秀开发工具。   在3.7.0版本主要做了如下的更新：   将eclipse版本更新至Eclipse Mars 4.5 GA Spring Boot(JavaEE开发的颠覆者集大成者，推荐大家学习)的配置语言YAML编辑器的支持(包含自动提示，
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他