慕知
慕知

rsync备份 & nfs 文件互传& inotify实时监控




一，RSYNC


1）RSYNC本地模式

--类似cp命令

[root@web01 ~]# touch 121.txt

[root@web01 ~]# rsync 121.txt /opt/

[root@web01 ~]# ll /opt/

-rw-r--r-- 1 root root 0 2020-08-23 14:08 121.txt


二）RSYNC远程模式

--类似于scp命令

[root@web01 ~]# rsync 121.txt [email protected]:/backup/

[email protected]'s password:


[root@backup ~]# ll /backup/

-rw-r--r-- 1 root  root  0 2020-08-24 15:49 121.txt

             （需要知道对方的用户及密码，不安全）


三）RSYNC守护进程模式 -（注意模块是双冒号）

服务端：


[root@backup ~]# yum install -y rsync（客户端,服务端都需要安装）

##修改配置文件（每一个服务下载好的第一件事就是配置文件修改）


[root@backup ~]# vim /etc/rsyncd.conf

uid = rsync  启动用户uid

gid = rsync   启动用户gid

port = 873   端口

fake super = yes   可以不使用超级用户root

use chroot = no     安全机制

max connections = 200    最大连接数

timeout = 600    超时时间

ignore errors  忽略错误

read only = false     只读

list = false               ->不记得模块时候可以使用

auth users = rsync_backup     虚拟用户

secrets file = /etc/rsync.passwd      虚拟用户密码文件

log file = /var/log/rsyncd.log

#####################################

[backup]                           模块                          

comment = welcome to zx's backup!          备注

path = /backup           真实文件目录

（下面三行复制过去记得把注释去掉）



配置文件完善配置信息

1，##新建用户rsync

[root@backup ~]# useradd rsync -s /sbin/nologin -M


2，## 虚拟用户设置密码

[root@backup ~]# echo "rsync_backup:123456" > /etc/rsyncd.passwd

##设置权限

[root@backup ~]# chmod 600 /etc/rsyncd.passwd


3，##建backup目录，设置属主，属组

[root@backup ~]# mkdir /backup

[root@backup ~]# chown -R rsync.rsync /backup/


4，## 启动服务

[root@backup ~]# systemctl start rsyncd

## 查看服务是否运行（运维的好习惯要养成）

[root@backup ~]# ps -ef|grep rsyncd

root      7554  7124  0 13:53 pts/0    00:00:00 grep --color=auto rsyncd


5，## 查看端口

[root@backup ~]# netstat -lntp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address          Foreign Address        State      PID/Program name

tcp        0      0 0.0.0.0:873            0.0.0.0:*              LISTEN      7548/rsync

tcp        0      0 0.0.0.0:111            0.0.0.0:*              LISTEN      5398/rpcbind

tcp6      0      0 :::873                  :::*                    LISTEN      7548/rsync

tcp6      0      0 :::111                  :::*                    LISTEN      5398/rpcbind



客户端

[root@web01 ~]# yum install -y rsync

[root@web01 ~]# echo "123456" > /etc/rsync.passwd

[root@web01 ~]# chmod 600 /etc/rsync.passwd


第一种，输入密码

拉：

[root@web01 ~]# rsync -avz [email protected]::backup /opt

Password:

receiving incremental file list

./

aaa/


第二种，--passwd-file=/etc/rsync.passwd

推：

[root@web01 ~]# rsync -avz 11.txt [email protected]::backup --password-file=/etc/rsyncd.passwd


第三种，配置环境变量

export RSYNC_PASSWORD=123456  （临时生效）


[root@web01 ~]# export RSYNC_PASSWORD=123456

[root@web01 ~]# rsync -avz [email protected]::backup /opt

receiving incremental file list

sent 25 bytes  received 115 bytes  31.11 bytes/sec

total size is 0  speedup is 0.00



限速参数：-avzP --bwlimit

生成大文件-->

dd if=/dev/zero of=./1.txt bs=1M count=500

dd if=/dev/zero生出源源不断的字符

of=./1.txt bs=1M  到哪个文件里，多大的速率传输

count=500 生成的文件是500兆


限速  --为什么不限速

[root@web01 ~]# rsync -avzP --bwlimit 1 ./1.txt [email protected]::backup

sending incremental file list

1.txt

        256,000 100%  212.89MB/s    0:00:00 (xfr#1, to-chk=0/1)

sent 355 bytes  received 43 bytes  796.00 bytes/sec

total size is 256,000  speedup is 643.22


数据一致参数：--delete

## 服务端backup下创建文件

[root@backup ~]# touch /backup/{1..5}.txt

[root@backup ~]# ll /backup/

总用量 0

-rw-r--r-- 1 root root 0 2020-08-19 16:02 1.txt

-rw-r--r-- 1 root root 0 2020-08-19 16:02 2.txt

-rw-r--r-- 1 root root 0 2020-08-19 16:02 3.txt

-rw-r--r-- 1 root root 0 2020-08-19 16:02 4.txt

-rw-r--r-- 1 root root 0 2020-08-19 16:02 5.txt


## 客户端创建文件

[root@web01 ~]# touch {a..d}.txt

[root@web01 ~]# ll

总用量 0

-rw-r--r-- 1 root root 0 2020-08-19 16:03 a.txt

-rw-r--r-- 1 root root 0 2020-08-19 16:03 b.txt

-rw-r--r-- 1 root root 0 2020-08-19 16:03 c.txt

-rw-r--r-- 1 root root 0 2020-08-19 16:03 d.txt


客户端推：

[root@web01 ~]# rsync -avz --delete ./ [email protected]::backup

a.txt

b.txt

c.txt

d.txt


## 查看服务端backup目录下的文件

[root@backup ~]# ll /backup/

-rw-r--r-- 1 rsync rsync 0 2020-08-19 16:03 a.txt

-rw-r--r-- 1 rsync rsync 0 2020-08-19 16:03 b.txt

-rw-r--r-- 1 rsync rsync 0 2020-08-19 16:03 c.txt

-rw-r--r-- 1 rsync rsync 0 2020-08-19 16:03 d.txt

（与客户端同步，并删除了本身目录下的文件）


客户端需求：

客户端需求

1.客户端提前准备存放的备份的目录，目录规则如下:/backup/nfs_172.16.1.31_2018-09-02

2.客户端在本地打包备份(系统配置文件、应用配置等)拷贝至/backup/nfs_172.16.1.31_2018-09-02

3.客户端最后将备份的数据进行推送至备份服务器

4.客户端每天凌晨1点定时执行该脚本

5.客户端服务器本地保留最近7天的数据, 避免浪费磁盘空间


脚本准备

[root@web01 ~]# hostname -I|awk '{print $1}'

172.16.1.7

[root@web01 ~]# date +%F

2020-08-19


[root@web01 ~]# echo `hostname`_`hostname -I|awk '{print $1}'`_`date +%F`

web01_172.16.1.7_2020-08-19


##打包备份到目录

[root@web01 ~]# cd /backup/

[root@web01 backup]# cd `hostname`_`hostname -I|awk '{print $1}'`_`date +%F`

[root@web01 web01_172.16.1.7_2020-08-19]# tar -zcf date.tar.gz /var/log/messages


[root@web01 web01_172.16.1.7_2020-08-19]# ll

总用量 108

-rw-r--r-- 1 root root 109347 2020-08-19 16:26 date.tar.gz


## 推送文件

[root@web01 ~]# rsync -avz /backup/`hostname`_`hostname -I|awk '{print $1}'`_`date +%F` [email protected]::backup

sending incremental file list

web01_172.16.1.7_2020-08-19/

web01_172.16.1.7_2020-08-19/date.tar.gz

sent 104,150 bytes  received 47 bytes  10,968.11 bytes/sec

total size is 109,347  speedup is 1.05


写脚本：

[root@web01 ~]# mkdir /scripts

[root@web01 ~]# vim /scripts/client.sh

#!bin/bash

#1,创建备份目录

mkdir -p /backup/`hostname`_`hostname -I|awk '{print $1}'`_`date +%F`

#2,打包备份文件

cd /backup/`hostname`_`hostname -I|awk '{print $1}'`_`date +%F`

tar -zcf date.tar.gz /var/log/messages

#3，推送文件

rsync -avz /backup/`hostname`_`hostname -I|awk '{print $1}'`_`date +%F` [email protected]::backup

~


[root@web01 ~]# sh /scripts/client.sh

tar: 从成员名中删除开头的“/”

sending incremental file list

web01_172.16.1.7_2020-08-19/date.tar.gz

sent 99,536 bytes  received 986 bytes  201,044.00 bytes/sec

total size is 109,361  speedup is 1.09


##可以执行，但是脚本太low，以下设置变量##

优化后的脚本如下:

[root@web01 ~]# vim /scripts/client.sh

#!bin/bash

DIR=/backup

HOST=`hostname`

IP=`hostname`_`hostname -I|awk '{print $1}'`

DATE=`date +%F`

SRC=${DIR}/${HOST}_${IP}_${DATE}

#1,创建备份目录

mkdir -p $SRC

#2,打包备份文件

cd $SRC

tar -zcf date.tar.gz /var/log/messages

#3，推送文件

rsync -avz $SRC [email protected]::backup


##生出30天的数据

[root@web01 ~]# for i in {1..30};do date -s 2020/08/$i;sh /scripts/client.sh ;done


##改时间，为了验证数据

[root@web01 ~]# date -s 2020/9/1

2020年 09月 01日 星期二 00:00:00 CST


## 删除7天前数据

[root@web01 ~]# find /backup/ -type d -mtime +7|xargs rm -rf

[root@web01 ~]# ll /backup/

drwxr-xr-x 2 root root 25 2020-08-25 00:00 web01_172.16.1.7_2020-08-25

drwxr-xr-x 2 root root 25 2020-08-26 00:00 web01_172.16.1.7_2020-08-26

drwxr-xr-x 2 root root 25 2020-08-27 00:00 web01_172.16.1.7_2020-08-27

drwxr-xr-x 2 root root 25 2020-08-28 00:00 web01_172.16.1.7_2020-08-28

drwxr-xr-x 2 root root 25 2020-08-29 00:00 web01_172.16.1.7_2020-08-29

drwxr-xr-x 2 root root 25 2020-08-30 00:00 web01_172.16.1.7_2020-08-30


最终脚本：

[root@web01 ~]# vim /scripts/client.sh

#!bin/bash

DIR=/backup

HOST=`hostname`

IP=`hostname -I|awk '{print $1}'`

DATE=`date +%F`

SRC=${DIR}/${HOST}_${IP}_${DATE}

#1,创建备份目录

mkdir -p $SRC

#2,打包备份文件

cd $SRC

tar -zcf date.tar.gz /var/log/messages

#3, 添加校验文件
md5sum ${DIR}/${HOST}_${IP}_${DATE}/date.tar.gz > $SRC/check.txt

#4，推送文件

rsync -avz $SRC [email protected]::backup

#5, 保留7天数据

find /backup/ -type d -mtime +7|xargs rm -rf

~



服务端：

服务端需求

1.服务端部署rsync，用于接收客户端推送过来的备份数据

2.服务端需要每天校验客户端推送过来的数据是否完整

3.服务端需要每天校验的结果通知给管理员

4.服务端仅保留6个月的备份数据,其余的全部删除[root@backup ~]# mkdir /scripts/



[root@backup ~]# vim /scripts/severs.sh


#!bin/bash

DIR=/backup

HOST=`hostname`

IP=`hostname -I|awk '{print $1}'`

DATE=`date +%F`

SRC=${DIR}/${HOST}_${IP}_${DATE}

#1,校验文件完整性

md5sum -c ${DIR}/*_${DATE}/check.txt


[root@backup ~]# sh /scripts/severs.sh

/backup/web01_172.16.1.7_2020-08-20/date.tar.gz: 确定

上一步前可能会有报错，如：

[root@backup ~]# sh /scripts/severs.sh

md5sum: /backup/*_2020-08-20/check.txt: 没有那个文件或目录


解决办法：

检查web端是否执行新的脚本；

删除/backup目录下的所有文件，重新生成30天数据；

也可单独执行查找哪里出错

[root@backup ~]# md5sum -c /backup/web01_172.16.1.7_2020-08-30/check.txt

/backup/web01_172.16.1.7_2020-08-30/date.tar.gz: 确定




[root@web01 ~]# crontab -e

#每天凌晨1点备份数据

00 01 * * * /bin/bash /scripts/cilent.sh &>/dev/null



##服务端下载邮箱

[root@backup ~]# yum install -y mailx

## 配置文件修改

[root@backup ~]# vim /etc/mail.rc

set [email protected]

set smtp=smtps://smtp.qq.com:465

set [email protected]

set smtp-auth-password=***

set smtp-auth=login

set ssl-verify=ignore

set nss-config-dir=/etc/pki/nssdb/

~


最终脚本更新为

[root@backup ~]# vim /scripts/severs.sh

#!bin/bash

DIR=/backup

HOST=`hostname`

IP=`hostname -I|awk '{print $1}'`

DATE=`date +%F`

SRC=${DIR}/${HOST}_${IP}_${DATE}

#1,校验文件完整性

md5sum -c ${DIR}/*_${DATE}/check.txt > ${DIR}/result.txt

#2,将验证结果发送给管理员邮箱

mail -s "数据校验结果" @qq.com < ${DIR}/result.txt

#3,删除180天数据

find /backup/ -type -d -mtime +180 | xgars rm -rf


[root@backup ~]# sh /scripts/severs.sh

就能收到邮箱的校验结果



二，rsync结合inotify，实时监控

安装在客户端（需要备份的服务器上）

[root@web01 ~]# yum install -y inotify-tools

[root@web01 ~]# vim rsyn-inotify.sh

#!/bin/bash

dir=/backup

/usr/bin/inotifywait  -mrq  --format '%w %f' -e create,delete,attrib,close_write  $dir | while read line;do

cd  $dir  && rsync -az -R  --delete  ./*  [email protected]::backup --password-file=/etc/rsync.passwd >/dev/null 2>&1

done  &

~


###  写入脚本里

[root@web01 ~]# vim /scripts/inotify.sh

#!/bin/bash

export RSYNC_PASSWORD=123456

dir=/backup

/usr/bin/inotifywait  -mrq  --format '%w %f' -e create,delete,attrib,close_write  $dir | while read line;do

cd  $dir  && rsync -az -R  --delete  ./*  [email protected]::backup >/dev/null 2>&1

done  &



## 执行

[root@web01 ~]# sh /scripts/inotify.sh


## 实验

在web的backup里创建

到backup服务器到backup目录下查看

[root@web01 ~]# cd /backup/

[root@web01 backup]# touch 33.txt


[root@backup backup]# ll

-rw-r--r-- 1 rsync rsync  0 2020-08-24 15:20 33.txt



三，NFS 实战


服务端：

1，##防火墙，selinux关闭

[root@nfs ~]# systemctl stop firewalld

[root@nfs ~]# systemctl disable firewalld

[root@nfs ~]# vim /etc/selinux/config

SELINUX=enforcing 改为 SELINUX=disable 或

sed -i 's#SELINUX=enforcing#SELINUX=disable#' /etc/selinux/config

setenforce 0临时关闭


2，## 安装

[root@nfs ~]# yum install -y nfs-utils rpcbind


3，##设置配置

[root@nfs ~]# vim /etc/exports

/data 172.16.1.0/24(rw,sync,all_squash)


3，## 主，组设置

[root@nfs ~]# chown -R nfsnobody.nfsnobody /date


[root@nfs ~]# id nfsnobody

uid=65534(nfsnobody) gid=65534(nfsnobody) 组=65534(nfsnobody)



##启动服务

[root@nfs ~]# systemctl start rpcbind nfs-server

## 检查是否运行

[root@nfs ~]# ps -ef|grep nfs

##验证

[root@nfs ~]# cat /var/lib/nfs/etab

/data 172.16.1.0/24(rw,sync,wdelay,hide,nocrossmnt,secure,root_squash,all_squash,no_subtree_check,secure_locks,acl,no_pnfs,anonuid=65534,anongid=65534,sec=sys,rw,secure,root_squash,all_squash)

（如果配置设置错了，cat不出任何内容）



客户端：

##关闭防火墙和selinux

[root@web01 ~]# systemctl stop firewalld

[root@web01 ~]# systemctl diasble firewalld

[root@web01 ~]# vim /etc/selinux/config

[root@web01 ~]# setenforce

usage:  setenforce [ Enforcing | Permissive | 1 | 0 ]


##下载(下载nfs只为了showmount)

[root@web01 ~]# yum install -y nfs-utils rpcbind


## 查看挂载点
[root@web01 ~]# showmount -e 172.16.1.31

Export list for 172.16.1.31:

/date 172.16.1.0/24


##启动服务并挂载

[root@web01 ~]# systemctl start rpcbind

[root@web01 ~]# mount -t nfs 172.16.1.31:/date /backup/


[root@web01 ~]# df -h

文件系统          容量  已用  可用 已用% 挂载点

/dev/sda3          19G  1.2G  18G    7% /

devtmpfs          476M    0  476M    0% /dev

tmpfs              487M    0  487M    0% /dev/shm

tmpfs              487M  7.7M  479M    2% /run

tmpfs              487M    0  487M    0% /sys/fs/cgroup

/dev/sda1          497M  120M  378M  25% /boot

tmpfs              98M    0  98M    0% /run/user/0

172.16.1.31:/date  19G  1.2G  18G    7% /backup

测试

客户端：

[root@web01 ~]# cd /backup/

[root@web01 backup]# ll

总用量 0

[root@web01 backup]# touch 1.txt


服务端：

[root@nfs ~]# ll /date/

总用量 0

-rw-r--r-- 1 nfsnobody nfsnobody 0 2020-08-24 13:03 1.txt

你可能感兴趣的:(rsync备份 & nfs 文件互传& inotify实时监控)

  • WPF中的ComboBox控件几种数据绑定的方式 互联网打工人no1 wpfc#
    一、用字典给ItemsSource赋值（此绑定用的地方很多，建议熟练掌握）在XMAL中：在CS文件中privatevoidBindData(){DictionarydicItem=newDictionary();dicItem.add(1,"北京");dicItem.add(2,"上海");dicItem.add(3,"广州");cmb_list.ItemsSource=dicItem;cmb_l
  • 将cmd中命令输出保存为txt文本文件 落难Coder Windowscmdwindow
    最近深度学习本地的训练中我们常常要在命令行中运行自己的代码，无可厚非，我们有必要保存我们的炼丹结果，但是复制命令行输出到txt是非常麻烦的，其实Windows下的命令行为我们提供了相应的操作。其基本的调用格式就是：运行指令>输出到的文件名称或者具体保存路径测试下，我打开cmd并且ping一下百度：pingwww.baidu.com>./data.txt看下相同目录下data.txt的输出：如果你再
  • 下载github patch到本地 小米人er 我的博客gitpatch
    以下是几种从GitHub上下载以.patch结尾的补丁文件的方法：通过浏览器直接下载打开包含该.patch文件的GitHub仓库。在仓库的文件列表中找到对应的.patch文件。点击该文件，浏览器会显示文件的内容，在页面的右上角通常会有一个“Raw”按钮，点击它可以获取原始文件内容。然后在浏览器中使用快捷键（如Ctrl+S或者Command+S）将原始文件保存到本地，选择保存的文件名并确保后缀为.p
  • 使用 FinalShell 进行远程连接（ssh 远程连接 Linux 服务器） 编程经验分享 开发工具服务器sshlinux
    目录前言基本使用教程新建远程连接连接主机自定义命令路由追踪前言后端开发，必然需要和服务器打交道，部署应用，排查问题，查看运行日志等等。一般服务器都是集中部署在机房中，也有一些直接是云服务器，总而言之，程序员不可能直接和服务器直接操作，一般都是通过ssh连接来登录服务器。刚接触远程连接时，使用的是XSHELL来远程连接服务器，连接上就能够操作远程服务器了，但是仅用XSHELL并没有上传下载文件的功能
  • 【目标检测数据集】卡车数据集1073张VOC+YOLO格式 熬夜写代码的平头哥∰ 目标检测YOLO人工智能
    数据集格式：PascalVOC格式+YOLO格式(不包含分割路径的txt文件，仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件)图片数量(jpg文件个数)：1073标注数量(xml文件个数)：1073标注数量(txt文件个数)：1073标注类别数：1标注类别名称:["truck"]每个类别标注的框数：truck框数=1120总框数：1120使用标注工具：labelImg标注
  • webpack图片等资源的处理 dmengmeng
    需要的loaderfile-loader（让我们可以引入这些资源文件）url-loader（其实是file-loader的二次封装）img-loader（处理图片所需要的）在没有使用任何处理图片的loader之前，比如说css中用到了背景图片，那么最后打包会报错的，因为他没办法处理图片。其实你只想能够使用图片的话。只加一个file-loader就可以，打开网页能准确看到图片。{test:/\.(p
  • 番茄西红柿叶子病害分类数据集12882张11类别 futureflsl 数据集分类数据挖掘人工智能
    数据集类型：图像分类用，不可用于目标检测无标注文件数据集格式：仅仅包含jpg图片，每个类别文件夹下面存放着对应图片图片数量(jpg文件个数)：12882分类类别数：11类别名称:["Bacterial_Spot_Bacteria","Early_Blight_Fungus","Healthy","Late_Blight_Water_Mold","Leaf_Mold_Fungus","Powdery
  • 钢筋长度超限检测检数据集VOC+YOLO格式215张1类别 futureflsl 数据集YOLO深度学习机器学习
    数据集格式：PascalVOC格式+YOLO格式(不包含分割路径的txt文件，仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件)图片数量(jpg文件个数)：215标注数量(xml文件个数)：215标注数量(txt文件个数)：215标注类别数：1标注类别名称:["iron"]每个类别标注的框数：iron框数=215总框数：215使用标注工具：labelImg标注规则：对类别进
  • 【华为OD技术面试真题 - 技术面】- python八股文真题题库（4) 算法大师 华为od面试python
    华为OD面试真题精选专栏：华为OD面试真题精选目录:2024华为OD面试手撕代码真题目录以及八股文真题目录文章目录华为OD面试真题精选**1.Python中的`with`**用途和功能自动资源管理示例：文件操作上下文管理协议示例代码工作流程解析优点2.\_\_new\_\_和**\_\_init\_\_**区别__new____init__区别总结3.**切片（Slicing）操作**基本切片语法
  • 第六集如何安装CentOS7.0，3分钟学会centos7安装教程 date分享
    从光盘引导系统按回车键继续进入引导程序安装界面，选择语言这里选择简体中文版点击继续选择桌面安装下面给系统分区选择磁盘，点击完成选择基本分区，点击加号swap分区,大小填内存的两倍在选择根分区，使用所有可用的磁盘空间选择文件系统ext4点击完成，点击开始安装设置root密码，点击完成设置普通用户和密码，点击完成整个过程持续八分钟左右根据个人配置不同，时间长短不同好，现在点击重启系统进入重启状态点击本
  • ARM驱动学习之基础小知识 JT灬新一 ARM嵌入式arm开发学习
    ARM驱动学习之基础小知识•sch原理图工程师工作内容–方案–元器件选型–采购（能不能买到，价格）–原理图（涉及到稳定性）•layout画板工程师–layout（封装、布局，布线，log）（涉及到稳定性）–焊接的一部分工作（调试阶段板子的焊接）•驱动工程师–驱动，原理图，layout三部分的交集容易发生矛盾•PCB研发流程介绍–方案，原理图(网表)–layout工程师（gerber文件）–PCB板
  • ARM驱动学习之5 LEDS驱动 JT灬新一 嵌入式C底层arm开发学习单片机
    ARM驱动学习之5LEDS驱动知识点：•linuxGPIO申请函数和赋值函数–gpio_request–gpio_set_value•三星平台配置GPIO函数–s3c_gpio_cfgpin•GPIO配置输出模式的宏变量–S3C_GPIO_OUTPUT注意点：DRIVER_NAME和DEVICE_NAME匹配。实现步骤：1.加入需要的头文件：//Linux平台的gpio头文件#include//三
  • 【PG】常见数据库、表属性设置 江无羡 数据库
    PG的常见属性配置方法数据库复制、备份相关表的复制标识单表操作批量表操作链接数据库复制、备份相关表的复制标识单表操作通过ALTER语句单独更改一张表的复制标识。ALTERTABLE[tablename]REPLICAIDENTITYFULL;批量表操作通过代码块的方式，对某个schema中的所有表一起更新其复制标识。SELECTtablename,CASErelreplidentWHEN'd'TH
  • docker igotyback eureka云原生
    Docker容器的文件系统是隔离的，但是可以通过挂载卷（Volumes）或绑定挂载（BindMounts）将宿主机的文件系统目录映射到容器内部。要查看Docker容器的映射路径，可以使用以下方法：查看容器配置：使用dockerinspect命令可以查看容器的详细配置信息，包括挂载的卷。例如：bashdockerinspect在输出的JSON格式中，查找"Mounts"部分，这里会列出所有的挂载信息
  • 【Git】常见命令(仅笔记) 好想有猫猫 GitLinux学习笔记git笔记elasticsearchlinuxc++
    文章目录创建/初始化本地仓库添加本地仓库配置项提交文件查看仓库状态回退仓库查看日志分支删除文件暂存工作区代码远程仓库使用`.gitigore`文件让git不追踪一些文件标签创建/初始化本地仓库gitinit添加本地仓库配置项gitconfig-l#以列表形式显示配置项gitconfiguser.name"ljh"#配置user.namegitconfiguser.email"[email protected]
  • 在Ubuntu中编译含有JSON的文件出现报错 芝麻糊76 Linuxkill_buglinuxubuntujson
    在ubuntu中进行JSON相关学习的时候，我发现了一些小问题，决定与大家进行分享，减少踩坑时候出现不必要的时间耗费截取部分含有JSON部分的代码进行展示char*str="{\"title\":\"JSONExample\",\"author\":{\"name\":\"JohnDoe\",\"age\":35,\"isVerified\":true},\"tags\":[\"json\",\"
  • Linux MariaDB使用OpenSSL安装SSL证书 Meta39 MySQLOracleMariaDBLinuxWindowsssllinuxmariadb
    进入到证书存放目录，批量删除.pem证书警告：确保已经进入到证书存放目录find.-typef-iname\*.pem-delete查看是否安装OpenSSLopensslversion没有则安装yuminstallopensslopenssl-devel开启SSL编辑/etc/my.cnf文件（没有的话就创建，但是要注意，在/etc/my.cnf.d/server.cnf配置了datadir的，
  • ES聚合分析原理与代码实例讲解 光剑书架上的书 大厂Offer收割机面试题简历程序员读书硅基计算碳基计算认知计算生物计算深度学习神经网络大数据AIGCAGILLMJavaPython架构设计Agent程序员实现财富自由
    ES聚合分析原理与代码实例讲解1.背景介绍1.1问题的由来在大规模数据分析场景中，特别是在使用Elasticsearch（ES）进行数据存储和检索时，聚合分析成为了一个至关重要的功能。聚合分析允许用户对数据集进行细分和分组，以便深入探索数据的结构和模式。这在诸如实时监控、日志分析、业务洞察等领域具有广泛的应用。1.2研究现状目前，ES聚合分析已经成为现代大数据平台的核心组件之一。它支持多种类型的聚
  • ExpRe[25] bash外的其它shell：zsh和fish tritone ExpRebashlinuxubuntushell
    文章目录zsh基础配置实用特性插件`autojump`语法高亮自动补全fish优点缺点时效性本篇撰写时间为2021.12.15，由于计算机技术日新月异，博客中所有内容都有时效和版本限制，具体做法不一定总行得通，链接可能改动失效，各种软件的用法可能有修改。但是其中透露的思想往往是值得学习的。本篇前置：ExpRe[10]Ubuntu[2]准备神秘软件、备份恢复软件https://www.cnblogs
  • openssl+keepalived安装部署 _小亦_ 项目部署keepalivedopenssl
    文章目录OpenSSL安装下载地址编译安装修改系统配置版本Keepalived安装下载地址安装遇到问题安装完成配置文件keepalived运行检查运行状态查看系统日志修改服务service重新加载systemd检查配置文件语法错误OpenSSL安装下载地址考虑到后面设备可能没法连接到外网，所以采用安装包的方式进行部署，下载地址：https://www.openssl.org/source/old/
  • 关于Mysql 中 Row size too large (＞ 8126) 错误的解决和理解 秋刀prince mysqlmysql数据库
    提示：啰嗦一嘴，数据库的任何操作和验证前，一定要记得先备份！！！不会有错；文章目录问题发现一、问题导致的可能原因1、页大小2、行格式2.1compact格式2.2Redundant格式2.3Dynamic格式2.4Compressed格式3、BLOB和TEXT列二、解决办法1、修改页大小（不推荐）2、修改行格式3、修改数据类型为BLOB和TEXT列4、其他优化方式（可以参考使用）4.1合理设置数据
  • Linux sh命令 fengyehongWorld Linuxlinux
    目录一.基本语法二.选项2.1-c字符串中读取内容，并执行2.1.1基本用法2.1.2获取当前目录下失效的超链接2.2-x每个命令执行之前，将其打印出来2.3结合Here文档使用一.基本语法⏹Linux和Unix系统中用于执行shell脚本或运行命令的命令。sh[选项][脚本文件][参数...]⏹选项-c：从字符串中读取内容，并执行。-x：在每个命令执行之前，将其打印出来。-s：从标准流中读取内容
  • Linux vi常用命令 fengyehongWorld Linuxlinux
    参考资料viコマンド（vimコマンド）リファレンス目录一.保存系命令二.删除系命令三.移动系命令四.复制粘贴系命令一.保存系命令⏹保存并退出:wq⏹强制保存并退出:wq!⏹退出(文件未编辑):q⏹强制退出(忽略已编辑内容):q!⏹另存为:w新文件名二.删除系命令⏹删除当前行dd⏹清空整个文档gg：移动到文档顶部dG：删除到最后一行ggdG三.移动系命令⏹移动到文档顶部gg⏹移动到文档底部#方式1G
  • spring如何整合druid连接池？ 惜.己 springspringjunit数据库javaidea后端xml
    目录spring整合druid连接池1.新建maven项目2.新建mavenModule3.导入相关依赖4.配置log4j2.xml5.配置druid.xml1)xml中如何引入properties2)下面是配置文件6.准备jdbc.propertiesJDBC配置项解释7.配置druid8.测试spring整合druid连接池1.新建maven项目打开IDE（比如IntelliJIDEA,Ecl
  • Java：爬虫框架 dingcho Javajava爬虫
    一、ApacheNutch2【参考地址】Nutch是一个开源Java实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。Nutch致力于让每个人能很容易,同时花费很少就可以配置世界一流的Web搜索引擎.为了完成这一宏伟的目标,Nutch必须能够做到:每个月取几十亿网页为这些网页维护一个索引对索引文件进行每秒上千次的搜索提供高质量的搜索结果简单来说Nutch支持分
  • python tif转png Python与遥感 python开发语言
    importosfromosgeoimportgdalimportnumpyasnpfromPILimportImage#提取432三波段fromspectralimport*#输入文件夹路径defget_img(dataset_img):width=dataset_img.RasterXSize#获取行列数height=dataset_img.RasterYSizebands=dataset_i
  • mac 备份android 手机通讯录导入iphone,iphone如何导出通讯录（轻松教你iPhone备份通讯录的方法）... weixin_39762838 mac备份android手机通讯录导入iphone
    在日新月异的手机更替中，换手机已经成为一个非常稀松平常的事情，但将旧手机上面的通讯录导入到新手机还是让不少小伙伴为难，本篇将给大家详细讲解这方面的知识：“苹果手机通讯录怎么导入到新手机”及“安卓手机通讯录导入到新手机”的方法。一、苹果手机通讯录导入到新手机常用方法(SIM卡导入)在苹果手机主频幕上找到“设置”，单击进入设置菜单，下拉菜单列表，点击“邮件、通讯录、日历”，然后找到“导入SIM卡通讯录
  • python批量读取tiff文件_Python Pillow批量转换tif格式到jpg weixin_39557797
    最近因为想要整下网站的壁纸，从网站下载了别人整理好的合集压缩包，解压之后，却发现里面的文件都是tif的，tif格式网站和电脑都不认的，根本不能作壁纸。这时候，就需要转换图片格式了，首先我找了几款转换格式的软件，发现效果都不好，要不是不支持tif格式，要不就是转换出来的图片糊的不行。最终，还是决定用Python的Pillow库来写一个脚本，完成这个任务。下面是整个的小脚本----importosim
  • 如何用matlab灵活控制feko的求解 NingrLi matlab开发语言
    https://bbs.rfeda.cn/read.php?tid=3778Feko中的模型和求解设置等都可以通过editfeko进行设置，其文件存储为.pre文件，该文件可以用文本打开，因此，我们可以通过VB、VC、matlab等工具对.pre文件进行读写操作，以达到更灵活的使用feko。同样，对于.out文件，我们也可以进行读操作。熟练使用对.pre文件和.out文件的操作后，我们可以方便的计
  • 光盘文件系统 (iso9660) 格式解析 穷人小水滴 光盘文件系统iso9660denoGNU/Linuxjavascript
    越简单的系统,越可靠,越不容易出问题.光盘文件系统(iso9660)十分简单,只需不到200行代码,即可实现定位读取其中的文件.参考资料:https://wiki.osdev.org/ISO_9660相关文章:《光盘防水嘛?DVD+R刻录光盘泡水实验》https://blog.csdn.net/secext2022/article/details/140583910《光驱的内部结构及日常使用》ht
  • 项目中 枚举与注解的结合使用 飞翔的马甲 javaenumannotation
    前言：版本兼容，一直是迭代开发头疼的事，最近新版本加上了支持新题型，如果新创建一份问卷包含了新题型，那旧版本客户端就不支持，如果新创建的问卷不包含新题型，那么新旧客户端都支持。这里面我们通过给问卷类型枚举增加自定义注解的方式完成。顺便巩固下枚举与注解。 一、枚举 1.在创建枚举类的时候，该类已继承java.lang.Enum类，所以自定义枚举类无法继承别的类，但可以实现接口。
  • 【Scala十七】Scala核心十一：下划线_的用法 bit1129 scala
    下划线_在Scala中广泛应用，_的基本含义是作为占位符使用。_在使用时是出问题非常多的地方，本文将不断完善_的使用场景以及所表达的含义   1. 在高阶函数中使用 scala> val list = List(-3,8,7,9) list: List[Int] = List(-3, 8, 7, 9) scala> list.filter(_ > 7) r
  • web缓存基础：术语、http报头和缓存策略 dalan_123 Web
    对于很多人来说，去访问某一个站点，若是该站点能够提供智能化的内容缓存来提高用户体验，那么最终该站点的访问者将络绎不绝。缓存或者对之前的请求临时存储，是http协议实现中最核心的内容分发策略之一。分发路径中的组件均可以缓存内容来加速后续的请求，这是受控于对该内容所声明的缓存策略。接下来将讨web内容缓存策略的基本概念，具体包括如如何选择缓存策略以保证互联网范围内的缓存能够正确处理的您的内容，并谈论下
  • crontab 问题 周凡杨 linuxcrontabunix
      一： 0481-079   Reached   a   symbol   that   is   not   expected.   背景： */5   *   *   *   *  /usr/IBMIHS/rsync.sh 
  • 让tomcat支持2级域名共享session g21121 session
    tomcat默认情况下是不支持2级域名共享session的，所有有些情况下登陆后从主域名跳转到子域名会发生链接session不相同的情况，但是只需修改几处配置就可以了。 打开tomcat下conf下context.xml文件 找到Context标签,修改为如下内容 如果你的域名是www.test.com <Context sessionCookiePath="/path&q
  • web报表工具FineReport常用函数的用法总结（数学和三角函数） 老A不折腾 Webfinereport总结
      ABS ABS(number):返回指定数字的绝对值。绝对值是指没有正负符号的数值。 Number:需要求出绝对值的任意实数。 示例: ABS(-1.5)等于1.5。 ABS(0)等于0。 ABS(2.5)等于2.5。   ACOS ACOS(number):返回指定数值的反余弦值。反余弦值为一个角度，返回角度以弧度形式表示。 Number:需要返回角
  • linux 启动java进程 sh文件 墙头上一根草 linuxshelljar
    #!/bin/bash #初始化服务器的进程PId变量 user_pid=0; robot_pid=0; loadlort_pid=0; gateway_pid=0; ######### #检查相关服务器是否启动成功 #说明： #使用JDK自带的JPS命令及grep命令组合，准确查找pid #jps 加 l 参数，表示显示java的完整包路径 #使用awk，分割出pid
  • 我的spring学习笔记5-如何使用ApplicationContext替换BeanFactory aijuans Spring 3 系列
    如何使用ApplicationContext替换BeanFactory？ package onlyfun.caterpillar.device; import org.springframework.beans.factory.BeanFactory; import org.springframework.beans.factory.xml.XmlBeanFactory; import
  • Linux 内存使用方法详细解析 annan211 linux内存Linux内存解析
    来源 http://blog.jobbole.com/45748/ 我是一名程序员，那么我在这里以一个程序员的角度来讲解Linux内存的使用。 一提到内存管理，我们头脑中闪出的两个概念，就是虚拟内存，与物理内存。这两个概念主要来自于linux内核的支持。 Linux在内存管理上份为两级，一级是线性区，类似于00c73000-00c88000，对应于虚拟内存，它实际上不占用
  • 数据库的单表查询常用命令及使用方法(-) 百合不是茶 oracle函数单表查询
        创建数据库;       --建表 create table bloguser(username varchar2(20),userage number(10),usersex char(2));       创建bloguser表,里面有三个字段     &nbs
  • 多线程基础知识 bijian1013 java多线程threadjava多线程
    一．进程和线程 进程就是一个在内存中独立运行的程序，有自己的地址空间。如正在运行的写字板程序就是一个进程。 “多任务”：指操作系统能同时运行多个进程（程序）。如WINDOWS系统可以同时运行写字板程序、画图程序、WORD、Eclipse等。 线程：是进程内部单一的一个顺序控制流。 线程和进程 a.       每个进程都有独立的
  • fastjson简单使用实例 bijian1013 fastjson
    一.简介         阿里巴巴fastjson是一个Java语言编写的高性能功能完善的JSON库。它采用一种“假定有序快速匹配”的算法，把JSON Parse的性能提升到极致，是目前Java语言中最快的JSON库；包括“序列化”和“反序列化”两部分，它具备如下特征：     
  • 【RPC框架Burlap】Spring集成Burlap bit1129 spring
    Burlap和Hessian同属于codehaus的RPC调用框架，但是Burlap已经几年不更新，所以Spring在4.0里已经将Burlap的支持置为Deprecated,所以在选择RPC框架时，不应该考虑Burlap了。 这篇文章还是记录下Burlap的用法吧，主要是复制粘贴了Hessian与Spring集成一文，【RPC框架Hessian四】Hessian与Spring集成  
  • 【Mahout一】基于Mahout 命令参数含义 bit1129 Mahout
    1. mahout seqdirectory   $ mahout seqdirectory --input (-i) input Path to job input directory(原始文本文件). --output (-o) output The directory pathna
  • linux使用flock文件锁解决脚本重复执行问题 ronin47 linux lock　重复执行
    linux的crontab命令，可以定时执行操作，最小周期是每分钟执行一次。关于crontab实现每秒执行可参考我之前的文章《linux crontab 实现每秒执行》现在有个问题，如果设定了任务每分钟执行一次，但有可能一分钟内任务并没有执行完成，这时系统会再执行任务。导致两个相同的任务在执行。 例如： <? //  test .php
  • java-74-数组中有一个数字出现的次数超过了数组长度的一半，找出这个数字 bylijinnan java
    public class OcuppyMoreThanHalf { /** * Q74 数组中有一个数字出现的次数超过了数组长度的一半，找出这个数字 * two solutions: * 1.O(n) * see <beauty of coding>--每次删除两个不同的数字，不改变数组的特性 * 2.O(nlogn) * 排序。中间
  • linux 系统相关命令 candiio linux
    系统参数 cat /proc/cpuinfo  cpu相关参数 cat /proc/meminfo 内存相关参数 cat /proc/loadavg 负载情况 性能参数 1）top M：按内存使用排序 P：按CPU占用排序 1：显示各CPU的使用情况 k：kill进程 o：更多排序规则 回车：刷新数据 2）ulimit ulimit -a：显示本用户的系统限制参
  • [经营与资产]保持独立性和稳定性对于软件开发的重要意义 comsci 软件开发
         一个软件的架构从诞生到成熟，中间要经过很多次的修正和改造       如果在这个过程中，外界的其它行业的资本不断的介入这种软件架构的升级过程中           那么软件开发者原有的设计思想和开发路线
  • 在CentOS5.5上编译OpenJDK6 Cwind linuxOpenJDK
    几番周折终于在自己的CentOS5.5上编译成功了OpenJDK6，将编译过程和遇到的问题作一简要记录，备查。 0. OpenJDK介绍 OpenJDK是Sun（现Oracle）公司发布的基于GPL许可的Java平台的实现。其优点： 1、它的核心代码与同时期Sun（-> Oracle）的产品版基本上是一样的，血统纯正，不用担心性能问题，也基本上没什么兼容性问题；（代码上最主要的差异是
  • java乱码问题 dashuaifu java乱码问题js中文乱码
    swfupload上传文件参数值为中文传递到后台接收中文乱码     在js中用setPostParams（{"tag" : encodeURI( document.getElementByIdx_x("filetag").value，"utf-8")}）; 然后在servlet中String t
  • cygwin很多命令显示command not found的解决办法 dcj3sjt126com cygwin
    cygwin很多命令显示command not found的解决办法   修改cygwin.BAT文件如下 @echo off D: set CYGWIN=tty notitle glob set PATH=%PATH%;d:\cygwin\bin;d:\cygwin\sbin;d:\cygwin\usr\bin;d:\cygwin\usr\sbin;d:\cygwin\us
  • [介绍]从 Yii 1.1 升级 dcj3sjt126com PHPyii2
    2.0 版框架是完全重写的，在 1.1 和 2.0 两个版本之间存在相当多差异。因此从 1.1 版升级并不像小版本间的跨越那么简单，通过本指南你将会了解两个版本间主要的不同之处。 如果你之前没有用过 Yii 1.1，可以跳过本章，直接从"入门篇"开始读起。 请注意，Yii 2.0 引入了很多本章并没有涉及到的新功能。强烈建议你通读整部权威指南来了解所有新特性。这样有可能会发
  • Linux SSH免登录配置总结 eksliang ssh-keygenLinux SSH免登录认证Linux SSH互信
    转载请出自出处：http://eksliang.iteye.com/blog/2187265 一、原理      我们使用ssh-keygen在ServerA上生成私钥跟公钥，将生成的公钥拷贝到远程机器ServerB上后,就可以使用ssh命令无需密码登录到另外一台机器ServerB上。      生成公钥与私钥有两种加密方式，第一种是
  • 手势滑动销毁Activity gundumw100 android
    老是效仿ios，做android的真悲催！ 有需求：需要手势滑动销毁一个Activity 怎么办尼？自己写？ 不用~，网上先问一下百度。 结果： http://blog.csdn.net/xiaanming/article/details/20934541 首先将你需要的Activity继承SwipeBackActivity，它会在你的布局根目录新增一层SwipeBackLay
  • JavaScript变换表格边框颜色 ini JavaScripthtmlWebhtml5css
    效果查看：http://hovertree.com/texiao/js/2.htm代码如下，保存到HTML文件也可以查看效果： <html> <head> <meta charset="utf-8"> <title>表格边框变换颜色代码-何问起</title> </head> <body&
  • Kafka Rest : Confluent kane_xie kafkaRESTconfluent
    最近拿到一个kafka rest的需求，但kafka暂时还没有提供rest api（应该是有在开发中，毕竟rest这么火），上网搜了一下，找到一个Confluent Platform，本文简单介绍一下安装。 这里插一句，给大家推荐一个九尾搜索，原名叫谷粉SOSO，不想fanqiang谷歌的可以用这个。以前在外企用谷歌用习惯了，出来之后用度娘搜技术问题，那匹配度简直感人。 环境声明：Ubu
  • Calender不是单例 men4661273 单例Calender
             在我们使用Calender的时候，使用过Calendar.getInstance()来获取一个日期类的对象，这种方式跟单例的获取方式一样，那么它到底是不是单例呢，如果是单例的话，一个对象修改内容之后，另外一个线程中的数据不久乱套了吗？从试验以及源码中可以得出，Calendar不是单例。 测试： Calendar c1 =
  • 线程内存和主内存之间联系 qifeifei java thread
    1， java多线程共享主内存中变量的时候，一共会经过几个阶段，    lock:将主内存中的变量锁定，为一个线程所独占。   unclock:将lock加的锁定解除，此时其它的线程可以有机会访问此变量。   read:将主内存中的变量值读到工作内存当中。   load:将read读取的值保存到工作内存中的变量副本中。  
  • schedule和scheduleAtFixedRate tangqi609567707 javatimerschedule
    原文地址：http://blog.csdn.net/weidan1121/article/details/527307 import java.util.Timer;import java.util.TimerTask;import java.util.Date; /** * @author vincent */public class TimerTest {  
  • erlang 部署 wudixiaotie erlang
    1.如果在启动节点的时候报这个错 ： {"init terminating in do_boot",{'cannot load',elf_format,get_files}} 则需要在reltool.config中加入 {app, hipe, [{incl_cond, exclude}]},     2.当generate时，遇到： ERROR
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他