假面生

三 Ceph集群搭建

Ceph集群

　　集群组件

　　Ceph集群包括Ceph OSD,Ceph Monitor两种守护进程。
　　Ceph OSD(Object Storage Device): 功能是存储数据,处理数据的复制、恢复、回填、再均衡,并通过检查其他OSD守护进程的心跳来向Ceph Monitors提供一些监控信息。
　　Ceph Monitor: 是一个监视器,监视Ceph集群状态和维护集群中的各种关系。
　　Ceph存储集群至少需要一个Ceph Monitor和两个 OSD 守护进程。

　　集群环境准备

　　集群图

　　准备工作

　　准备四台服务器，需要可以上外网，其中三台作为ceph集群一台作为cehp客户端，除了client外每台加一个磁盘（/dev/sdb），无需分区

　　环境查看

　　配置主机名及hosts（四台主机主机名不一样hosts一样）

# cat /etc/hosts

127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4

::1 localhost localhost.localdomain localhost6 localhost6.localdomain6

192.168.1.101 node1

192.168.1.102 node2

192.168.1.103 node3

192.168.1.104 client

　　关闭防火墙及selinux

　　设置ntpdate时间同步并设置在crontab内

1	`ntpdate time1.aliyun.com`

　　配置ceph的yum源

1	`yum install epel-release -y`

　　四台主机均设置，如果需要设置其他版本的yum源可以打开页面选择

　　阿里云开源镜像站资源目录

# cat /etc/yum.repos.d/ceph.repo

[ceph]

name=ceph

baseurl=http://mirrors.aliyun.com/ceph/rpm-mimic/el7/x86_64/

enabled=1

gpgcheck=0

priority=1

[ceph-noarch]

name=cephnoarch

baseurl=http://mirrors.aliyun.com/ceph/rpm-mimic/el7/noarch/

enabled=1

gpgcheck=0

priority=1

[ceph-source]

name=Ceph source packages

baseurl=http://mirrors.aliyun.com/ceph/rpm-mimic/el7/SRPMS

enabled=1

gpgcheck=0

priority=1

　　更新yum源

1	`yum update`

　　注意：需要更新否则后面会报错

　　配置ssh免密登录

　　以node1位部署节点在node1配置使node1可以免密登录四台主机

ssh-keygen -t rsa

ssh-copy-id node1

ssh-copy-id node2

ssh-copy-id node3

ssh-copy-id client

　　　在node1上ssh其他主机无需输入密码代表配置ssh成功

　　　在node1上安装部署工具（其他节点不用安装）

1	`yum install ceph-deploy -y`

　　建立一个集群配置目录

　　注意：后面大部分操作在此目录进行

1 2	`mkdir /etc/ceph` `cd /etc/ceph`

　　创建集群

1	`[root@node1 ~]# ceph-deploy` `new` `node1`

　　过程如下

[root@localhost ceph]# ceph-deploy new node1

[ceph_deploy.conf][DEBUG ] found configuration file at: /root/.cephdeploy.conf

[ceph_deploy.cli][INFO ] Invoked (1.5.30): /usr/bin/ceph-deploy new node1

[ceph_deploy.cli][INFO ] ceph-deploy options:

[ceph_deploy.cli][INFO ] username : None

[ceph_deploy.cli][INFO ] func : new at 0x7f8fe7885ed8>

 [ceph_deploy.cli][INFO  ]  verbose                       : False
 [ceph_deploy.cli][INFO  ]  overwrite_conf                : False
 [ceph_deploy.cli][INFO  ]  quiet                         : False
 [ceph_deploy.cli][INFO  ]  cd_conf                       : 
 [ceph_deploy.cli][INFO  ]  cluster                       : ceph
 [ceph_deploy.cli][INFO  ]  ssh_copykey                   : True
 [ceph_deploy.cli][INFO  ]  mon                           : ['node1']
 [ceph_deploy.cli][INFO  ]  public_network                : None
 [ceph_deploy.cli][INFO  ]  ceph_conf                     : None
 [ceph_deploy.cli][INFO  ]  cluster_network               : None
 [ceph_deploy.cli][INFO  ]  default_release               : False
 [ceph_deploy.cli][INFO  ]  fsid                          : None
 [ceph_deploy.new][DEBUG ] Creating new cluster named ceph
 [ceph_deploy.new][INFO  ] making sure passwordless SSH succeeds
 [node1][DEBUG ] connected to host: node1
 [node1][DEBUG ] detect platform information from remote host
 [node1][DEBUG ] detect machine type
 [node1][DEBUG ] find the location of an executable
 [node1][INFO  ] Running command: /usr/sbin/ip link show
 [node1][INFO  ] Running command: /usr/sbin/ip addr show
 [node1][DEBUG ] IP addresses found: ['192.168.1.101']
 [ceph_deploy.new][DEBUG ] Resolving host node1
 [ceph_deploy.new][DEBUG ] Monitor node1 at 192.168.1.101
 [ceph_deploy.new][DEBUG ] Monitor initial members are ['node1']
 [ceph_deploy.new][DEBUG ] Monitor addrs are ['192.168.1.101']
 [ceph_deploy.new][DEBUG ] Creating a random mon key...
 [ceph_deploy.new][DEBUG ] Writing monitor keyring to ceph.mon.keyring...
 [ceph_deploy.new][DEBUG ] Writing initial config to ceph.conf...

　　会在当前配置文件目录生成以下配置文件

1 2	`#ls` `ceph.conf ceph-deploy-ceph.log ceph.mon.keyring`

　　说明

说明:

ceph.conf 集群配置文件

ceph-deploy-ceph.log 使用ceph-deploy部署的日志记录

ceph.mon.keyring mon的验证key文件监控需要的令牌

　　集群节点安装ceph

　　node1 node2 node3 client都需要安装

1	`yum install ceph ceph-radosgw -y`

　　查看版本

1 2	`# ceph -v` `ceph version 13.2.10 (564bdc4ae87418a232fc901524470e1a0f76d641) mimic (stable)`

　　注意：如果公网OK,并且网速好的话,可以用`ceph-deploy install node1 node2 node3`命令来安装,但网速不好的话会比较坑
　　　　所以这里我们选择直接用准备好的本地ceph源,然后`yum install ceph ceph-radosgw -y`安装即可。

　　客户端client安装ceph-common

1	`[root@client ~]# yum install ceph-common -y`

　　好像上一步已经在client安装了cehp-common

　　创建mon监控

　　解决public网络用于监控

　　修改配置文件在[global]配置端添加下面一句

1	`public` `network = 192.168.1.0/24`

　　监控节点初始化,并同步配置到所有节点(node1,node2,node3,不包括client）

1	`ceph-deploy mon create-initial`

　　如果执行报错

[node1][DEBUG ] write cluster configuration to /etc/ceph/{cluster}.conf

[ceph_deploy.mon][ERROR ] RuntimeError: config file /etc/ceph/ceph.conf exists with different content; use --overwrite-conf to overwrite

[ceph_deploy][ERROR ] GenericError: Failed to create 1 monitors

　　则在修改配置public network = 192.168.1.0/24之前执行一次ceph-deploy mon create-initial修改配置之后再次执行即可

　　查看监控状态

1 2	`[root@node1 ceph]# ceph health` `HEALTH_OK`

　　将配置信息同步到所有节点

1	`ceph-deploy admin node1 node2 node3`

　　在node2 node3多了几个配置文件

[root@node2 ceph]# ll

总用量 12

-rw------- 1 root root 151 8月 3 14:46 ceph.client.admin.keyring

-rw-r--r-- 1 root root 322 8月 3 14:46 ceph.conf

-rw-r--r-- 1 root root 92 4月 24 01:07 rbdmap

-rw------- 1 root root 0 8月 1 16:46 tmpDX_w1Z

　　查看状态

[root@localhost ceph]# ceph -s

cluster:

id: a9aa277d-7192-4687-b384-9787b73ece71

health: HEALTH_OK #集群监控状态OK

services:

mon: 1 daemons, quorum node1 (age 3m) #1个mon

mgr: no daemons active

osd: 0 osds: 0 up, 0 in

data:

pools: 0 pools, 0 pgs

objects: 0 objects, 0 B

usage: 0 B used, 0 B / 0 B avail

pgs:

　　为了防止mon单点故障，你可以加多个mon节点(建议奇数个，因为有quorum仲裁投票）

1 2	`ceph-deploy mon add node2` `ceph-deploy mon add node3`

　　再次查看

[root@localhost ceph]# ceph -s

cluster:

id: a9aa277d-7192-4687-b384-9787b73ece71

health: HEALTH_OK

services:

mon: 3 daemons, quorum node1,node2,node3 (age 0.188542s) #3个mon了

mgr: no daemons active

osd: 0 osds: 0 up, 0 in

data:

pools: 0 pools, 0 pgs

objects: 0 objects, 0 B

usage: 0 B used, 0 B / 0 B avail

pgs:

　　#### 监控到时间不同步的解决方法

　　ceph集群对时间同步要求非常高, 即使你已经将ntpd服务开启,但仍然可能有`clock skew deteted`相关警告**

　　请做如下尝试:

　　1, 在ceph集群所有节点上(`node1`,`node2`,`node3`)不使用ntpd服务,直接使用crontab同步
　　# systemctl stop ntpd
　　# systemctl disable ntpd

　　# crontab -e
　　*/10 * * * * ntpdate ntp1.aliyun.com               每5或10分钟同步1次公网的任意时间服务器

　　2, 调大时间警告的阈值
　　[root@node1 ceph]# vim ceph.conf
　　[global]                               在global参数组里添加以下两行

　　mon clock drift allowed = 2               # monitor间的时钟滴答数(默认0.5秒)
　　mon clock drift warn backoff = 30       # 调大时钟允许的偏移量(默认为5)

　　修改了ceph.conf配置需要同步到所有节点

1	`ceph-deploy --overwrite-conf admin node1 node2 node3`

　　前面第1次同步不需要加--overwrite-conf参数
　　这次修改ceph.conf再同步就需要加--overwrite-conf参数覆盖

　　所有ceph集群节点上重启ceph-mon.target服务

1	`systemctl restart ceph-mon.target`

　　创建mgr（管理）

　　eph luminous版本中新增加了一个组件：Ceph Manager Daemon，简称ceph-mgr。

　　该组件的主要作用是分担和扩展monitor的部分功能，减轻monitor的负担，让更好地管理ceph存储系统。

1	`ceph-deploy mgr create node1`

　　查看

[root@localhost ceph]# ceph -s

cluster:

id: a9aa277d-7192-4687-b384-9787b73ece71

health: HEALTH_WARN

Module 'restful' has failed dependency: No module named 'pecan'

Reduced data availability: 1 pg inactive

OSD count 0 < osd_pool_default_size 3

services:

mon: 3 daemons, quorum node1,node2,node3 (age 10m)

mgr: node1(active, since 2m) #创建了一个mgr节点是node

osd: 0 osds: 0 up, 0 in

data:

pools: 1 pools, 1 pgs

objects: 0 objects, 0 B

usage: 0 B used, 0 B / 0 B avail

pgs: 100.000% pgs unknown

1 unknown

　　添加多个mgr可以实现HA

1 2	`ceph-deploy mgr create node2` `ceph-deploy mgr create node3`

　　查看

[root@localhost ceph]# ceph -s

cluster:

id: a9aa277d-7192-4687-b384-9787b73ece71

health: HEALTH_WARN

Module 'restful' has failed dependency: No module named 'pecan'

Reduced data availability: 1 pg inactive

OSD count 0 < osd_pool_default_size 3

services:

mon: 3 daemons, quorum node1,node2,node3 (age 11m)

mgr: node1(active, since 3m), standbys: node2, node3 #3个mgr其中node1为active node2 3为standbys

osd: 0 osds: 0 up, 0 in

data:

pools: 1 pools, 1 pgs

objects: 0 objects, 0 B

usage: 0 B used, 0 B / 0 B avail

pgs: 100.000% pgs unknown

1 unknown

　　创建OSD（存储盘）

　　查看帮助

[root@node1 ceph]# ceph-deploy disk --help

[root@node1 ceph]# ceph-deploy osd --help

　　zap表示干掉磁盘上的数据,相当于格式化

[root@node1 ceph]# ceph-deploy disk zap node1 /dev/sdb

[root@node1 ceph]# ceph-deploy disk zap node2 /dev/sdb

[root@node1 ceph]# ceph-deploy disk zap node3 /dev/sdb

　　将磁盘创建为osd

[root@node1 ceph]# ceph-deploy osd create --data /dev/sdb node1

[root@node1 ceph]# ceph-deploy osd create --data /dev/sdb node2

[root@node1 ceph]# ceph-deploy osd create --data /dev/sdb node3

[root@localhost ceph]# ceph-deploy osd create --data /dev/sdb node1

[ceph_deploy.conf][DEBUG ] found configuration file at: /root/.cephdeploy.conf

[ceph_deploy.cli][INFO ] Invoked (2.0.1): /usr/bin/ceph-deploy osd create --data /dev/sdb node1

[ceph_deploy.cli][INFO ] ceph-deploy options:

[ceph_deploy.cli][INFO ] verbose : False

[ceph_deploy.cli][INFO ] bluestore : None

[ceph_deploy.cli][INFO ] cd_conf :

[ceph_deploy.cli][INFO ] cluster : ceph

[ceph_deploy.cli][INFO ] fs_type : xfs

[ceph_deploy.cli][INFO ] block_wal : None

[ceph_deploy.cli][INFO ] default_release : False

[ceph_deploy.cli][INFO ] username : None

[ceph_deploy.cli][INFO ] journal : None

[ceph_deploy.cli][INFO ] subcommand : create

[ceph_deploy.cli][INFO ] host : node1

[ceph_deploy.cli][INFO ] filestore : None

[ceph_deploy.cli][INFO ] func :

[ceph_deploy.cli][INFO ] ceph_conf : None

[ceph_deploy.cli][INFO ] zap_disk : False

[ceph_deploy.cli][INFO ] data : /dev/sdb

[ceph_deploy.cli][INFO ] block_db : None

[ceph_deploy.cli][INFO ] dmcrypt : False

[ceph_deploy.cli][INFO ] overwrite_conf : False

[ceph_deploy.cli][INFO ] dmcrypt_key_dir : /etc/ceph/dmcrypt-keys

[ceph_deploy.cli][INFO ] quiet : False

[ceph_deploy.cli][INFO ] debug : False

[ceph_deploy.osd][DEBUG ] Creating OSD on cluster ceph with data device /dev/sdb

[node1][DEBUG ] connected to host: node1

[node1][DEBUG ] detect platform information from remote host

[node1][DEBUG ] detect machine type

[node1][DEBUG ] find the location of an executable

[ceph_deploy.osd][INFO ] Distro info: CentOS Linux 7.5.1804 Core

[ceph_deploy.osd][DEBUG ] Deploying osd to node1

[node1][DEBUG ] write cluster configuration to /etc/ceph/{cluster}.conf

[node1][WARNIN] osd keyring does not exist yet, creating one

[node1][DEBUG ] create a keyring file

[node1][DEBUG ] find the location of an executable

[node1][INFO ] Running command: /usr/sbin/ceph-volume --cluster ceph lvm create --bluestore --data /dev/sdb

[node1][WARNIN] Running command: /usr/bin/ceph-authtool --gen-print-key

[node1][WARNIN] Running command: /usr/bin/ceph --cluster ceph --name client.bootstrap-osd --keyring /var/lib/ceph/bootstrap-osd/ceph.keyring -i - osd new d39eddff-d29a-426a-ae2b-4c5a4026458d

[node1][WARNIN] Running command: /usr/sbin/vgcreate --force --yes ceph-a1598e52-3eb9-45c4-8416-9c5537241d70 /dev/sdb

[node1][WARNIN] stdout: Physical volume "/dev/sdb" successfully created.

[node1][WARNIN] stdout: Volume group "ceph-a1598e52-3eb9-45c4-8416-9c5537241d70" successfully created

[node1][WARNIN] Running command: /usr/sbin/lvcreate --yes -l 100%FREE -n osd-block-d39eddff-d29a-426a-ae2b-4c5a4026458d ceph-a1598e52-3eb9-45c4-8416-9c5537241d70

[node1][WARNIN] stdout: Logical volume "osd-block-d39eddff-d29a-426a-ae2b-4c5a4026458d" created.

[node1][WARNIN] Running command: /usr/bin/ceph-authtool --gen-print-key

[node1][WARNIN] Running command: /usr/bin/mount -t tmpfs tmpfs /var/lib/ceph/osd/ceph-0

[node1][WARNIN] Running command: /usr/bin/chown -h ceph:ceph /dev/ceph-a1598e52-3eb9-45c4-8416-9c5537241d70/osd-block-d39eddff-d29a-426a-ae2b-4c5a4026458d

[node1][WARNIN] Running command: /usr/bin/chown -R ceph:ceph /dev/dm-3

[node1][WARNIN] Running command: /usr/bin/ln -s /dev/ceph-a1598e52-3eb9-45c4-8416-9c5537241d70/osd-block-d39eddff-d29a-426a-ae2b-4c5a4026458d /var/lib/ceph/osd/ceph-0/block

[node1][WARNIN] Running command: /usr/bin/ceph --cluster ceph --name client.bootstrap-osd --keyring /var/lib/ceph/bootstrap-osd/ceph.keyring mon getmap -o /var/lib/ceph/osd/ceph-0/activate.monmap

[node1][WARNIN] stderr: 2020-08-04T17:39:52.619+0800 7fa772483700 -1 auth: unable to find a keyring on /etc/ceph/ceph.client.bootstrap-osd.keyring,/etc/ceph/ceph.keyring,/etc/ceph/keyring,/etc/ceph/keyring.bin,: (2) No such file or directory

[node1][WARNIN] 2020-08-04T17:39:52.619+0800 7fa772483700 -1 AuthRegistry(0x7fa76c058528) no keyring found at /etc/ceph/ceph.client.bootstrap-osd.keyring,/etc/ceph/ceph.keyring,/etc/ceph/keyring,/etc/ceph/keyring.bin,, disabling cephx

[node1][WARNIN] stderr: got monmap epoch 3

[node1][WARNIN] Running command: /usr/bin/ceph-authtool /var/lib/ceph/osd/ceph-0/keyring --create-keyring --name osd.0 --add-key AQDnLClfQ6UHKhAAkJ585N2DYxYt5negauu0Mg==

[node1][WARNIN] stdout: creating /var/lib/ceph/osd/ceph-0/keyring

[node1][WARNIN] added entity osd.0 auth(key=AQDnLClfQ6UHKhAAkJ585N2DYxYt5negauu0Mg==)

[node1][WARNIN] Running command: /usr/bin/chown -R ceph:ceph /var/lib/ceph/osd/ceph-0/keyring

[node1][WARNIN] Running command: /usr/bin/chown -R ceph:ceph /var/lib/ceph/osd/ceph-0/

[node1][WARNIN] Running command: /usr/bin/ceph-osd --cluster ceph --osd-objectstore bluestore --mkfs -i 0 --monmap /var/lib/ceph/osd/ceph-0/activate.monmap --keyfile - --osd-data /var/lib/ceph/osd/ceph-0/ --osd-uuid d39eddff-d29a-426a-ae2b-4c5a4026458d --setuser ceph --setgroup ceph

[node1][WARNIN] --> ceph-volume lvm prepare successful for: /dev/sdb

[node1][WARNIN] Running command: /usr/bin/chown -R ceph:ceph /var/lib/ceph/osd/ceph-0

[node1][WARNIN] Running command: /usr/bin/ceph-bluestore-tool --cluster=ceph prime-osd-dir --dev /dev/ceph-a1598e52-3eb9-45c4-8416-9c5537241d70/osd-block-d39eddff-d29a-426a-ae2b-4c5a4026458d --path /var/lib/ceph/osd/ceph-0 --no-mon-config

[node1][WARNIN] Running command: /usr/bin/ln -snf /dev/ceph-a1598e52-3eb9-45c4-8416-9c5537241d70/osd-block-d39eddff-d29a-426a-ae2b-4c5a4026458d /var/lib/ceph/osd/ceph-0/block

[node1][WARNIN] Running command: /usr/bin/chown -h ceph:ceph /var/lib/ceph/osd/ceph-0/block

[node1][WARNIN] Running command: /usr/bin/chown -R ceph:ceph /dev/dm-3

[node1][WARNIN] Running command: /usr/bin/chown -R ceph:ceph /var/lib/ceph/osd/ceph-0

[node1][WARNIN] Running command: /usr/bin/systemctl enable ceph-volume@lvm-0-d39eddff-d29a-426a-ae2b-4c5a4026458d

[node1][WARNIN] stderr: Created symlink from /etc/systemd/system/multi-user.target.wants/[email protected] to /usr/lib/systemd/system/[email protected].

[node1][WARNIN] Running command: /usr/bin/systemctl enable --runtime ceph-osd@0

[node1][WARNIN] stderr: Created symlink from /run/systemd/system/ceph-osd.target.wants/[email protected] to /usr/lib/systemd/system/[email protected].

[node1][WARNIN] Running command: /usr/bin/systemctl start ceph-osd@0

[node1][WARNIN] --> ceph-volume lvm activate successful for osd ID: 0

[node1][WARNIN] --> ceph-volume lvm create successful for: /dev/sdb

[node1][INFO ] checking OSD status...

[node1][DEBUG ] find the location of an executable

[node1][INFO ] Running command: /bin/ceph --cluster=ceph osd stat --format=json

[ceph_deploy.osd][DEBUG ] Host node1 is now ready for osd use.

　　查看

[root@localhost ceph]# ceph -s

cluster:

id: a9aa277d-7192-4687-b384-9787b73ece71

health: HEALTH_WARN

Module 'restful' has failed dependency: No module named 'pecan'

services:

mon: 3 daemons, quorum node1,node2,node3 (age 22m)

mgr: node1(active, since 14m), standbys: node2, node3

osd: 3 osds: 3 up (since 4s), 3 in (since 4s) #3个osd 3个up启用状态 3 in代表3G在使用每块硬盘占用1G

data:

pools: 1 pools, 1 pgs

objects: 0 objects, 0 B

usage: 3.0 GiB used, 45 GiB / 48 GiB avail #3G使用 45G空闲总计48G及三块16G硬盘相加之和

pgs: 1 active+clean

　集群节点的扩容方法

　　假设再加一个新的集群节点node4

　　1, 主机名配置和绑定

　　2, 在node4上`yum install ceph ceph-radosgw -y`安装软件

　　3, 在部署节点node1上同步配置文件给node4. `ceph-deploy admin node4`

　　4, 按需求选择在node4上添加mon或mgr或osd等
　　

　　ceph dashboard

　　查看集群状态确认mgr的active节点

[root@node1 ceph]# ceph -s

cluster:

id: 134c6247-2fd4-4669-8c19-d0c9200d90c8

health: HEALTH_OK

services:

mon: 3 daemons, quorum node1,node2,node3

mgr: node1(active), standbys: node2, node3 #确认mgr active节点为node1

osd: 3 osds: 3 up, 3 in

rgw: 1 daemon active

data:

pools: 4 pools, 32 pgs

objects: 189 objects, 1.5 KiB

usage: 3.0 GiB used, 45 GiB / 48 GiB avail

pgs: 32 active+clean

　　查看开启及关闭的模块

[root@node1 mgr-dashboard]# ceph mgr module ls

{

"enabled_modules": [

"balancer",

"crash",

"dashboard",

"iostat",

"restful",

"status"

],

"disabled_modules": [

{

"name": "hello",

"can_run": true,

"error_string": ""

},

{

"name": "influx",

"can_run": false,

"error_string": "influxdb python module not found"

},

{

"name": "localpool",

"can_run": true,

"error_string": ""

},

{

"name": "prometheus",

"can_run": true,

"error_string": ""

},

{

"name": "selftest",

"can_run": true,

"error_string": ""

},

{

"name": "smart",

"can_run": true,

"error_string": ""

},

{

"name": "telegraf",

"can_run": true,

"error_string": ""

},

{

"name": "telemetry",

"can_run": true,

"error_string": ""

},

{

"name": "zabbix",

"can_run": true,

"error_string": ""

}

]

}

　　开启dashboard模块

1	`ceph mgr module enable dashboard`

　　如果开启报错

1 2	`[root@localhost ceph]# ceph mgr module enable dashboard` `Error ENOENT: all mgr daemons` `do` `not support module` `'dashboard', pass --force to force enablement`

　　需要在每个开启mgr的节点安装ceph-mgr-dashboard

1	`yum install ceph-mgr-dashboard -y`

　　注意：不能仅仅在active节点安装，需要在standby节点都安装

　　创建自签名证书

1 2	`[root@node1 ceph]# ceph dashboard create-self-signed-cert` `Self-signed certificate created`

　　生成密钥对，并配置给ceph mgr

1 2	`[root@node1 ceph]# mkdir /etc/mgr-dashboard` `[root@node1 ceph]# cd /etc/mgr-dashboard/`

1	`openssl req -new` `-nodes -x509 -subj` `"/O=IT-ceph/CN=cn"` `-days 3650 -keyout dashboard.key -out` `dashboard.crt -extensions v3_ca`

1 2	`[root@node1 mgr-dashboard]# ls` `dashboard.crt dashboard.key`

　　在ceph集群的active mgr节点上(我这里为node1)配置mgr services

1 2	`[root@node1 mgr-dashboard]# ceph config` `set` `mgr mgr/dashboard/server_addr 192.168.1.101` `[root@node1 mgr-dashboard]# ceph config` `set` `mgr mgr/dashboard/server_port 8080`

　　重启dashboard模块,并查看访问地址

　　注意：需要重启不重启查看的端口是默认的8443端口无法访问

　　　　重启就是先关disable再开启enable

1 2	`[root@node1 mgr-dashboard]# ceph mgr module disable dashboard` `[root@node1 mgr-dashboard]# ceph mgr module enable dashboard`

　　查看mgr service

# ceph mgr services

{

"dashboard": "https://192.168.1.101:8080/"

}

　　设置访问web页面用户名和密码

1	`ceph dashboard` `set-login-credentials admin admin`

　　通过本机或其它主机访问 https://ip:8080

　　Ceph文件存储

　　要运行Ceph文件系统，你必须先装只是带一个mds的Ceph存储集群

　　Ceph.MDS：为Ceph文件存储类型存放元数据metadata（也就是说Ceph块存储和Ceph对象存储不使用MDS）

　　创建文件存储并使用

　　第1步在node1部署节点上修改配置/etc/ceph/ceph.conf 增加配置

1	`mon_allow_pool_delete =` `true`

　　同步配置文件

　　注意：修改了配置文件才需要同步，没有修改不需要同步配置文件

1	`ceph-deploy --overwrite-conf admin node1 node2 node3`

　　创建3个mds

1	`[root@node1 ceph]# ceph-deploy mds create node1 node2 node3`

　　第2步: 一个Ceph文件系统需要至少两个RADOS存储池，一个用于数据，一个用于元数据。所以我们创建它们

[root@node1 ceph]# ceph osd pool create cephfs_pool 128

pool 'cephfs_pool' created

[root@node1 ceph]# ceph osd pool create cephfs_metadata 64

pool 'cephfs_metadata' created

　　参数解释

1 2	`创建pool自定义名为cephfs_pool 用于存储数据 PG数为128 用于存储数据所以PG数较大` `创建pool自定义名为cephfs_metadata 用于存储元数据 PG数为64`

　　PG介绍

　　PG, Placement Groups。CRUSH先将数据分解成一组对象，然后根据对象名称、复制级别和系统中的PG数等信息执行散列操作，再将结果生成PG ID。可以将PG看做一个逻辑容器，这个容器包含多个对象，同时这个逻辑对象映射之多个OSD上。
如果没有PG，在成千上万个OSD上管理和跟踪数百万计的对象的复制和传播是相当困难的。没有PG这一层，管理海量的对象所消耗的计算资源也是不可想象的。建议每个OSD上配置50~100个PG。

　　如果定义PG数

　　一般的

　　少于5个OSD则PG数为128

　　5-10个OSD则PG数为512

　　10-50个OSD则PG数为1024

　　如果有更多的OSD需要自己理解计算

　　查看

[root@node1 ceph]# ceph osd pool ls |grep cephfs

cephfs_pool

cephfs_metadata

　　查看创建的pool详细信息

[root@localhost ceph]# ceph osd pool get cephfs_pool all

size: 3

min_size: 2

pg_num: 128

pgp_num: 128

crush_rule: replicated_rule

hashpspool: true

nodelete: false

nopgchange: false

nosizechange: false

write_fadvise_dontneed: false

noscrub: false

nodeep-scrub: false

use_gmt_hitset: 1

fast_read: 0

pg_autoscale_mode: warn

　　第3步: 创建Ceph文件系统,并确认客户端访问的节点

1 2	`[root@node1 ceph]# ceph fs` `new` `cephfs cephfs_metadata cephfs_pool` `new` `fs with metadata pool 10 and data pool 9`

　　查看

[root@node1 ceph]# ceph osd pool ls

.rgw.root

default.rgw.control

default.rgw.meta

default.rgw.log

cephfs_pool

cephfs_metadata

1 2	`[root@node1 ceph]# ceph fs ls` `name: cephfs, metadata pool: cephfs_metadata, data pools: [cephfs_pool ]`

1 2	`[root@node1 ceph]# ceph mds stat` `cephfs-1/1/1 up {0=node3=up:active}, 2 up:standby #这里看到node3为up状态`

　　metadata保存在node3上

　　客户端准备验证key文件

　　说明: ceph默认启用了cephx认证, 所以客户端的挂载必须要验证（ceph.conf默认配置文件开启）

　　在集群节点(node1,node2,node3)上任意一台查看密钥字符串

1	`cat /etc/ceph/ceph.client.admin.keyring`

　　输出

1	`ceph-authtool -p /etc/ceph/ceph.client.admin.keyring >admin.key`

　　把这个文件放在客户端client /root/admin.key

　　注意：直接把key复制编辑admin.key文档可能会在挂载时报错

　　客户端client安装

1	`yum -y install ceph-fuse`

　　需要安装否则客户端不支持

　　客户端挂载

　　可以使用其他node主机名进行挂载，例如node3

1	`mount -t ceph node1:6789:/ /mnt -o name=admin,secretfile=/root/admin.key`

　　查看

　　注意：如果使用文件挂载报错可以使用参数secret=秘钥进行挂载

　　可以使用两个客户端, 同时挂载此文件存储,可实现同读同写

　　往挂载的硬盘写数据可以在dashboard查看读写监控状态

1	`dd` `if=/dev/zero of=/mnt/file1 bs=10M count=1000`

　　删除文件存储

　　在所有挂载了文件存储的客户端卸载文件挂载

1	`umount /mnt`

　　停掉所有节点的mds node1 node2 node3

1	`systemctl stop ceph-mds.target`

　　回到集群任意一个节点上(node1,node2,node3其中之一)删除

　　如果要客户端删除,需要在node1上`ceph-deploy admin client`同步配置才可以

[root@node3 ~]# ceph fs rm cephfs --yes-i-really-mean-it

[root@node3 ~]# ceph osd pool delete cephfs_metadata cephfs_metadata --yes-i-really-really-mean-it

pool 'cephfs_metadata' removed

[root@node3 ~]# ceph osd pool delete cephfs_pool cephfs_pool --yes-i-really-really-mean-it

pool 'cephfs_pool' removed

　　注意：为了安全需要输入两次创建的pool名并且加参数--yes-i-really-really-mean-it才能删除

　　注意：需要在配置文件添加以下配置，才能删除

1	`mon_allow_pool_delete =` `true`

　　如果已经添加配置还提示

1	`Error EPERM: pool deletion` `is` `disabled; you must first` `set` `the mon_allow_pool_delete config option to` `true` `before you can destroy a pool`

　　则重启服务ceph-mon.target即可

　　启动md是服务 node1 node2 node3节点启动

1	`systemctl start ceph-mds.target`

　　Ceph快存储

　　第一步：在node1上同步配置文件到client

1 2	`[root@node1 ceph]# cd /etc/ceph` `[root@node1 ceph]# ceph-deploy admin client`

　　第二步：建立存储池，并初始化

　　在客户端client操作

1 2	`[root@client ~]# ceph osd pool create rbd_pool 128` `pool` `'rbd_pool'` `created`

　　初始化

1	`[root@client ~]# rbd pool init rbd_pool`

　　第三步：创建一个存储卷（这里卷名为volume1 大小为5000M）

1	`rbd create volume1 --pool rbd_pool --size 5000`

　　查看

1 2	`[root@client ~]# rbd ls rbd_pool` `volume1`

[root@client ~]# rbd info volume1 -p rbd_pool

rbd image 'volume1': #volume1为rbd_image

size 4.9 GiB in 1250 objects

order 22 (4 MiB objects)

id: 60fc6b8b4567

block_name_prefix: rbd_data.60fc6b8b4567

format: 2 #两种格式1和2 默认是2

features: layering, exclusive-lock, object-map, fast-diff, deep-flatten

op_features:

flags:

create_timestamp: Tue Aug 4 09:20:05 2020

　　第四步：将创建的卷映射成块设备

　　因为rbd镜像的一些特性，OS kernel并不支持，所以映射报错

[root@client ~]# rbd map rbd_pool/volume1

rbd: sysfs write failed

RBD image feature set mismatch. You can disable features unsupported by the kernel with "rbd feature disable rbd_pool/volume1 object-map fast-diff deep-flatten".

In some cases useful info is found in syslog - try "dmesg | tail".

rbd: map failed: (6) No such device or address

　　解决办法：disable掉相关特性

1	`rbd feature disable rbd_pool/volume1 exclusive-lock` `object-map fast-diff deep-flatten`

　　再次映射

1 2	`[root@client ~]# rbd map rbd_pool/volume1` `/dev/rbd0`

　　创建了磁盘/dev/rbd0 类似于做了一个软连接

　　查看映射

[root@client ~]# rbd showmapped

id pool image snap device

0 rbd_pool volume1 - /dev/rbd0

　　如果需要取消映射可以使用命令

1	`rbd unmap /dev/rbd0`

　　第六步：格式化挂载

1 2	`mkfs.xfs /dev/rbd0` `mount /dev/rbd0 /mnt`

　　查看

1 2	`[root@client ~]# df -h\|tail -1` `/dev/rbd0 4.9G 33M 4.9G 1% /mnt`

　　块扩容与裁减

　　扩容成8000M

1 2	`[root@client ~]# rbd resize --size 8000 rbd_pool/volume1` `Resizing image: 100% complete...done.`

　　查看并没有变化

1 2	`[root@client ~]# df -h\|tail -1` `/dev/rbd0 4.9G 33M 4.9G 1% /mnt`

　　动态刷新扩容

[root@client ~]# xfs_growfs -d /mnt/

meta-data=/dev/rbd0 isize=512 agcount=8, agsize=160768 blks

= sectsz=512 attr=2, projid32bit=1

= crc=1 finobt=0 spinodes=0

data = bsize=4096 blocks=1280000, imaxpct=25

= sunit=1024 swidth=1024 blks

naming =version 2 bsize=4096 ascii-ci=0 ftype=1

log =internal bsize=4096 blocks=2560, version=2

= sectsz=512 sunit=8 blks, lazy-count=1

realtime =none extsz=4096 blocks=0, rtextents=0

data blocks changed from 1280000 to 2048000

　　注意：该命令和LVM扩容命令一致

　　再次查看，扩容成功

1 2	`[root@client ~]# df -h\|tail -1` `/dev/rbd0 7.9G 33M 7.8G 1% /mnt`

　　块存储裁减

　　不能在线裁减，裁减后需要重新格式化再挂载，如果有数据需要提前备份好数据

　　裁减为5000M

1 2	`[root@client ~]# rbd resize --size 5000 rbd_pool/volume1 --allow-shrink` `Resizing image: 100% complete...done.`

　　卸载，格式化

umount /mnt

fdisk -l

mkfs.xfs -f /dev/rbd0

mount /dev/rbd0 /mnt/

　　查看

1 2	`[root@client ~]# df -h\|tail -1` `/dev/rbd0 4.9G 33M 4.9G 1% /mnt`

　　删除块存储

#卸载

[root@client ~]# umount /mnt

#取消映射

[root@client ~]# rbd unmap /dev/rbd0

#删除存储池

[root@client ~]# ceph osd pool delete rbd_pool rbd_pool --yes-i-really-really-mean-it

pool 'rbd_pool' removed

　　Ceph对象存储

　　第一步：在node1上创建rgw

1	`[root@node1 ceph]# ceph-deploy rgw create node1`

　　查看,运行端口是7480

1	`lsof -i:7480`

　　第二步：在客户端测试连接对象网关

　　在client操作

　　安装测试工具

　　创建一个测试用户,需要在部署节点使用ceph-deploy admin client同步配置文件给client

[root@client ~]# radosgw-admin user create --uid="testuser" --display-name="First User"|grep -E 'access_key|secret_key'

"access_key": "S859J38AS6WW1CZSB90M",

"secret_key": "PCmfHoAsHw2GIEioSWvN887o02VXesOkX2gJ20fG"

[root@client ~]# radosgw-admin user create --uid="testuser" --display-name="First User"

{

"user_id": "testuser",

"display_name": "First User",

"email": "",

"suspended": 0,

"max_buckets": 1000,

"auid": 0,

"subusers": [],

"keys": [

{

"user": "testuser",

"access_key": "S859J38AS6WW1CZSB90M",

"secret_key": "PCmfHoAsHw2GIEioSWvN887o02VXesOkX2gJ20fG"

}

],

"swift_keys": [],

"caps": [],

"op_mask": "read, write, delete",

"default_placement": "",

"placement_tags": [],

"bucket_quota": {

"enabled": false,

"check_on_raw": false,

"max_size": -1,

"max_size_kb": 0,

"max_objects": -1

},

"user_quota": {

"enabled": false,

"check_on_raw": false,

"max_size": -1,

"max_size_kb": 0,

"max_objects": -1

},

"temp_url_keys": [],

"type": "rgw",

"mfa_ids": []

}

　　上面一大段主要有用的为access_key与secret_key，用于连接对象存储网关

[root@client ~]# radosgw-admin user create --uid="testuser" --display-name="First User"|grep -E 'access_key|secret_key'

"access_key": "S859J38AS6WW1CZSB90M",

"secret_key": "PCmfHoAsHw2GIEioSWvN887o02VXesOkX2gJ20fG"

　　s3连接对象网关

　　第一步：客户端安装s3cmd工具，并编写配置文件

1	`yum install s3cmd`

　　创建配置文件，内容如下

[root@client ~]# cat /root/.s3cfg

[default]

access_key = S859J38AS6WW1CZSB90M

secret_key = PCmfHoAsHw2GIEioSWvN887o02VXesOkX2gJ20fG

host_base = 192.168.1.101:7480

host_bucket = 192.168.1.101:7480/%(bucket)

cloudfront_host = 192.168.1.101:7480

use_https = False

　　列出bucket

1	`s3cmd ls`

　　创建一个桶

1	`s3cmd mb s3://test_bucket`

　　上传文件到桶

1	`[root@client ~]# s3cmd put /etc/fstab s3://test_bucket`

　　下载文件到当前目录

1	`[root@client ~]# s3cmd` `get` `s3://test_bucket/fstab`

android系统selinux中添加新属性property 辉色投像
1.定位/android/system/sepolicy/private/property_contexts声明属性开头：persist.charge声明属性类型：u:object_r:system_prop:s0图12.定位到android/system/sepolicy/public/domain.te删除neverallow{domain-init}default_prop:property
C语言如何定义宏函数？小九格物 c语言
在C语言中，宏函数是通过预处理器定义的，它在编译之前替换代码中的宏调用。宏函数可以模拟函数的行为，但它们不是真正的函数，因为它们在编译时不会进行类型检查，也不会分配存储空间。宏函数的定义通常使用#define指令，后面跟着宏的名称和参数列表，以及宏展开后的代码。宏函数的定义方式：1.基本宏函数：这是最简单的宏函数形式，它直接定义一个表达式。#defineSQUARE(x)((x)*(x))2.带参
Linux下QT开发的动态库界面弹出操作（SDL2） 13jjyao QT类 qt 开发语言 sdl2 linux
需求：操作系统为linux，开发框架为qt，做成需带界面的qt动态库，调用方为java等非qt程序难点：调用方为java等非qt程序，也就是说调用方肯定不带QApplication::exec()，缺少了这个，QTimer等事件和QT创建的窗口将不能弹出(包括opencv也是不能弹出)；这与qt调用本身qt库是有本质的区别的思路：1.调用方缺QApplication::exec()，那么我们在接口
linux sdl windows.h,Windows下的SDL安装奔跑吧linux内核 linux sdl windows.h
首先你要下载并安装SDL开发包。如果装在C盘下，路径为C:\SDL1.2.5如果在WINDOWS下。你可以按以下步骤：1.打开VC++，点击"Tools",Options2,点击directories选项3.选择"Includefiles"增加一个新的路径。"C:\SDL1.2.5\include"4，现在选择"Libaryfiles“增加"C:\SDL1.2.5\lib"现在你可以开始编写你的第
linux中sdl的使用教程,sdl使用入门 Melissa Corvinus linux中sdl的使用教程
本文通过一个简单示例讲解SDL的基本使用流程。示例中展示一个窗口，窗口里面有个随机颜色快随机移动。当我们鼠标点击关闭按钮时间窗口关闭。基本步骤如下：1.初始化SDL并创建一个窗口。SDL_Init()初始化SDL_CreateWindow()创建窗口2.纹理渲染存储RGB和存储纹理的区别：比如一个从左到右由红色渐变到蓝色的矩形，用存储RGB的话就需要把矩形中每个点的具体颜色值存储下来；而纹理只是一
PHP环境搭建详细教程好看资源平台前端 php
PHP是一个流行的服务器端脚本语言，广泛用于Web开发。为了使PHP能够在本地或服务器上运行，我们需要搭建一个合适的PHP环境。本教程将结合最新资料，介绍在不同操作系统上搭建PHP开发环境的多种方法，包括Windows、macOS和Linux系统的安装步骤，以及本地和Docker环境的配置。1.PHP环境搭建概述PHP环境的搭建主要分为以下几类：集成开发环境：例如XAMPP、WAMP、MAMP，这
使用 FinalShell 进行远程连接（ssh 远程连接 Linux 服务器）编程经验分享开发工具服务器 ssh linux
目录前言基本使用教程新建远程连接连接主机自定义命令路由追踪前言后端开发，必然需要和服务器打交道，部署应用，排查问题，查看运行日志等等。一般服务器都是集中部署在机房中，也有一些直接是云服务器，总而言之，程序员不可能直接和服务器直接操作，一般都是通过ssh连接来登录服务器。刚接触远程连接时，使用的是XSHELL来远程连接服务器，连接上就能够操作远程服务器了，但是仅用XSHELL并没有上传下载文件的功能
【加密社】Solidity 中的事件机制及其应用加密社闲侃区块链智能合约区块链
加密社引言在Solidity合约开发过程中，事件（Events）是一种非常重要的机制。它们不仅能够让开发者记录智能合约的重要状态变更，还能够让外部系统（如前端应用）监听这些状态的变化。本文将详细介绍Solidity中的事件机制以及如何利用不同的手段来触发、监听和获取这些事件。事件存储的地方当我们在Solidity合约中使用emit关键字触发事件时，该事件会被记录在区块链的交易收据中。具体而言，事件
libyuv之linux编译 jaronho Linux linux 运维服务器
文章目录一、下载源码二、编译源码三、注意事项1、银河麒麟系统（aarch64）（1）解决armv8-a+dotprod+i8mm指令集支持问题（2）解决armv9-a+sve2指令集支持问题一、下载源码到GitHub网站下载https://github.com/lemenkov/libyuv源码，或者用直接用git克隆到本地，如：gitclonehttps://github.com/lemenko
ARM驱动学习之5 LEDS驱动 JT灬新一嵌入式 C 底层 arm开发学习单片机
ARM驱动学习之5LEDS驱动知识点：•linuxGPIO申请函数和赋值函数–gpio_request–gpio_set_value•三星平台配置GPIO函数–s3c_gpio_cfgpin•GPIO配置输出模式的宏变量–S3C_GPIO_OUTPUT注意点：DRIVER_NAME和DEVICE_NAME匹配。实现步骤：1.加入需要的头文件：//Linux平台的gpio头文件#include//三
【华为OD技术面试真题精选 - 非技术题】 -HR面，综合面_华为od hr面一个射手座的程序媛程序员华为od 面试职场和发展
最后的话最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！资料预览给大家整理的视频资料：给大家整理的电子书资料：如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化的资料的朋友，可以点击这里获
数字里的世界17期：2021年全球10大顶级数据中心，中国移动榜首张三叨
你知道吗？2016年，全球的数据中心共计用电4160亿千瓦时，比整个英国的发电量还多40％！前言每天，我们都会创造超过250万TB的数据。并且随着物联网（IOT）的不断普及，这一数据将持续增长。如此庞大的数据被存储在被称为“数据中心”的专用设施中。虽然最早的数据中心建于20世纪40年代，但直到1997-2000年的互联网泡沫期间才逐渐成为主流。当前人类的技术，比如人工智能和机器学习，已经将我们推向
nosql数据库技术与应用知识点皆过客，揽星河 NoSQL nosql 数据库大数据数据分析数据结构非关系型数据库
Nosql知识回顾大数据处理流程数据采集(flume、爬虫、传感器)数据存储(本门课程NoSQL所处的阶段)Hdfs、MongoDB、HBase等数据清洗(入仓)Hive等数据处理、分析(Spark、Flink等)数据可视化数据挖掘、机器学习应用(Python、SparkMLlib等)大数据时代存储的挑战(三高)高并发(同一时间很多人访问)高扩展(要求随时根据需求扩展存储)高效率(要求读写速度快)
简介Shell、zsh、bash zhaosuningsn Shell zsh bash shell linux bash
Shell是Linux和Unix的外壳，类似衣服，负责外界与Linux和Unix内核的交互联系。例如接收终端用户及各种应用程序的命令，把接收的命令翻译成内核能理解的语言，传递给内核，并把内核处理接收的命令的结果返回给外界，即Shell是外界和内核沟通的桥梁或大门。Linux和Unix提供了多种Shell，其中有种bash，当然还有其他好多种。Mac电脑中不但有bash，还有一个zsh，预装的，据说
Linux MariaDB使用OpenSSL安装SSL证书 Meta39 MySQL Oracle MariaDB Linux Windows ssl linux mariadb
进入到证书存放目录，批量删除.pem证书警告：确保已经进入到证书存放目录find.-typef-iname\*.pem-delete查看是否安装OpenSSLopensslversion没有则安装yuminstallopensslopenssl-devel开启SSL编辑/etc/my.cnf文件（没有的话就创建，但是要注意，在/etc/my.cnf.d/server.cnf配置了datadir的，
ES聚合分析原理与代码实例讲解光剑书架上的书大厂Offer收割机面试题简历程序员读书硅基计算碳基计算认知计算生物计算深度学习神经网络大数据 AIGC AGI LLM Java Python 架构设计 Agent 程序员实现财富自由
ES聚合分析原理与代码实例讲解1.背景介绍1.1问题的由来在大规模数据分析场景中，特别是在使用Elasticsearch（ES）进行数据存储和检索时，聚合分析成为了一个至关重要的功能。聚合分析允许用户对数据集进行细分和分组，以便深入探索数据的结构和模式。这在诸如实时监控、日志分析、业务洞察等领域具有广泛的应用。1.2研究现状目前，ES聚合分析已经成为现代大数据平台的核心组件之一。它支持多种类型的聚
【从浅识到熟知Linux】Linux发展史 Jammingpro 从浅学到熟知Linux linux 运维服务器
归属专栏：从浅学到熟知Linux个人主页：Jammingpro每日努力一点点，技术变化看得见文章前言：本篇文章记录Linux发展的历史，因在介绍Linux过程中涉及的其他操作系统及人物，本文对相关内容也有所介绍。文章目录Unix发展史Linux发展史开源Linux官网企业应用情况发行版本在学习Linux前，我们可能都会问Linux从哪里来？它是如何发展的。但在介绍Linux之前，需要先介绍一下Un
linux 发展史种树的猴子内核 java 操作系统 linux 大数据
linux发展史说明此前对linux认识模糊一知半解，近期通过学习将自己对于linux的发展总结一下方便大家日后的学习。那Linux是目前一款非常火热的开源操作系统，可是linux是什么时候出现的，又是因为什么样的原因被开发出来的呢。以下将对linux的发展历程进行详细的讲解。目录一、Linux发展背景二、UINIX的诞生三、UNIX的重要分支-BSD的诞生四、Minix的诞生五、GNU与Free
Linux sh命令 fengyehongWorld Linux linux
目录一.基本语法二.选项2.1-c字符串中读取内容，并执行2.1.1基本用法2.1.2获取当前目录下失效的超链接2.2-x每个命令执行之前，将其打印出来2.3结合Here文档使用一.基本语法⏹Linux和Unix系统中用于执行shell脚本或运行命令的命令。sh[选项][脚本文件][参数...]⏹选项-c：从字符串中读取内容，并执行。-x：在每个命令执行之前，将其打印出来。-s：从标准流中读取内容
Linux vi常用命令 fengyehongWorld Linux linux
参考资料viコマンド（vimコマンド）リファレンス目录一.保存系命令二.删除系命令三.移动系命令四.复制粘贴系命令一.保存系命令⏹保存并退出:wq⏹强制保存并退出:wq!⏹退出(文件未编辑):q⏹强制退出(忽略已编辑内容):q!⏹另存为:w新文件名二.删除系命令⏹删除当前行dd⏹清空整个文档gg：移动到文档顶部dG：删除到最后一行ggdG三.移动系命令⏹移动到文档顶部gg⏹移动到文档底部#方式1G
Java面试题精选：消息队列(二) 芒果不是芒 Java面试题精选 java kafka
一、Kafka的特性1.消息持久化：消息存储在磁盘，所以消息不会丢失2.高吞吐量：可以轻松实现单机百万级别的并发3.扩展性：扩展性强，还是动态扩展4.多客户端支持：支持多种语言（Java、C、C++、GO、）5.KafkaStreams（一个天生的流处理）:在双十一或者销售大屏就会用到这种流处理。使用KafkaStreams可以快速的把销售额统计出来6.安全机制：Kafka进行生产或者消费的时候会
数据结构 | 栈和队列 TT-Kun 数据结构与算法数据结构栈队列 C语言
文章目录栈和队列1.栈：后进先出（LIFO）的数据结构1.1概念与结构1.2栈的实现2.队列：先进先出（FIFO）的数据结构2.1概念与结构2.2队列的实现3.栈和队列算法题3.1有效的括号3.2用队列实现栈3.3用栈实现队列3.4设计循环队列结论栈和队列在计算机科学中，栈和队列是两种基本且重要的数据结构，它们在处理数据存储和访问顺序方面有着独特的规则和应用。本文将详细介绍栈和队列的概念、结构、实
[Python] 数据结构详解及代码 AIAdvocate 算法 python 数据结构链表
今日内容大纲介绍数据结构介绍列表链表1.数据结构和算法简介程序大白话翻译,程序=数据结构+算法数据结构指的是存储,组织数据的方式.算法指的是为了解决实际业务问题而思考思路和方法,就叫:算法.2.算法的5大特性介绍算法具有独立性算法是解决问题的思路和方式,最重要的是思维,而不是语言,其(算法)可以通过多种语言进行演绎.5大特性有输入,需要传入1或者多个参数有输出,需要返回1个或者多个结果有穷性,执行
ArrayList 源码解析程序猿进阶 Java基础 ArrayList List java 面试性能优化架构设计 idea
ArrayList是Java集合框架中的一个动态数组实现，提供了可变大小的数组功能。它继承自AbstractList并实现了List接口，是顺序容器，即元素存放的数据与放进去的顺序相同，允许放入null元素，底层通过数组实现。除该类未实现同步外，其余跟Vector大致相同。每个ArrayList都有一个容量capacity，表示底层数组的实际大小，容器内存储元素的个数不能多于当前容量。当向容器中添
Java爬虫框架（一）--架构设计狼图腾-狼之传说 java 框架 java 任务 html解析器存储电子商务
一、架构图那里搜网络爬虫框架主要针对电子商务网站进行数据爬取，分析，存储，索引。爬虫：爬虫负责爬取，解析，处理电子商务网站的网页的内容数据库：存储商品信息索引：商品的全文搜索索引Task队列：需要爬取的网页列表Visited表：已经爬取过的网页列表爬虫监控平台：web平台可以启动，停止爬虫，管理爬虫，task队列，visited表。二、爬虫1.流程1)Scheduler启动爬虫器，TaskMast
Linux查看服务器日志 TPBoreas 运维 linux 运维
一、tail这个是我最常用的一种查看方式用法如下：tail-n10test.log查询日志尾部最后10行的日志;tail-n+10test.log查询10行之后的所有日志;tail-fn10test.log循环实时查看最后1000行记录(最常用的)一般还会配合着grep用，(实时抓包)例如:tail-fn1000test.log|grep'关键字'（动态抓包）tail-fn1000test.log
如何用matlab灵活控制feko的求解 NingrLi matlab 开发语言
https://bbs.rfeda.cn/read.php?tid=3778Feko中的模型和求解设置等都可以通过editfeko进行设置，其文件存储为.pre文件，该文件可以用文本打开，因此，我们可以通过VB、VC、matlab等工具对.pre文件进行读写操作，以达到更灵活的使用feko。同样，对于.out文件，我们也可以进行读操作。熟练使用对.pre文件和.out文件的操作后，我们可以方便的计
利用python实现图片格式之间的相互转换难得北窗高卧 python 开发语言
一、概要图片一般有多种格式，常见的图片格式包括：JPEG（.jpg或.jpeg）：一种广泛使用的有损压缩格式，适用于摄影图像和网页上的图片。PNG（.png）：一种无损压缩格式，支持透明度和更好的图像质量，常用于图标、图形和需要透明背景的图片。该图片是4通道的，外加一个透明通道。如截屏GIF（.gif）：一种支持动画和透明度的格式，常用于简单的动画和图标。BMP（.bmp）：一种无损格式，存储图像
Python多线程实现大规模数据集高效转移 sand&wich 网络 python 服务器
背景在处理大规模数据集时，通常需要在不同存储设备、不同服务器或文件夹之间高效地传输数据。如果采用单线程传输方式，当数据量非常大时，整个过程会非常耗时。因此，通过多线程并行处理可以大幅提升数据传输效率。本文将分享一个基于Python多线程实现的高效数据传输工具，通过遍历源文件夹中的所有文件，将它们移动到目标文件夹。工具和库这个数据集转移工具主要依赖于以下Python标准库：os：用于文件系统操作，如
笋丁网页自动回复机器人V3.0.0免授权版源码希希分享软希网58soho_cn 源码资源笋丁网页自动回复机器人
笋丁网页机器人一款可设置自动回复，默认消息，调用自定义api接口的网页机器人。此程序后端语言使用Golang，内存占用最高不超过30MB，1H1G服务器流畅运行。仅支持Linux服务器部署，不支持虚拟主机，请悉知！使用自定义api功能需要有一定的建站基础。源码下载：https://download.csdn.net/download/m0_66047725/89754250更多资源下载：关注我。安
解线性方程组 qiuwanchi
package gaodai.matrix; import java.util.ArrayList; import java.util.List; import java.util.Scanner; public class Test { public static void main(String[] args) { Scanner scanner = new Sc
在mysql内部存储代码 annan211 性能 mysql 存储过程触发器
在mysql内部存储代码在mysql内部存储代码，既有优点也有缺点，而且有人倡导有人反对。先看优点： 1 她在服务器内部执行，离数据最近，另外在服务器上执行还可以节省带宽和网络延迟。 2 这是一种代码重用。可以方便的统一业务规则，保证某些行为的一致性，所以也可以提供一定的安全性。 3 可以简化代码的维护和版本更新。 4 可以帮助提升安全，比如提供更细
Android使用Asynchronous Http Client完成登录保存cookie的问题 hotsunshine android
Asynchronous Http Client是android中非常好的异步请求工具除了异步之外还有很多封装比如json的处理，cookie的处理引用 Persistent Cookie Storage with PersistentCookieStore This library also includes a PersistentCookieStore whi
java面试题 Array_06 java 面试
java面试题第一，谈谈final, finally, finalize的区别。 final-修饰符（关键字）如果一个类被声明为final，意味着它不能再派生出新的子类，不能作为父类被继承。因此一个类不能既被声明为 abstract的，又被声明为final的。将变量或方法声明为final，可以保证它们在使用中不被改变。被声明为final的变量必须在声明时给定初值，而在以后的引用中只能
网站加速 oloz 网站加速
前序:本人菜鸟，此文研究总结来源于互联网上的资料，大牛请勿喷！本人虚心学习，多指教. 1、减小网页体积的大小，尽量采用div+css模式，尽量避免复杂的页面结构，能简约就简约。 2、采用Gzip对网页进行压缩； GZIP最早由Jean-loup Gailly和Mark Adler创建，用于UNⅨ系统的文件压缩。我们在Linux中经常会用到后缀为.gz
正确书写单例模式随意而生 java 设计模式单例
　　单例模式算是设计模式中最容易理解，也是最容易手写代码的模式了吧。但是其中的坑却不少，所以也常作为面试题来考。本文主要对几种单例写法的整理，并分析其优缺点。很多都是一些老生常谈的问题，但如果你不知道如何创建一个线程安全的单例，不知道什么是双检锁，那这篇文章可能会帮助到你。　　懒汉式，线程不安全　　当被问到要实现一个单例模式时，很多人的第一反应是写出如下的代码，包括教科书上也是这样
单例模式香水浓 java
懒汉调用getInstance方法时实例化 public class Singleton { private static Singleton instance; private Singleton() {} public static synchronized Singleton getInstance() { if(null == ins
安装Apache问题：系统找不到指定的文件 No installed service named "Apache2" AdyZhang apache http server
安装Apache问题：系统找不到指定的文件 No installed service named "Apache2" 每次到这一步都很小心防它的端口冲突问题，结果，特意留出来的80端口就是不能用，烦。解决方法确保几处： 1、停止IIS启动 2、把端口80改成其它（譬如90，800，，，什么数字都好） 3、防火墙(关掉试试) 在运行处输入 cmd 回车，转到apa
如何在android 文件选择器中选择多个图片或者视频？ aijuans android
我的android app有这样的需求，在进行照片和视频上传的时候，需要一次性的从照片/视频库选择多条进行上传但是android原生态的sdk中，只能一个一个的进行选择和上传。我想知道是否有其他的android上传库可以解决这个问题，提供一个多选的功能，可以使checkbox之类的，一次选择多个处理方法官方的图片选择器(但是不支持所有版本的androi，只支持API Level
mysql中查询生日提醒的日期相关的sql baalwolf mysql
SELECT sysid,user_name,birthday,listid,userhead_50,CONCAT(YEAR(CURDATE()),DATE_FORMAT(birthday,'-%m-%d')),CURDATE(), dayofyear( CONCAT(YEAR(CURDATE()),DATE_FORMAT(birthday,'-%m-%d')))-dayofyear(
MongoDB索引文件破坏后导致查询错误的问题 BigBird2012 mongodb
问题描述： MongoDB在非正常情况下关闭时，可能会导致索引文件破坏，造成数据在更新时没有反映到索引上。解决方案：使用脚本，重建MongoDB所有表的索引。 var names = db.getCollectionNames(); for( var i in names ){ var name = names[i]; print(name);
Javascript Promise bijian1013 JavaScript Promise
Parse JavaScript SDK现在提供了支持大多数异步方法的兼容jquery的Promises模式，那么这意味着什么呢，读完下文你就了解了。一.认识Promises “Promises”代表着在javascript程序里下一个伟大的范式，但是理解他们为什么如此伟大不是件简
[Zookeeper学习笔记九]Zookeeper源代码分析之Zookeeper构造过程 bit1129 zookeeper
Zookeeper重载了几个构造函数，其中构造者可以提供参数最多，可定制性最多的构造函数是 public ZooKeeper(String connectString, int sessionTimeout, Watcher watcher, long sessionId, byte[] sessionPasswd, boolea
【Java命令三】jstack bit1129 jstack
jstack是用于获得当前运行的Java程序所有的线程的运行情况(thread dump），不同于jmap用于获得memory dump [hadoop@hadoop sbin]$ jstack Usage: jstack [-l] <pid> (to connect to running process) jstack -F
jboss 5.1启停脚本　动静分离部署 ronin47
以前启动jboss，往各种xml配置文件，现只要运行一句脚本即可。start nohup sh /**/run.sh -c servicename -b ip -g clustername -u broatcast jboss.messaging.ServerPeerID=int -Djboss.service.binding.set=p
UI之如何打磨设计能力? brotherlamp UI ui教程 ui自学 ui资料 ui视频
在越来越拥挤的初创企业世界里，视觉设计的重要性往往可以与杀手级用户体验比肩。在许多情况下，尤其对于 Web 初创企业而言，这两者都是不可或缺的。前不久我们在《右脑革命：别学编程了，学艺术吧》中也曾发出过重视设计的呼吁。如何才能提高初创企业的设计能力呢?以下是 9 位创始人的体会。 1.找到自己的方式如果你是设计师，要想提高技能可以去设计博客和展示好设计的网站如D-lists或
三色旗算法 bylijinnan java 算法
import java.util.Arrays; /** 问题：假设有一条绳子，上面有红、白、蓝三种颜色的旗子，起初绳子上的旗子颜色并没有顺序，您希望将之分类，并排列为蓝、白、红的顺序，要如何移动次数才会最少，注意您只能在绳子上进行这个动作，而且一次只能调换两个旗子。网上的解法大多类似：在一条绳子上移动，在程式中也就意味只能使用一个阵列，而不使用其它的阵列来
警告:No configuration found for the specified action: \'s chiangfai configuration
1.index.jsp页面form标签未指定namespace属性。  <%@taglib prefix="s" uri="/struts-tags"%> ... <s:form action="submit" method="post"&g
redis -- hash_max_zipmap_entries设置过大有问题 chenchao051 redis hash
使用redis时为了使用hash追求更高的内存使用率，我们一般都用hash结构，并且有时候会把hash_max_zipmap_entries这个值设置的很大，很多资料也推荐设置到1000，默认设置为了512，但是这里有个坑 #define ZIPMAP_BIGLEN 254 #define ZIPMAP_END 255 /* Return th
select into outfile access deny问题 daizj mysql txt 导出数据到文件
本文转自：http://hatemysql.com/2010/06/29/select-into-outfile-access-deny%E9%97%AE%E9%A2%98/ 为应用建立了rnd的帐号，专门为他们查询线上数据库用的，当然，只有他们上了生产网络以后才能连上数据库，安全方面我们还是很注意的，呵呵。授权的语句如下： grant select on armory.* to rn
phpexcel导出excel表简单入门示例 dcj3sjt126com PHP Excel phpexcel
<?php error_reporting(E_ALL); ini_set('display_errors', TRUE); ini_set('display_startup_errors', TRUE); if (PHP_SAPI == 'cli') die('This example should only be run from a Web Brows
美国电影超短200句 dcj3sjt126com 电影
1. I see．我明白了。2. I quit! 我不干了!3. Let go! 放手!4. Me too．我也是。5. My god! 天哪!6. No way! 不行!7. Come on．来吧(赶快)8. Hold on．等一等。9. I agree。我同意。10. Not bad．还不错。11. Not yet．还没。12. See you．再见。13. Shut up!
Java访问远程服务 dyy_gusi httpclient webservice get post
随着webService的崛起，我们开始中会越来越多的使用到访问远程webService服务。当然对于不同的webService框架一般都有自己的client包供使用，但是如果使用webService框架自己的client包，那么必然需要在自己的代码中引入它的包，如果同时调运了多个不同框架的webService，那么就需要同时引入多个不同的clien
Maven的settings.xml配置 geeksun settings.xml
settings.xml是Maven的配置文件，下面解释一下其中的配置含义： settings.xml存在于两个地方： 1.安装的地方：$M2_HOME/conf/settings.xml 2.用户的目录：${user.home}/.m2/settings.xml 前者又被叫做全局配置，后者被称为用户配置。如果两者都存在，它们的内容将被合并，并且用户范围的settings.xml优先。
ubuntu的init与系统服务设置 hongtoushizi ubuntu
转载自： http://iysm.net/?p=178 init Init是位于/sbin/init的一个程序，它是在linux下，在系统启动过程中，初始化所有的设备驱动程序和数据结构等之后，由内核启动的一个用户级程序，并由此init程序进而完成系统的启动过程。 ubuntu与传统的linux略有不同，使用upstart完成系统的启动，但表面上仍维持init程序的形式。运行
跟我学Nginx+Lua开发目录贴 jinnianshilongnian nginx lua
使用Nginx+Lua开发近一年的时间，学习和实践了一些Nginx+Lua开发的架构，为了让更多人使用Nginx+Lua架构开发，利用春节期间总结了一份基本的学习教程，希望对大家有用。也欢迎谈探讨学习一些经验。目录第一章安装Nginx+Lua开发环境第二章 Nginx+Lua开发入门第三章 Redis/SSDB+Twemproxy安装与使用第四章 L
php位运算符注意事项 home198979 位运算 PHP &
$a = $b = $c = 0; $a & $b = 1; $b | $c = 1 问a,b,c最终为多少? 当看到这题时，我犯了一个低级错误，误以为位运算符会改变变量的值。所以得出结果是1 1 0 但是位运算符是不会改变变量的值的，例如： $a=1;$b=2; $a&$b; 这样a,b的值不会有任何改变
Linux shell数组建立和使用技巧 pda158 linux
1.数组定义　　[chengmo@centos5 ~]$ a=(1 2 3 4 5) 　　[chengmo@centos5 ~]$ echo $a 　　1 　　一对括号表示是数组，数组元素用“空格”符号分割开。　　 2.数组读取与赋值　　得到长度：　　[chengmo@centos5 ~]$ echo ${#a[@]} 　　5 　　用${#数组名[@或
hotspot源码(JDK7) ol_beta java HotSpot jvm
源码结构图，方便理解： ├─agent Serviceab
Oracle基本事务和ForAll执行批量DML练习 vipbooks oracle sql
基本事务的使用：从账户一的余额中转100到账户二的余额中去，如果账户二不存在或账户一中的余额不足100则整笔交易回滚 select * from account; -- 创建一张账户表 create table account( -- 账户ID id number(3) not null, -- 账户名称 nam

按字母分类： A B C D E F G H I J K L M N O P Q R S T U V W X Y Z 其他

三 Ceph集群搭建

Ceph快存储

你可能感兴趣的:(存储,linux)

　　Ceph快存储