可用于应对Web2.0纯动态网站类型的三高问题。
(1) High performance-------对数据库高并发读写需求
(2) HugeStorage--------------对海量数据高效存储与访问需求
(3) High Scalability && High Availability------- 对数据库高可扩展性与高可用性需求
关系型数据库和非关系型数据库都有各自的特点与应用场景,两者的紧密结合将会给Web2.0的数据库发展带来新的思路。让关系数据库关注在关系上,非关系型数据库关注在存储上。
例如,在读写分离的MySQL数据库环境中,可以把经常访问的数据存储在非关系型数据库中,提升
访问速度。
Mysql 高热数据——》redis
web ——》redis ——》mysql
CPU——》内存/缓存 ——》磁盘
关系型数据库:
实例–>数据库–>表(table)–>记录行(row)、数据字段(column)——》存储数据
非关系型数据库:
实例–>数据库–>集合(collection) -->键值对(key-value)
workdir=/usr/local/mysql
非关系型数据库不需要手动建数据库和集合(表)。
Redis是一个开源的、使用C语言编写的NoSQL 数据库。
Redis基于内存运行并支持持久化(支持存储在磁盘),采用key-value (键值对)的存储形式,是目前分布式架构中不可或缺的一环。
Redis服务器程序是单进程模型
Redis服务在一台服务器上可以同时启动多个Redis进程,Redis的实际处理速度则是完全依靠于主进程的执行效率。若在服务器上只运行一个Redis进程,当多个客户端同时访问时,服务器的处理能力是会有一定程度的下降;若在同一台服务器上开启多个Redis进程,Redis在提高并发处理能力的同时会给服务器的CPU造成很大压力。
即:在实际生产环境中,需要根据实际的需求来决定开启多少个Redis进程。
建议可以开2个进程
原因:
1、备份
2、抗高并发的同时尽量不给CPU造成太大的压力
若对高并发要求更高一些,可能会考虑在同一台服务器上开启多个进程。若CPU资源比较紧张,采用单进程即可。
PS : 补充加深一点
epoll模型所实现的I/O多路复用可以定义为如下:
socket 1 —>
socket 2 —> I/O多路复用程序 --》文件事件分派器(从队列中获取,再分发给对应处理器)–》命令处理、请求、连接应答等处理器
socket 3 —>
多个socket 会定义为一个fd文件描述符(每有一个新建、打开、修改等“事件”内核就会返回一个fd(可理解为索引)),在每个fd激活时,会进行内核中的回调函数
I/O多路复用程序会监听socket 活跃的链接,然后调用该socket (而此socket 文件句柄主要实现的是网络上的“ip+port+协议所标识的网络中的‘进程’”)可以简单理解为虚拟接口(抽象层)
本质而言就是使用一个线程来追踪多个socket(I/O流)的状态,来管理多个I/O
I/O复用:一个线程同时追踪、管理多个连接(原本默认情况下是一个线程对应一个连接)
回调:预先定义具体的执行过程(定义一个方法) ,等待调用,在一个线程给执行时,可以根据“触发器”“钩子” 完成回调,回调的目的
是提高处理性能 和节省资源
丰富的特性 – Redis还支持 publish(消息发布)/subscribe(订阅), 通知, 设置key有效期等等特性。
Redis作为基于内存运行的数据库,缓存是其最常应用的场景之一。除此之外,Redis常见应用场景还包括获取最新N个数据的操作、排行榜类应用、计数器应用、存储关系、实时分析系统、日志记录。
支持key-value、 Strings、Lists、 Hashes(散列值)、 Sets 及Ordered Sets 等数据类型操作。
systemctl stop firewalld
setenforce 0
yum install -y gcc gcc-c++ make
#将redis-5.0.7.tar.gz 压缩包上传到/opt 目录中
tar zxvf redis-5.0.7.tar.gz -C /opt/
cd /opt/redis-5.0.7/
make PREFIX=/usr/local/redis install
#由于Redis源码包中直接提供了Makefile 文件,所以在解压完软件包后,不用先执行./configure 进行配置,可直接执行make与make install命令进行安装
#执行软件包提供的 install_server.sh 脚本文件设置Redis服务所需要的相关配置文件
cd /opt/redis-5.0.7/utils
./install_server.sh
....... #一直回车.
Please select the redis executable path [/usr/local/bin/redis-server] /usr/local/redis/bin/redis-server
#需要手动修改为 /usr/local/redis/bin/redis-server 注意要一次性正确输入
-------------------------------------------------------------------------------------
Selected config:
Port : 6379 #默认侦听端口为6379
Config file : /etc/redis/6379.conf #配置文件路径
Log file : /var/log/redis_6379.log #日志文件路径
Data dir : /var/lib/ redis/6379 #数据文件路径
Executable : /usr/local/redis/bin/redis-server #可执行文件路径
Cli Executable : /usr/local/redis/bin/redis-cli #客户端命令工具
-------------------------------------------------------------------------------------
#把redis的可执行程序文件放入路径环境变量的目录中便于系统识别
ln -s /usr/local/redis/bin/* /usr/local/bin/
#当install_server.sh 脚本运行完毕,Redis 服务就已经启动,默认侦听端口为6379
netstat -natp | grep redis
tcp 0 0 127.0.0.1:6379 0.0.0.0:* LISTEN 6433/redis-server 1
#Redis服务控制
/etc/init.d/redis_6379 stop #停止
/etc/init.d/redis_6379 start #启动
/etc/init.d/redis_6379 restart #重启
/etc/init.d/redis_6379 status #状态
#修改配置 /etc/redis/6379.conf 参数
vim /etc/redis/6379.conf
bind 127.0.0.1 192.168.3.14 #70行,添加监听的主机地址
port 6379 #93行,Redis默认的监听端口
daemonize yes #137行,启用守护进程
pidfile /var/run/redis_6379.pid #159行,指定PID文件
loglevel notice #167行,日志级别
logfile /var/log/redis_6379.log #172行,指定日志文件
/etc/init.d/redis_6379 restart //重启redis
[root@c7-4 utils]# netstat -natp | grep redis
tcp 0 0 192.168.3.14:6379 0.0.0.0:* LISTEN 6539/redis-server 1
tcp 0 0 127.0.0.1:6379 0.0.0.0:* LISTEN 6539/redis-server 1
redis-server: 用于启动Redis 的工具
redis-benchmark: 用于检测Redis在本机的运行效率
redis-check-aof: 修复AOF持久化文件
redis-check-rdb: 修复RDB持久化文件
redis-cli: Redis 命令行工具.
rdb 和aof 是redis服务中持久化功能的两种形式RDB AOF
redis-cli 常用于登陆至redis 数据库
语法: redis-cli -h host -p port -a password
-h :指定远程主机
-p :指定Redis 服务的端口号
-a :指定密码,未设置数据库密码可以省略-a选项
若不添加任何选项表示,则使用127.0.0.1:6379 连接本机上的 Redis 数据库,
redis-cli -h 192.168.3.14 -p 6379
基本的测试语法: redis-benchmark [选项] [选项值]
-h :指定服务器主机名。
-p :指定服务器端口。
-s :指定服务器socket(套接字)
-c :指定并发连接数。
-n :指定请求数。
-d :以字节的形式指定 SET/GET 值的数据大小。
-k : 1=keep alive 0=reconnect
-r : SET/GET/INCR 使用随机key, SADD使用随机值。
-P :通过管道传输请求。
-q :强制退出redis。 仅显示query/sec 值。
--csv :以CSV格式输出。
-l :生成循环,永久执行测试。
-t :仅运行以逗号分隔的测试命令列表。
-I : Idle模式。仅打开 N 个idle连接并等待。
redis-benchmark -h 192.168.3.14 -p 6379 -c 100 -n 100000
redis-benchmark -h 192.168.3.14 -p 6379 -q -d 100
redis-benchmark -t set,lpush -n 100000 -q
set: 存放数据,命令格式为set key value
get: 获取数据,命令格式为get key
redis-cli
127.0.0.1:6379> set teacher zhangsan
OK
127.0.0.1:6379> get teacher
"zhangsan"
#keys命令可以取符合规则的键值列表,通常情况可以结合*、?等选项来使用。
127.0.0.1:6379> set k1 1
127.0.0.1:6379> set k2 2
127.0.0.1:6379> set k3 3
127.0.0.1:6379> set v1 4
127.0.0.1:6379> set v5 5
127.0.0.1:6379> set v22 5
127.0.0.1:6379> KEYS * #查看当前数据库中所有键
1) "v5"
2) "myset:__rand_int__"
3) "v1"
4) "counter:__rand_int__"
5) "v22"
6) "teacher"
7) "k2"
8) "mylist"
9) "k3"
10) "key:__rand_int__"
11) "k1"
127.0.0.1:6379> KEYS v* #查看当前数据库中以v开头的数据
1) "v5"
2) "v1"
3) "v22"
127.0.0.1:6379> KEYS v? #查看当前数据库中以v开头后面包含任意一位的数据
1) "v5"
2) "v1"
127.0.0.1:6379> KEYS v?? #查看当前数据库中以v开头v开头后面包含任意两位的数据
1) "v22"
#exists 命令可以判断键值是否存在。
127.0.0.1:6379> exists teacher #判断teacher 键是否存在
(integer) 1 # 1表示teacher 键是存在
127.0.0.1:6379> exists tea
(integer) 0 #0表示tea键不存在
#del命令可以删除当前数据库的指定key。
127.0.0.1:6379> keys *
127.0.0.1:6379> del v5
(integer) 1
127.0.0.1:6379> get v5
(nil)
# type 命令可以获取key对应的 value 值类型。
127.0.0.1:6379> type k1
string
# rename 命令是对已有key进行重命名。 (覆盖)
命令格式: rename 源key 目标key
使用rename命令进行重命名时,无论目标key是否存在都进行重命名,且源key的值会覆盖目标key的值。在实际使用过程中,建议先用 exists命令查看目标key是否存在,然后再决定是否执行rename命令,以避免覆盖重要数据。
127.0.0.1:6379> keys v*
1) "v1"
2) "v22"
127.0.0.1:6379> rename v22 v2
OK
127.0.0.1:6379> keys v*
1) "v1"
2) "v2"
127.0.0.1:6379> get v1
"4"
127.0.0.1:6379> get v2
"5"
127.0.0.1:6379> rename v1 v2
127.0.0.1:6379> get v1
(nil)
127.0.0.1:6379> get v2
"4"
# renamenx
rename n 不进行修改 x进行修改
nx 组合: 先判断 命令的作用是对已有key进行重命名,并检测新名是否存在,如果目标key存在则不进行重命名。 (不覆盖)
命令格式: renamenx 源key 目标key
127.0.0.1 :6379> keys *
127.0.0.1:6379> get teacher
"zhangsan"
127.0.0.1:6379> get v2
"4"
127.0.0.1:6379> renamenx v2 teacher
(integer) 0
127.0.0.1:6379> keys *
127.0.0.1 :6379> get teacher
"zhangsan"
127.0.0.1:6379> get v2
"4"
#dbsize命令的作用是查看当前数据库中key的数目。
127.0.0.1:6379> dbsize
(integer) 9
#使用config set requirepass your password 命令设置密码
127.0.0.1:6379> config set requirepass 123456
#使用config get requirepass 命令查看密码(一旦设置密码,必须先验证通过密码,否则所有操作不可用)
127.0.0.1:6379> auth 123456
127.0.0.1:6379> config get requirepass
#删除密码
127.0.0.1:6379> auth 123123
127.0.0.1:6379> config set requirepass ''
#以上不设置,无法重启redis
Redis支持多数据库,Redis 默认情况下包含16个数据库,数据库名称是用数字0-15 来依次命名的。
多数据库相互独立,互不干扰。
#多数据库间切换
命令格式: select 序号
使用 redis-cli 连接Redis数据库后,默认使用的是序号为 0 的数据库。
127.0.0.1:6379> select 10 #切换至序号为10的数据库
127.0.0.1:6379[10]> select 15 #切换至序号为15的数据库
127.0.0.1:6379[15]> select 0 #切换至序号为0的数据库
#多数据库间移动数据
格式: move 键值 序号
127.0.0.1:6379> set k1 100
OK
127.0.0.1:6379> get k1
"100"
127.0.0.1:6379> select 1
OK
127.0.0.1:6379[1]> get k1
(nil)
127.0.0.1:6379[1]> select 0 #切换至目标数据库0
OK
127.0.0.1:6379> get k1 #查看目标数据是否存在
"100"
127.0.0.1:6379> move k1 1 #将数据库0中k1移动到数据库1中
(integer) 1
127.0.0.1:6379> select 1 #切换至目标数据库1
OK
127.0.0.1:6379[1]> get k1 #查看被移动数据
"100"
127.0.0.1:6379[1]> select 0
OK
127.0.0.1:6379> get k1 #在数据库0中无法查看到k1的值
(nil)
#清除数据库内数据(rm -rf )
FLUSHDB :清空当前数据库数据
FLUSHALL :清空所有数据库的数据,慎用!
redis 远程数据备份 (全量、增量)
是以Shell 脚本的形式
redis_backup.sh
#!/bin/bash
TIME=$
BCDIR=
redis_server=
post
psword
redis 缓存穿透 击穿 雪崩
redis 分布式锁()
nginx SSL 加秘密
nginx 暴露一些接口之类的