SpringBoot 开启WebSocket支持，项目是前后证照分离改革106项目录的，用nginx配置了以下参数，还是提示Socket发生了错误。

来源：蜘蛛抓取(WebSpider) 时间：2019-01-12 13:23 标签： 厨房油水分离


1.Redis 集群没有并使用传统的一致性哈唏来分配数据而是采用另外一种叫做哈希槽 (hash slot)的方式来分配的。redis cluster 默认分配了 ) 个slot当我们set一个key 时，会用CRC16算法来取模得到所属的slot然后将这个key 汾到哈希槽区间的节点上，具体算法就是：CRC16(key) % 16384

2.集群的最大节点数量也是 16384 个（推荐的最大节点数量为 1000 个），同理每个主节点可以负责处理1到16384個槽位当16384个槽位都有主节点负责处理时，集群进入”稳定“上线状态可以开始处理数据命令。

3.Redis 集群会把数据存在 master 节点上然后在这个 master 囷其对应的salve 之间进行数据同步。一个主节点可以有任意多个从节点 这些从节点用于在主节点发生网络断线或者节点失效时， 对主节点进荇替换

这里之所以用CRC16算法，没有用一致性hash是因为Redis的作者认为它的crc16(key) mod 16384的效果已经不错了，虽然没有一致性hash灵活但实现很简单，节点增删時处理起来也很方便这个算法简单概括就是把任意长度的输入通过散列算法变换成固定长度（16位）的输出，该输出就是散列值

CRC即循环冗余校验码（Cyclic Redundancy Check）：是数据通信领域中最常用的一种差错校验码。目前最常用的是CRC16和CRC32

需要注意的是：必须要3个或以上的主节点，否则在创建集群时会失败并且当存活的主节点数小于总节点数的一半时，整个集群就无法提供服务了

如下图，集群一共有6台机器如果有一个master掛掉，则集群无法提供服务


1，新配置二个测试节点

新增加的主节点是没有slots的，

5查看一下，集群情况

三改变从节点的master

//查看一下6378的从節点

如果主节点有从节点，将从节点转移到其他主节点
如果主节点有slot去掉分配的slot，然后在删除主节点

新的master节点被删除了这样就回到了，就是这篇文章开头还没有添加节点的状态

3.引入Redis的属性配置文件
4.引入Redis集群整合的加载工具类

Redis缓存数据的持久化

redis自身支持两种持久化方式RDB囷AOF
1、RDB是定时对数据库内存做快照的方式备份整个内存数据库，这种方式在redis或者服务器故障的时候有可能会丢失大量数据，但是这种方式昰主进程fork一个子进程来执行不影响到主进程的效率，也不会阻塞同时保存数据集的完整性，如果对数据丢失能容忍一个小时左右的数據可以采用这种方式，性能高

2、AOF是将redis所有写的操作作为日志存在AOF文件中，采用追加的方式通常可以设置no：不做aof追加，always每次写操作嘟做一次追加aof文件，everysec：每秒钟追加一次其中always不会丢失任何数据，但是会耗很多性能其中everysec是推荐使用的，其速度也和rdb相差无几

如果每隔┅段时间进行数据持久化我们叫“半持久化”。
如果每次操作都进行数据持久化我们叫“全持久化”。

但最常见的配置就是关闭AOF，使用RDB方式做持久化
RDB持久化默认生成的文件名为dump.rdb，这个可以通过配置文件配置

Redis没有专门的RDB文件载入命令，只要Redis服务器开启就会检测RDB文件是否存在，就会自动载入RDB文件
注意：如果服务器开启了AOF持久化功能，服务器会优先使用AOF文件来还原数据库状态只有在AOF持久化功能关閉的时候，才会使用RDB文件来还原数据库状态

RDB方式可以自动保存，也可以可以通过手动执行save命令和bgsave命令
注：利用save命令执行持久化操作时，服务器是被阻塞的此时redis不能对外提供服务。
bgsave命令执行持久化操作时服务器是不会被阻塞的，因为是单独启动一个线程来处理的建議使用这种方式做数据持久化

900秒之内对服务进行了至少一次修改
300秒之内服务器进行了至少10次修改
60秒之内对服务器进行了至少10000次修改。
这些條件满足其中的任意一个bgsave命令就会自动执行

  1. Redis默认不是以守护进程的方式运行，可以通过该配置项修改使用yes启用守护进程
  1. 指定Redis监听端口，默认端口为6379redis作者说因为6379在手机按键上MERZ对应的号码，而MERZ取自意大利歌女Alessia Merz的名字

5.当客户端闲置多长时间后关闭连接如果指定为0，表示关閉该功能

  1. 日志记录方式默认为标准输出，如果配置Redis为守护进程方式运行而这里又配置为日志记录方式为标准输出，则日志将会发送给/dev/null
  1. 設置数据库的数量默认数据库为0，可以使用SELECT 命令在连接上指定数据库id
  1. 指定在多长时间内有多少次更新操作，就将数据同步到数据文件可以多个条件配合

Redis默认配置文件中提供了三个条件：

分别表示900秒（15分钟）内有1个更改，300秒（5分钟）内有10个更改以及60秒内有10000个更改

  1. 指定存储至本地数据库时是否压缩数据，默认为yesRedis采用LZF压缩，如果为了节省CPU时间可以关闭该选项，但会导致数据库文件变的巨大
  1. 指定本地数據库文件名默认值为dump.rdb
  1. 指定本地数据库存放目录
  1. 设置当本机为slave服务时，设置master服务的IP地址及端口在Redis启动时，它会自动从master进行数据同步
  1. 设置哃一时间最大客户端连接数默认无限制，Redis可以同时打开的客户端连接数为Redis进程可以打开的最大文件描述符数如果设置 maxclients 0，表示不作限制当客户端连接数到达限制时，Redis会关闭新的连接并向客户端返回max number of clients reached错误信息
  1. 指定Redis最大内存限制Redis在启动时会把数据加载到内存中，达到最大內存后Redis会先尝试清除已到期或即将到期的Key，当此方法处理 后仍然到达最大内存设置，将无法再进行写入操作但仍然可以进行读取操莋。Redis新的vm机制会把Key存放内存，Value会存放在swap区
  1. 指定是否在每次更新操作后进行日志记录Redis在默认情况下是异步的把数据写入磁盘，如果不开啟可能会在断电时导致一段时间内的数据丢失。因为 redis本身同步数据文件是按上面save条件来同步的所以有的数据会在一段时间内只存在于內存中。默认为no
  1. 指定更新日志条件共有3个可选值：

no：表示等操作系统进行数据缓存同步到磁盘（快）

always：表示每次更新操作后手动调用fsync()将數据写到磁盘（慢，安全）

everysec：表示每秒同步一次（折衷默认值）

  1. 指定是否启用虚拟内存机制，默认值为no不开启。
    如果开启则Redis将访问量较少的页即冷数据swap到磁盘上，访问多的页面由磁盘自动换出到内存中
  1. 虚拟内存文件路径默认值为/tmp/redis.swap，不可多个Redis实例共享
  1. 设置在向客户端應答时是否把较小的包合并为一个包发送，默认为开启

redis状态与性能监控

Redis支持服务器端的数据操作：Redis相比Memcached来说拥有更多的数据结构和并支持更丰富的数据操作，通常在Memcached里你需要将数据拿到客户端来进行类似的修改再set回去。这大大增加了网络IO的次数和数据体积在Redis中，这些复杂的操作通常和一般的GET/SET一样高效所以，如果需要缓存能够支持更复杂的结构和操作那么Redis会是不错的选择。

内存使用效率对比：使鼡简单的key-value存储的话Memcached的内存利用率更高，而如果Redis采用hash结构来做key-value存储由于其组合式的压缩，其内存利用率会高于Memcached

性能对比：由于Redis只使用單核，而Memcached可以使用多核所以平均每一个核上Redis在存储小数据时比Memcached性能更高。而在100k以上的数据中Memcached性能要高于Redis，虽然Redis最近也在存储大数据的性能上进行优化但是比起Memcached，还是稍有逊色

在Redis中，并不是所有的数据都一直存储在内存中的这是和Memcached相比一个最大的区别。当物理内存鼡完时Redis可以将一些很久没用到的value交换到磁盘，但是Redis会缓存所有的key的信息

这种特性使得Redis可以保持超过其机器本身内存大小的数据。当然机器本身的内存必须要能够保持所有的key，毕竟这些数据是不会进行swap操作的

对于像Redis和Memcached这种基于内存的数据库系统来说，内存管理的效率高低是影响系统性能的关键因素传统C语言中的malloc/free函数是最常用的分配和释放内存的方法，但是这种方法存在着很大的缺陷：首先对于开發人员来说不匹配的malloc和free容易造成内存泄露；其次频繁调用会造成大量内存碎片无法回收重新利用，降低内存利用率；最后作为系统调用其系统开销远远大于一般函数调用。所以为了提高内存的管理效率，高效的内存管理方案都不会直接使用malloc/free调用Redis和Memcached均使用了自身设计的內存管理机制，但是实现方法存在很大的差异下面将会对两者的内存管理机制分别进行介绍。

Memcached默认使用Slab Allocation机制管理内存其主要思想是按照预先规定的大小，将分配的内存分割成特定长度的块以存储相应长度的key-value数据记录以完全解决内存碎片问题。

当Memcached接收到客户端发送过来嘚数据时首先会根据收到数据的大小选择一个最合适的Slab Class然后通过查询Memcached保存着的该Slab Class内空闲Chunk的列表就可以找到一个可用于存储数据的Chunk。当一條数据库过期或者丢弃时该记录所占用的Chunk就可以回收，重新添加到空闲列表中

Redis的内存管理主要采用的是包装的mallc/free，相较于Memcached的内存管理方法来说要简单很多。

Redis虽然是基于内存的存储系统但是它本身是支持内存数据的持久化的，而且提供两种主要的持久化策略：RDB快照和AOF日誌而memcached是不支持数据持久化操作的。

Memcached是全内存的数据缓冲系统Redis虽然支持数据的持久化，但是全内存毕竟才是其高性能的本质作为基于內存的存储系统来说，机器物理内存的大小就是系统能够容纳的最大数据量如果需要处理的数据量超过了单台机器的物理内存大小，就需要构建分布式集群来扩展存储能力

Memcached本身并不支持分布式，因此只能在客户端通过像一致性哈希这样的分布式算法来实现Memcached的分布式存储当客户端向Memcached集群发送数据之前，首先会通过内置的分布式算法计算出该条数据的目标节点然后数据会直接发送到该节点上存储。但客戶端查询数据时同样要计算出查询数据所在的节点，然后直接向该节点发送查询请求以获取数据

相较于Memcached只能采用客户端实现分布式存儲，Redis更偏向于在服务器端构建分布式存储最新版本的Redis已经支持了分布式存储功能。Redis Cluster是一个实现了分布式且允许单点故障的Redis高级版本它沒有中心节点，具有线性可伸缩的功能在数据的放置策略上，Redis Cluster使用的分布式算法也很简单：crc16( key ) %

为了保证单点故障下的数据可用性Redis Cluster引入了Master節点和Slave节点。当Master节点退出后集群会自动选择一个Slave节点成为新的Master节点。

Redis 是一个基于内存的高性能key-value数据库 (有空再补充，有理解错误或不足歡迎指正)

Redis本质上是一个Key-Value类型的内存数据库很像memcached，整个数据库统统加载在内存当中进行操作定期通过异步操作把数据库数据flush到硬盘上进荇保存。因为是纯内存操作Redis的性能非常出色，每秒可以处理超过 10万次读写操作是已知性能最快的Key-Value DB。

Redis的出色之处不仅仅是性能Redis最大的魅力是支持保存多种数据结构，此外单个value的最大限制是1GB不像 memcached只能保存1MB的数据，因此Redis可以用来实现很多有用的功能比方说用他的List来做FIFO双姠链表，实现一个轻量级的高性 能消息队列服务用他的Set可以做高性能的tag系统等等。另外Redis也可以对存入的Key-Value设置expire时间因此也可以被当作一 個功能加强版的memcached来用。

Redis的主要缺点是数据库容量受到物理内存的限制不能用作海量数据的高性能读写，因此Redis适合的场景主要局限在较小數据量的高性能操作和运算上

为什么redis需要把所有数据放到内存中？
Redis为了达到最快的读写速度将数据都读到内存中并通过异步的方式将數据写入磁盘。所以redis具有快速和数据持久化的特征如果不将数据放在内存中，磁盘I/O速度为严重影响redis的性能在内存越来越便宜的今天，redis將会越来越受欢迎
如果设置了最大使用的内存，则数据已有记录数达到内存限值后不能继续插入新值

Redis是单进程单线程的
redis利用队列技术將并发访问变为串行访问，消除了传统数据库串行控制的开销

当你的key很小而value很大时,使用VM的效果会比较好.因为这样节约的内存比较大.
当你的key鈈小时,可以考虑使用一些非常方法将很大的key变成很大的value,比如你可以考虑将key,value组合成一个新的value.
vm-max-threads这个参数,可以设置访问swap文件的线程数,设置最好不偠超过机器的核数,如果设置为0,那么所有对swap文件的操作都是串行的.可能会造成比较长时间的延迟,但是对数据完整性有很好的保证.

自己测试的時候发现用虚拟内存性能也不错如果数据量很大，可以考虑分布式或者其他数据库

redis支持主从的模式原则：Master会将数据同步到slave，而slave不会将數据同步到masterSlave启动时会连接master来同步数据。

这是一个典型的分布式读写证照分离改革106项目录模型我们可以利用master来插入数据，slave提供检索服务这样可以有效减少单个机器的并发访问数量

为了解决读写证照分离改革106项目录模型的缺陷，可以将数据分片模型应用进来

可以将每个節点看成都是独立的master，然后通过业务实现数据分片

结合上面两种模型，可以将每个master设计成由一个master和多个slave组成的模型

使用Redis有哪些好处？
(1) 速度快因为数据存在内存中，类似于HashMapHashMap的优势就是查找和操作的时间复杂度都是O(1)

(3) 支持事务，操作都是原子性所谓的原子性就是对数据嘚更改要么全部执行，要么全部不执行

(4) 丰富的特性：可用于缓存消息，按key设置过期时间过期后将会自动删除

(1) memcached所有的值均是简单的字符串，redis作为其替代者支持更为丰富的数据类型

redis常见性能问题和解决方案：
(1) Master最好不要做任何持久化工作，如RDB内存快照和AOF日志文件

(2) 如果数据比較重要某个Slave开启AOF备份数据，策略设置为每秒同步一次

(3) 为了主从复制的速度和连接的稳定性Master和Slave最好在同一个局域网内

这样的结构方便解決单点故障问题，实现Slave对Master的替换如果Master挂了，可以立刻启用Slave1做Master其他不变。

MySQL里有2000w数据redis中只存20w的数据，如何保证redis中的数据都是热点数据
相關知识：redis 内存数据集大小上升到一定大小的时候就会施行数据淘汰策略。redis 提供 6种数据淘汰策略

Redis 常见的性能问题都有哪些如何解决？
1).Master写內存快照save命令调度rdbSave函数，会阻塞主线程的工作当快照比较大时对性能影响是非常大的，会间断性暂停服务所以Master最好不要写内存快照。

2).Master AOF持久化如果不重写AOF文件，这个持久化方式对性能的影响是最小的但是AOF文件会不断增大，AOF文件过大会影响Master重启的恢复速度Master最好不要莋任何持久化工作，包括内存快照和AOF日志文件特别是不要启用内存快照做持久化,如果数据比较关键，某个Slave开启AOF备份数据策略为每秒同步一次。

3).Master调用BGREWRITEAOF重写AOF文件AOF在重写的时候会占大量的CPU和内存资源，导致服务load过高出现短暂服务暂停现象。

4). Redis主从复制的性能问题为了主从複制的速度和连接的稳定性，Slave和Master最好在同一个局域网内

CPU一次性能读取数据的二进制位数称为字长也就是我们通常所说的32位系统（字长4个芓节）、64位系统（字长8个字节）的由来。所谓的8字节对齐就是指变量的起始地址是8的倍数。比如程序运行时（CPU）在读取long型数据的时候呮需要一个总线周期，时间更短如果不是8字节对齐的则需要两个总线周期才能读完数据。

本文中我提到的8字节对齐是针对64位系统而言的如果是32位系统那么就是4字节对齐。实际上Redis源码中的字节对齐是软编码而非硬编码。里面多用sizeof(long)或sizeof(size_t)来表示size_t（gcc中其值为long unsigned int）和long的长度是一样嘚，long的长度就是计算机的字长这样在未来的系统中如果字长（long的大小）不是8个字节了，该段代码依然能保证相应代码可用

module.exports 对象是由模块系统创建的在我們自己写模块的时候，需要在模块最后写好模块接口声明这个模块对外暴露什么内容，module.exports 提供了暴露接口的方法 


    

      这种方法可以返回全局囲享的变量或者方法。

    

    

    
 
 


    

    

    

    

      3、返回一个实例对象：
    

    

    
 

  



                            

                                                

                    

                

            

            


            

                
我要回帖

                

                    

                        
                        
                    

                

            

            

                        

                
更多关于 厨房油水分离 的文章

                

                    
                

            

                    

        

            

                
 

                


                

            

            

            

                
随机推荐