您当前的位置:首页 > 电脑百科 > 数据库 > Redis

Redis如何处理客户端连接

时间:2019-11-25 11:27:56  来源:  作者:
Redis如何处理客户端连接

 

客户端的连接的建立

redis通过在TCP端口上进行监听,或者Unix socket(如果启用)的方式来接受客户端的连接。当一个新的客户端连接被接受执行以下操作:

  • 当Redis使用非阻塞I/O复用,客户端socket设置为非阻塞状态。
  • socket TCP_NODELAY属性被设置确保在连接中我们不会延迟。
  • 一个 可读的文件事件被创建,因而当新的数据可以被访问时,Reids可以更快接收客户端在socket上的查询

当客户端初始化后,Redis检查我们是否还在它可以同时处理的客户端的数量限制范围内(这个是使用 maxclients 配置指令配置的,请参阅本文档的下一节获取更多的信息。

如果它因为当前已经接受了最大数量的客户端,无法接受当前的客户端,Redis将尝试发送一个错误给客户端以便让其意识到这种情况,并且立即关闭连接。即使连接被Redis立即关闭,错误信息也会返回给客户端,因为新的socket输出缓冲区一般情况下都足够放下错误信息,因而客户端内核将处理连接错误。

客户端按照什么顺序被处理

该顺序是由客户端socket文件描述符的数字大小及核心报告客户端事件的顺序决定的,因此顺序可以看成不确定的。 不过Redis给客户端提供服务时会做以下两件事:

  • 每次它从客户端socket读取新东西的时候它只执行一次 read() 系统调用,以确保当我们有多台客户端连接时,并且有一些要求高客户端以非常快的速率发送查询时,其它客户端不会因此而受到惩罚和经历一个糟糕的延时。(译者注:意思就是不读取完整个socket的消息,而是每个socket轮流读一次)
  • 当系统调用执行完,当前缓冲中的命令不管有多少都会被顺序处理。

最大数量的客户端

在Redis 2.4中,同时处理的最大客户端数量的限制是硬编码的。

在Redis 2.6中这个限制是动态的:默认情况下为10000个客户端,除非在redis.conf中配置了maxclients配置项。

Redis通过检查内核中我们可以打开的最多的文件描述符数量,(soft limit被检查),如果限制小于最大连接客户端连接数,则加上32(这是Redis储备给内部使用的文件描述符数量), 接着这个最大连接客户端的数量将被Redis修改为系统要求的值,以便符合在当前操作系统限制下的真正能够处理的客户端数量

当配置的最大客户端数目不起作用时,则日志将在启动时显示,如下面这个例子:

$ ./redis-server --maxclients 100000
[41422] 23 Jan 11:28:33.179 # Unable to set the max number of files limit to 100032 (Invalid argument), setting the max clients configuration to 10112.

当Redis配置处理客户的具体数量时,确认操作系统中每个进程文件描述符的限制也相应地设置成最大值是个好主意。 在linux下这些限制可以在当前的会话设置,用下面的命令在系统范围内进行设置:

  • ulimit -Sn 100000 # 这个将只在硬限制足够大的情况下生效。
  • sysctl -w fs.file-max=100000

输出缓冲限制

Redis需要为每个客户端处理可变长度的输出,因为简单的命令也可能产生一个需要传送给客户端的巨大的数据量。

也可能只是客户端以较快的速度发送多个的命令产生的更多的输出,当客户端处理新消息的速度比服务端发给给它的速度还慢时,特别是Pub/Sub客户端更是如此。

这两个原因将导致客户端输出缓冲增长及内存消耗增多。因为这个原因在默认情况下Redis为不同类型的客户端设置了输出缓冲限制。当限制到达后客户端的连接将被关闭,同时事件日志记录在Redis的日志文件中。

Redis使用两种类型的限制:

  • 硬限制是个固定的限制,当大小达到它Redis会以最快的速度关闭掉客户端的连接。
  • 软限制依赖于时间,例如每10秒32兆字节意味着加入客户端拥有比32兆字节还大的输出缓冲,持续的在10秒内超过的话连接将被关闭。
  • 不同类型的客户端有着不同的默认限制:
  • 普通客户端有着默认为0的限制,这意味着没有限制,因为大部分的普通客户端使用阻塞实现发送单个命令,并且在发送下一个命令前等待答复以完全读取,因此去关闭普通客户端的连接始终是没必要的。
  • Pub/Sub客户端有默认的32兆字节的硬限制及每60秒8兆字节的软限制。
  • 从机有默认的256兆字节的硬限制及每60秒64兆字节的软限制。
  • 可以在运行时改变这些限制,使用CONFIG SET命令或者修改redis.conf以永久地改变它。见redis.conf中更多的关于如何设置限制的介绍。

搜索缓冲硬限制

每一个客户端也受到搜索缓冲限制。这是个不可配置的硬限制,当客户端搜索缓冲(这是个我们用来积累客户端的命令的缓冲)达到1GB的时候它将关闭连接,这只是个极限限制,用来避免当客户端或者服务端软件出错导致服务器崩溃的情况。

客户端超时

最近版本的Reids在默认情况下不会在客户端空闲很久后关闭连接;连接将永久保留。 不过假如你不喜欢这种行为,你可以设置一个超时时间,这样当客户端空闲超过设置的几秒后,客户端连接就会被关闭。

你可以在redis.conf中配置这个限制或者简单的使用CONFIG SET timeout 。 记住这个超时时间只适用于多个客户端并且它不支持Pub/Sub客户端, Pub/Sub连接是推送类型的连接,因而客户端空闲是正常的。

即使在默认情况下连接是不受超时时间限制的,但是有两种情况设置超时是有意义的:

  • 关键任务应用,客户端软件可能因为Redis连接饱和而造成出错,造成服务中断。
  • 如果一个客户端出错使得服务器因为空闲连接而饱和,使得无法与服务器交互,此时可以作为一个检错机制去连接服务器。

超时并非非常准确:Redis避免设置计时器或者运行O(N) 算法去轮询检测客户端是否超时, 所以检查是渐近的一部分一部分完成的。这意味着有可能当超时时间设置为10秒,客户端的连接将在稍晚的时候被关闭,例如当很多客户端在同一时间连接的话,可能12秒才被关闭。

客户端命令

Redis客户端命令允许检查所有连接的客户端的状态、关掉指定的客户端的连接、设置连接的名称。假如你使用一定规模的Redis的话这是个很强大的排错工具

CLIENT LIST命令用来获得连接的客户端列表及它们的状态:

redis 127.0.0.1:6379> client list
addr=127.0.0.1:52555 fd=5 name= age=855 idle=0 flags=N db=0 sub=0 psub=0 multi=-1 qbuf=0 qbuf-free=32768 obl=0 oll=0 omem=0 events=r cmd=client
addr=127.0.0.1:52787 fd=6 name= age=6 idle=5 flags=N db=0 sub=0 psub=0 multi=-1 qbuf=0 qbuf-free=0 obl=0 oll=0 omem=0 


Tags:Redis   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除,谢谢。
▌相关推荐
来源: my.oschina.net/xiaomu0082/blog/2990388首先说下问题现象:内网sandbox环境API持续1周出现应用卡死,所有api无响应现象刚开始当测试抱怨环境响应慢的时候 ,我们重启一下应...【详细内容】
2021-12-08  Tags: Redis  点击:(18)  评论:(0)  加入收藏
我不知道为什么你会选择对特定数量的“错误”(或警告)如此具体。听起来您正在寻找将要发布到 Yahoo! 的某些文章的内容。 Insider (N Foos to Blah for the BlahBlah)。那说:...【详细内容】
2021-12-07  Tags: Redis  点击:(14)  评论:(0)  加入收藏
目录 一、背景 二、步骤 0.理论支持 1、获取数据 2、结果 3、分析数据并评估大小 三、关于repl-backlog-size 一、背景 repl-backlog-size控制这个环形缓冲区. ​ 主从断...【详细内容】
2021-11-05  Tags: Redis  点击:(41)  评论:(0)  加入收藏
Redis 性能测试是通过同时执行多个命令实现的。1,Redis-benchmarkRedis性能命令:redis性能命令格式: redis-benchmark [option] [option value] redis 性能测试工具可选参数如...【详细内容】
2021-11-02  Tags: Redis  点击:(41)  评论:(0)  加入收藏
1 概述数据结构和内部编码 无传统关系型数据库的 Table 模型schema 所对应的db仅以编号区分。同一 db 内,key 作为顶层模型,它的值是扁平化的。即 db 就是key的命名空间。 key...【详细内容】
2021-11-01  Tags: Redis  点击:(28)  评论:(0)  加入收藏
普通java中使用引用Java redis 驱动,即可连接:import redis.clients.jedis.Jedis; public class RedisTestJava { public static void main(String[] args) { //连...【详细内容】
2021-10-13  Tags: Redis  点击:(34)  评论:(0)  加入收藏
Redis常用的数据结构有 string list set zset hashstringstring 是 Redis 的基本的数据类型,一个 key 对应一个 value。string 类型是二进制安全的,Redis的string可以包含任...【详细内容】
2021-10-12  Tags: Redis  点击:(36)  评论:(0)  加入收藏
列表类型可以存储一组按插入顺序排序的字符串,它非常灵活,支持在两端插入、弹出数据,可以充当栈和队列的角色。> LPUSH fruit apple(integer) 1> RPUSH fruit banana(integer)...【详细内容】
2021-09-17  Tags: Redis  点击:(54)  评论:(0)  加入收藏
Redis持久化意义 是做灾难恢复,数据恢复,也可以归类到高可用的一个环节里面去,比如你的redis整个挂了,然后redis就不可用了,你要做的事情是让redis变得可用,尽快变得可用 大量的请...【详细内容】
2021-08-12  Tags: Redis  点击:(77)  评论:(0)  加入收藏
Nginx来限制访问控制的方法有多种,nginx主要有2个模块控制,但是那些不支持自定义,非常死,在大多数场景下并不实用。今天分享一个:利用openresty+lua+redis 实现封杀频繁恶意访问I...【详细内容】
2021-08-12  Tags: Redis  点击:(119)  评论:(0)  加入收藏
▌简易百科推荐
来源: my.oschina.net/xiaomu0082/blog/2990388首先说下问题现象:内网sandbox环境API持续1周出现应用卡死,所有api无响应现象刚开始当测试抱怨环境响应慢的时候 ,我们重启一下应...【详细内容】
2021-12-08  Java识堂    Tags:Redis   点击:(18)  评论:(0)  加入收藏
我不知道为什么你会选择对特定数量的“错误”(或警告)如此具体。听起来您正在寻找将要发布到 Yahoo! 的某些文章的内容。 Insider (N Foos to Blah for the BlahBlah)。那说:...【详细内容】
2021-12-07  富集云科技有限公司    Tags:Redis   点击:(14)  评论:(0)  加入收藏
目录 一、背景 二、步骤 0.理论支持 1、获取数据 2、结果 3、分析数据并评估大小 三、关于repl-backlog-size 一、背景 repl-backlog-size控制这个环形缓冲区. ​ 主从断...【详细内容】
2021-11-05  弈秋的美好生活    Tags:redis   点击:(41)  评论:(0)  加入收藏
Redis 性能测试是通过同时执行多个命令实现的。1,Redis-benchmarkRedis性能命令:redis性能命令格式: redis-benchmark [option] [option value] redis 性能测试工具可选参数如...【详细内容】
2021-11-02  川石信息    Tags:Redis   点击:(41)  评论:(0)  加入收藏
1 概述数据结构和内部编码 无传统关系型数据库的 Table 模型schema 所对应的db仅以编号区分。同一 db 内,key 作为顶层模型,它的值是扁平化的。即 db 就是key的命名空间。 key...【详细内容】
2021-11-01  JavaEdge    Tags:Redis   点击:(28)  评论:(0)  加入收藏
普通java中使用引用Java redis 驱动,即可连接:import redis.clients.jedis.Jedis; public class RedisTestJava { public static void main(String[] args) { //连...【详细内容】
2021-10-13  faesuite    Tags:Redis   点击:(34)  评论:(0)  加入收藏
Redis常用的数据结构有 string list set zset hashstringstring 是 Redis 的基本的数据类型,一个 key 对应一个 value。string 类型是二进制安全的,Redis的string可以包含任...【详细内容】
2021-10-12  语霖    Tags:Redis   点击:(36)  评论:(0)  加入收藏
列表类型可以存储一组按插入顺序排序的字符串,它非常灵活,支持在两端插入、弹出数据,可以充当栈和队列的角色。> LPUSH fruit apple(integer) 1> RPUSH fruit banana(integer)...【详细内容】
2021-09-17  深夜敲代码    Tags:Redis   点击:(54)  评论:(0)  加入收藏
Redis持久化意义 是做灾难恢复,数据恢复,也可以归类到高可用的一个环节里面去,比如你的redis整个挂了,然后redis就不可用了,你要做的事情是让redis变得可用,尽快变得可用 大量的请...【详细内容】
2021-08-12  小李说IT    Tags:Redis   点击:(77)  评论:(0)  加入收藏
当查询Redis中没有的数据时,该查询会下沉到数据库层,同时数据库层也没有该数据,当这种情况大量出现或被恶意攻击时,接口的访问全部透过Redis访问数据库,而数据库中也没有这些数据...【详细内容】
2021-07-30  随便t    Tags:缓存穿透   点击:(91)  评论:(0)  加入收藏
最新更新
栏目热门
栏目头条