分类归档

服务器教程

服务器知识、操作系统教程、服务器常用软件等

FWQ
服务器教程
分布式锁用Redis还是Zookeeper?为什么用?
分布式锁用Redis还是Zookeeper?为什么用? 收藏 小伙伴们对数据库编程感兴趣吗?是否正在学习相关知识点?如果是,那么本文《分布式锁用Redis还是Zookeeper?为什么用?》,就很适合你,本篇文章讲解的知识点主要包括分布式锁、Redis、zookeeper。在之后的文章中也会多多分享相关知识点,希望对大家的知识积累有所帮助!  为什么用分布式锁? 在讨论这个问题之前,我们先来看一个业务场景: 系统A是一个电商系统,目前是一台机器部署,系统中有一个用户下订单的接口,但是用户下订单之前一定要去检查一下库存,确保库存足够了才会给用户下单。 由于系统有一定的并发,所以会预先将商品的库存保存在redis中,用户下单的时候会更新redis的库存。 此时系统架构如下: 但是这样一来会产生一个问题:假如某个时刻,redis里面的某个商品库存为1,此时两个请求同时到来,其中一个请求执行到上图的第3步,更新数据库的库存为0,但是第4步还没有执行。 而另外一个请求执行到了第2步,发现库存还是1,就继续执行第3步。 这样的结果,是导致卖出了2个商品,然而其实库存只有1个。 很明显不对啊!这就是典型的库存超卖问题 此时,我们很容易想到解决方案:用锁把2、3、4步锁住,让他们执行完之后,另一个线程才能进来执行第2步。 按照上面的图,在执行第2步时,使用Java提供的synchronized或者ReentrantLock来锁住,然后在第4步执行完之后才释放锁。 这样一来,2、3、4 这3个步骤就被“锁”住了,多个线程之间只能串行化执行。 但是好景不长,整个系统的并发飙升,一台机器扛不住了。现在要增加一台机器,如下图: 增加机器之后,系统变成上图所示,我的天! 假设此时两个用户的请求同时到来,但是落在了不同的机器上,那么这两个请求是可以同时执行了,还是会出现库存超卖的问题。 为什么呢?因为上图中的两个A系统,运行在两个不同的JVM里面,他们加的锁只对属于自己JVM里面的线程有效,对于其他JVM的线程是无效的。 因此,这里的问题是:Java提供的原生锁机制在多机部署场景下失效了 这是因为两台机器加的锁不是同一个锁(两个锁在不同的JVM里面)。 那么,我们只要保证两台机器加的锁是同一个锁,问题不就解决了吗? 此时,就该分布式锁隆重登场了,分布式锁的思路是: 在整个系统提供一个全局、唯一的获取锁的“东西”,然后每个系统在需要加锁时,都去问这个“东西”拿到一把锁,这样不同的系统拿到的就可以认为是同一把锁。 至于这个“东西”,可以是Redis、Zookeeper,也可以是数据库。 文字描述不太直观,我们来看下图: 通过上面的分析,我们知道了库存超卖场景在分布式部署系统的情况下使用Java原生的锁机制无法保证线程安全,所以我们需要用到分布式锁的方案。…
2025-05-10 阅读全文 →
FWQ
服务器教程
Redis 缓存雪崩、击穿、穿透
Redis 缓存雪崩、击穿、穿透 收藏 本篇文章主要是结合我之前面试的各种经历和实战开发中遇到的问题解决经验整理的,希望这篇《Redis 缓存雪崩、击穿、穿透》对你有很大帮助!欢迎收藏,分享给更多的需要的朋友学习~ 正文 提到Redis我相信各位在面试,或者实际开发过程中对缓存雪崩,穿透,击穿也不陌生吧,就算没遇到过但是你肯定听过,那三者到底有什么区别,我们又应该怎么去防止这样的情况发生呢,我们有请下一位受害者。 面试开始 一个大腹便便,穿着格子衬衣的中年男子,拿着一个满是划痕的mac向你走来,看着快秃顶的头发,心想着肯定是尼玛顶级架构师吧!但是我们腹有诗书气自华,虚都不虚。 小伙子我看你的简历上写到了Redis,那么我们直接开门见山,直接怼常见的几个大问题,Redis雪崩了解么? 帅气迷人的面试官您好,我了解的,目前电商首页以及热点数据都会去做缓存 ,一般缓存都是定时任务去刷新,或者是查不到之后去更新的,定时任务刷新就有一个问题。 举个简单的例子:如果所有首页的Key失效时间都是12小时,中午12点刷新的,我零点有个秒杀活动大量用户涌入,假设当时每秒 6000 个请求,本来缓存在可以扛住每秒 5000 个请求,但是缓存当时所有的Key都失效了。此时 1 秒 6000 个请求全部落数据库,数据库必然扛不住,它会报一下警,真实情况可能DBA都没反应过来就直接挂了。此时,如果没用什么特别的方案来处理这个故障,DBA 很着急,重启数据库,但是数据库立马又被新的流量给打死了。这就是我理解的缓存雪崩。 我刻意看了下我做过的项目感觉再吊的都不允许这么大的QPS直接打DB去,不过没慢SQL加上分库,大表分表可能还还算能顶,但是跟用了Redis的差距还是很大 同一时间大面积失效,那一瞬间Redis跟没有一样,那这个数量级别的请求直接打到数据库几乎是灾难性的,你想想如果打挂的是一个用户服务的库,那其他依赖他的库所有的接口几乎都会报错,如果没做熔断等策略基本上就是瞬间挂一片的节奏,你怎么重启用户都会把你打挂,等你能重启的时候,用户早就睡觉去了,并且对你的产品失去了信心,什么垃圾产品。 面试官摸了摸自己的头发,嗯还不错,那这种情况咋整?你都是怎么去应对的? 处理缓存雪崩简单,在批量往Redis存数据的时候,把每个Key的失效时间都加个随机值就好了,这样可以保证数据不会在同一时间大面积失效,我相信,Redis这点流量还是顶得住的。 setRedis(Key,value,time + Math.random() * 10000);  如果Redis是集群部署,将热点数据均匀分布在不同的Redis库中也能避免全部失效的问题,不过本渣我在生产环境中操作集群的时候,单个服务都是对应的单个Redis分片,是为了方便数据的管理,但是也同样有了可能会失效这样的弊端,失效时间随机是个好策略。…
2025-05-10 阅读全文 →
FWQ
服务器教程
一文教你彻底拿下Redis数据库
一文教你彻底拿下Redis数据库 收藏 一分耕耘,一分收获!既然打开了这篇文章《一文教你彻底拿下Redis数据库》,就坚持看下去吧!文中内容包含Redis、数据库、运维等等知识点…希望你能在阅读本文后,能真真实实学到知识或者帮你解决心中的疑惑,也欢迎大佬或者新人朋友们多留言评论,多给建议!谢谢! REmote DIctionary Server(Redis) 是一个由 Salvatore Sanfilippo 写的 Key-Value 存储系统。 Redis 简介 Redis 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于内存亦可持久化的日志型、Key-Value 数据库,并提供多种语言的 API。 它通常被称为数据结构服务器,因为值(value)可以是字符串(String),哈希(Map),列表(list),集合(sets) 和有序集合(sorted sets)等类型。 大家都知道 Redis…
2025-05-10 阅读全文 →
FWQ
服务器教程
你好Redis,我有7个问题要问你!
你好Redis,我有7个问题要问你! 收藏 本篇文章向大家介绍《你好Redis,我有7个问题要问你!》,主要包括协议、Redis、通讯,具有一定的参考价值,需要的朋友可以参考一下。 【golang学习网.com原创稿件】Hello,Redis!我们相处已经很多年了,从模糊的认识到现在我们已经深入结合,你的好我一直都知道也一直都记住,能否再让我多问你的几个问题,让我更加深入的去了解你。 图片来自包图网 Redis 的通讯协议是什么 Redis 的通讯协议是文本协议,是的,Redis 服务器与客户端通过 RESP(Redis Serialization Protocol)协议通信。 没错,文本协议确实是会浪费流量,不过它的优点在于直观,非常的简单,解析性能极其的好,我们不需要一个特殊的 Redis 客户端仅靠 Telnet 或者是文本流就可以跟 Redis 进行通讯。 客户端的命令格式: 简单字符串 Simple Strings,以 “+”加号开头。 错误 Errors,以”-“减号开头。 整数型…
2025-05-10 阅读全文 →
FWQ
服务器教程
如何自定义redis工具jar包供其他SpringBoot项目直接使用
如何自定义redis工具jar包供其他SpringBoot项目直接使用 收藏 知识点掌握了,还需要不断练习才能熟练运用。下面golang学习网给大家带来一个数据库开发实战,手把手教大家学习《如何自定义redis工具jar包供其他SpringBoot项目直接使用》,在实现功能的过程中也带大家重新温习相关知识点,温故而知新,回头看看说不定又有不一样的感悟! 注:(最终redis数据库连接信息由使用者项目模块配置提供) 一、Redis常用存储操作实现(redis-util模块,该module最后会打包成jar供其他服务使用) 1.引用相关依赖 org.springframework.boot spring-boot-starter-data-redis 2.3.0.RELEASE 2.配置reids连接信息 注:由于此时还处于redis-util工具包开发阶段,所以reids的配置文件还是由自己的模块来提供,后期打包成jar时,会清除redis-util工具包里的redis连接信息,然后由需要使用redis-util工具的服务模块提供reids的连接信息; 在reids-util的application.properties里配置redis数据库连接信息 #Redis服务器地址 spring.redis.host=127.0.0.1 #Redis服务器连接端口 spring.redis.port=6379 #Redis数据库索引(默认为0) spring.redis.database=0 3.自定义序列化类,将存储在Redis的对象序列化为json格式 import org.springframework.boot.autoconfigure.EnableAutoConfiguration; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import org.springframework.data.redis.connection.lettuce.LettuceConnectionFactory; import…
2025-05-10 阅读全文 →
FWQ
服务器教程
使用Redis实现实时排行榜功能
使用Redis实现实时排行榜功能 收藏 在数据库实战开发的过程中,我们经常会遇到一些这样那样的问题,然后要卡好半天,等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《使用Redis实现实时排行榜功能》,聊聊Redis排行榜,希望可以帮助到正在努力赚钱的你。 游戏中存在各种各样的排行榜,比如玩家的等级排名、分数排名等。玩家在排行榜中的名次是其实力的象征,位于榜单前列的玩家在虚拟世界中拥有无尚荣耀,所以名次也就成了核心玩家的追求目标。 一个典型的游戏排行榜包括以下常见功能: 1. 能够记录每个玩家的分数; 2. 能够对玩家的分数进行更新; 3. 能够查询每个玩家的分数和名次; 4. 能够按名次查询排名前N名的玩家; 5. 能够查询排在指定玩家前后M名的玩家。 更进一步,上面的操作都需要在短时间内实时完成,这样才能最大程度发挥排行榜的效用。 由于一个玩家名次上升x位将会引起x+1位玩家的名次发生变化(包括该玩家),如果采用传统数据库(比如MySQL)来实现排行榜,当玩家人数较多时,将会导致对数据库的频繁修改,性能得不到满足,所以我们只能另想它法。 Redis作为NoSQL中的一员,近年来得到广泛应用。与Memcached相比,Redis拥有更多的数据类型和操作接口,具有更大的适用范围,其中的有序集合(sorted set,也称为zset)就非常适合于排行榜的构建。下面简要总结一下。 ## 1\. Redis的安装 Ubuntu下安装Redis非常简单,执行如下命令即可: > $ sudo apt-get install…
2025-05-10 阅读全文 →
FWQ
服务器教程
Redis实现分布式任务分发的方法与应用实例
Redis实现分布式任务分发的方法与应用实例 golang学习网今天将给大家带来《Redis实现分布式任务分发的方法与应用实例》,感兴趣的朋友请继续看下去吧!以下内容将会涉及到等等知识点,如果你是正在学习数据库或者已经是大佬级别了,都非常欢迎也希望大家都能给我建议评论哈~希望能帮助到大家! 前言在分布式系统中,任务分发是一个非常重要的部分。任务分发可以保证任务在不同节点上的均衡分配,可以避免某个节点负载过高而导致的整个系统崩溃的风险。 在本文中,我们将介绍Redis的分布式任务分发方法并结合应用实例进行演示。本文的目的是帮助读者更好地理解和应用Redis在分布式系统中的优越性。 Redis的分布式任务分发方法Redis是一个高效的NoSQL数据库,常用作缓存和数据存储。而在分布式系统中,Redis还可以作为任务分发的中心控制器,实现分布式任务分发的功能。 在Redis中,我们可以利用它提供的pub/sub(发布/订阅)机制来实现任务分发。具体实现方法如下: 2.1 将任务添加到队列中我们可以通过Redis的LPUSH命令将新的任务添加到队列中。例如: LPUSH task_queue “task1” 2.2 发布任务在将任务添加到队列中之后,我们可以通过Redis的PUBLISH命令发布该任务的信息,并通过频道来向其他节点广播此信息。例如: PUBLISH task_channel “task1 is available” 2.3 订阅任务在节点中,我们可以通过Redis的SUBSCRIBE命令订阅该频道信息。这样一来,一旦有新任务发布到频道中,订阅者就可以及时获取并开始执行任务。例如: SUBSCRIBE task_channel 应用实例为了更好地演示Redis实现分布式任务分发的方法,我们将通过一段简单的代码来模拟一个分布式任务分发的场景。 我们首先通过Python语言来实现发布任务的代码(发布者): import redis redis_client =…
2025-05-10 阅读全文 →
FWQ
服务器教程
Redis如何实现订单过期删除
Redis如何实现订单过期删除 收藏 积累知识,胜过积蓄金银!毕竟在数据库开发的过程中,会遇到各种各样的问题,往往都是一些细节知识点还没有掌握好而导致的,因此基础知识点的积累是很重要的。下面本文《Redis如何实现订单过期删除》,就带大家讲解一下知识点,若是你对本文感兴趣,或者是想搞懂其中某个知识点,就请你继续往下看吧~ 前言 设计订单过期,不能单纯靠Redis,需要兜底策略 代码实现: import com.coolplay.trade.dto.req.CancelOrderReq; import lombok.extern.slf4j.Slf4j; import org.apache.commons.collections.CollectionUtils; import org.springframework.data.redis.core.ZSetOperations; import org.springframework.scheduling.annotation.Scheduled; import org.springframework.stereotype.Service; import javax.annotation.Resource; import java.util.Set; import java.util.concurrent.TimeUnit; @Service @Slf4j public class OrderRedisDelayQueueOperator extends AbstractOrderScheduleDelayQueue {     @Resource(name = "redisTemplate")     private ZSetOperations<String, String> orderRedis;     /**      * 预售、现货生成订单15分钟后未支付,需要取消订单      */     private static final String DELAY_QUEUE_NAME = "order";     /**      * 每1秒执行一次      */     @Override…
2025-05-10 阅读全文 →
FWQ
服务器教程
redis字符串类型_动力节点Java学院整理
redis字符串类型_动力节点Java学院整理 收藏 怎么入门数据库编程?需要学习哪些知识点?这是新手们刚接触编程时常见的问题;下面golang学习网就来给大家整理分享一些知识点,希望能够给初学者一些帮助。本篇文章就来介绍《redis字符串类型_动力节点Java学院整理》,涉及到redis字符串类型,有需要的可以收藏一下 我们都知道redis是采用C语言开发,那么在C语言中表示string都是采用char[]数组的,然后你可能会想,那还不简单,当我执行如下命令,肯定是直接塞给char[]数组的。 如果你真的这么想的话,会有几个问题就要过来砍你了,先我们来找一个redis手册,http://doc.redisfans.com/ 第一:如果你每次都执行Append函数,那是不是redis的char[]每次都需要再次扩容,这样是不是每次都是耗时操作呢? 第二:如果你每次执行String中的StrLen,那redis底层是不是每次都要遍历char数组来得到结果呢? 一、 探索Redis中的String是如何存储的   根据上面说的那些小情况,所以redis的作者没有那么傻,正常的逻辑应该是在char[]数组的层面上自己再来封装一层。 1. SDS结构体 在redis里面是采用SDS(simple dynamic string)来封装char[]的,这个也是redis存储的最小单元,下一个问题就是哪里能看得到呢?我在wget压缩包的时候,里面就有redis源码啦,据说还只有3w多行,这就告诉我们,有什么问题,自己动手丰衣足食,对吧,为查找方便,我就把redis的源码拖到window上用vs打开,接下来我们看看SDS长成啥样??? 可以看到它是定义在redis源码中的sds.h源文件中的,你可能会奇怪,这三个属性是干嘛用的???下面我简单说一下。 len: 标记char[]的长度, 有点类似我们C#中List的length一个意思。 free: 标记char[]中未使用的元素个数,就是有几个空坑的意思。 buf[]:存放元素的坑,不一定和元素的实际个数相等,比如前面说的cnblogs。也有可能是[c][n][b][l][o][g][s][/0][][][]。 二、探索Redis对象(RedisObject) 前面说到的SDS仅仅是char[]数组的封装,并不能标识redis中的5大类型,所以可想而知,redis还需要在SDS上面进行封装,所以就有了接下来的 RedisObject对象,我们先看看它长成啥样。 可以看到RedisObject是在redis.h源代码文件中的,下面我简单说说type和ptr属性,详细的东西在后续说。 type 这个就是用来标识redisObject是哪种类型,既然是哪种类型,肯定就有一个类型枚举,对吧,肯定有了,给你看看。…
2025-05-10 阅读全文 →
FWQ
服务器教程
Windows下redis下载、redis安装及使用教程
Windows下redis下载、redis安装及使用教程 收藏 在数据库实战开发的过程中,我们经常会遇到一些这样那样的问题,然后要卡好半天,等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《Windows下redis下载、redis安装及使用教程》,聊聊使用、安装、WindowsRedis,希望可以帮助到正在努力赚钱的你。 redis 简介   简单来说 redis 就是一个数据库,不过与传统数据库不同的是 redis 的数据是存在内存中的,所以读写速度非常快,因此 redis 被广泛应用于缓存方向。另外,redis 也经常用来做分布式锁。redis 提供了多种数据类型来支持不同的业务场景。除此之外,redis 支持事务 、持久化、LUA脚本、LRU驱动事件、多种集群方案。 Redis 下载安装 现在gihub下 https://github.com/MicrosoftArchive/redis/releases 基本感觉下不了 提供我的百度云资源文件进行下载 Redis-x64-3.2.1文件下载链接: 链接: 提取码: rkne 修改 Redis…
2025-05-10 阅读全文 →