iis服务器助手广告广告
返回顶部
首页 > 资讯 > 后端开发 > 其他教程 >Redis Cluster 字段模糊匹配及删除
  • 293
分享到

Redis Cluster 字段模糊匹配及删除

2024-04-02 19:04:59 293人浏览 安东尼
摘要

Questions 在数据库内我们可以通过like关键字、%、*或者REGEX关键字进行模糊匹配。而在Redis内我们如何进行模糊匹配呢?集群情况Redis Cluster的情况是

Questions

数据库内我们可以通过like关键字、%、*或者REGEX关键字进行模糊匹配。而在Redis内我们如何进行模糊匹配呢?集群情况Redis Cluster的情况是否和单机一致呢?前段时间我对于这个议题进行了调查和研究。

单节点的情况

Jedis
参考stackoverflow上的解答,在Java内使用Jedis主要有如下2中写法:


### 方法1
Set<String> keys = jedis.keys(pattern);
for (String key : keys) {
    jedis.del(key);
} 

### 方法2
Jedis jedis = new Jedis("127.0.0.1");
ScanParams scanParams = new ScanParams();
scanParams.match("prifix*");
scanParams.count(1000);
ScanResult<String> result = jedis.scan(0,scanParams);
result.getResult().forEach(key -> {
    jedis.del(key);
});

### 注意scan方法由于某些bug在2.9版本内scan(int,ScanParams)改为了scan(String,ScanParams)。由于cursor的位数,方法有些调整。

方法1,通过keys命令先寻找到所有符合的key,然后把它们删除;
方法2,通过scan命令扫描所有符合的key,然后把它们删除。
注意: Redis饰单线程模式,全局扫描的话有可能会导致Redis在一段时间内的卡顿情况发生。

Redis-cli


redis-cli keys 1.cn*|xargs redis-cli del 

Redis Cluster情况

在Redis Cluster情况与单节点多情况完全不太一样。

  • 首先,Redis Cluster是将整个Redis 的hash槽分布在三台机器上,要想一下全部扫描出来,显然是不太现实的。
  • Redis内提供Hash-Tag,将相类似的键放在一台机器上。可以通过Hash-Tag进行扫描,可以剪短时间消耗。
  • 最后需要考虑,主从集群节点的情况。

Hash-Tag

Hash-Tag 是用一个花括号将主要的Hash判断部分扩起来,例如{hello1}key1、{hello1}key2。一般Hash-tag一致的情况,键会存储在集群的同一台机器上。在Jedis 2.9版本提供了这样的扫描方法。
(PS . rediscluster是没有keys方法的)


public static void deleteRedisKeyStartWith(String redisKeyStartWith) {
        try{
            jedisCluster.getClusternodes();

            ScanParams scanParams = new ScanParams();
//          scanParams.match("{123}keys*");

//          scanParams.count(1000);
            ScanResult<String> result = jedisCluster.scan("0", scanParams);
            result.getResult().forEach(key -> {
                jedisCluster.del(key);
            });
//          jedisCluster.del(wrapperKey(redisKeyStartWith)+".*");
            log.info("success deleted redisKeyStartWith:{}", redisKeyStartWith);
        }finally{
        }
    }

土办法 分别扫描各个hash槽


public static void deleteRedisKeyStartWith(String redisKeyStartWith) {
        try {
            Map<String, JedisPool> clusterNodes = jedisCluster.getClusterNodes();

            for (Map.Entry<String, JedisPool> entry : clusterNodes.entrySet()) {
                Jedis jedis = entry.getValue().getResource();
                // 判断非从节点(因为若主从复制,从节点会跟随主节点的变化而变化)
                if (!jedis.info("replication").contains("role:slave")) {
                    Set<String> keys = jedis.keys(redisKeyStartWith + "*");
                    if (keys.size() > 0) {
                        Map<Integer, List<String>> map = new HashMap<>();
                        for (String key : keys) {
                            // cluster模式执行多key操作的时候,这些key必须在同一个slot上,不然会报:JedisDataException:
                            // CROSSSLOT Keys in request don't hash to the same slot
                            int slot = JedisClusterCRC16.getSlot(key);
                            // 按slot将key分组,相同slot的key一起提交
                            if (map.containsKey(slot)) {
                                map.get(slot).add(key);
                            } else {
                                map.put(slot, Lists.newArrayList(key));
                            }
                        }
                        for (Map.Entry<Integer, List<String>> integerListEntry : map.entrySet()) {
                            jedis.del(integerListEntry.getValue().toArray(new String[integerListEntry.getValue().size()]));
                        }
                    }
                }
            }
            log.info("success deleted redisKeyStartWith:{}", redisKeyStartWith);
        } finally {
        }
    }

### 未使用slot批次提交(有可能效率略差于前者)
//获取jedis连接

         private JedisCluster jedisCluster=JedisClusterUtil.getJedisCluster();

         //@param pattern  获取key的前缀  全是是 * 

 public static TreeSet<String> keys(String pattern){  


       TreeSet<String> keys = new TreeSet<>();  
        //获取所有的节点

               Map<String, JedisPool> clusterNodes = jedisCluster.getClusterNodes();  
       //遍历节点 获取所有符合条件的KEY 

               for(String k : clusterNodes.keySet()){  
           logger.debug("Getting keys from: {}", k);  
           JedisPool jp = clusterNodes.get(k);  
           Jedis connection = jp.getResource();  
           try {  
               keys.addAll(connection.keys(pattern));  
           } catch(Exception e){  
               logger.error("Getting keys error: {}", e);  
           } finally{  
               logger.debug("Connection closed.");  
               connection.close();//用完一定要close这个链接!!!  
           }  
       }  
       logger.debug("Keys Gotten!");  
       return keys;  
  }  

          //main方法

 public static void main(String[] args ){
 TreeSet<String> keys=keys("*");

 //遍历key  进行删除  可以用多线程

 for(String key:keys){

                          jedisCluster.del(key);
 System.out.println(key);
 }
 }

Reference

[1]. (码经)如何通过正则匹配删除Redis里的键
[2]. (Stackoverflow)Redis/Jedis - Delete by pattern?
[3]. (JavaDoc)Class JedisCluster
[4]. (csdn)redis cluster 模式如何批量删除指定前缀的key
[5]. redis cluster模式key的模糊删除-java操作
[6]. Jedis实现批量删除redis cluster
[6]. redis del命令支持正则删除(pattern)
[7]. Redis 批量删除Redis的key 正则匹配删除
[8]. (名字挺搞笑-蛋糕店老板)Redis集群下使用Jedis实现keys模糊查询

到此这篇关于Redis Cluster 字段模糊匹配及删除的文章就介绍到这了,更多相关Redis Cluster 字段模糊删除内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: Redis Cluster 字段模糊匹配及删除

本文链接: https://www.lsjlt.com/news/126932.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • Redis Cluster 字段模糊匹配及删除
    Questions 在数据库内我们可以通过like关键字、%、*或者REGEX关键字进行模糊匹配。而在Redis内我们如何进行模糊匹配呢?集群情况Redis Cluster的情况是...
    99+
    2024-04-02
  • Redis中Cluster字段模糊匹配及删除的示例分析
    小编给大家分享一下Redis中Cluster字段模糊匹配及删除的示例分析,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!Questions在数据库内我们可以通过like关键字、%、*或者REGEX关键字进行模糊匹配。而在Re...
    99+
    2023-06-15
  • MySQL两个字段模糊匹配
    目录 1.需求:2.思路:3.方案:4.总结: 1.需求: 今天遇到一个业务需求:两张MySQL表做join,两个关联键是包含关系,SQL该怎么实现。 2.思路: 由于两个关联键是包含关系,那么首先想到的就是like模糊匹配。 ...
    99+
    2023-08-17
    mysql 数据库
  • es怎么对sql字段模糊匹配
    在ES中,可以使用通配符查询来实现对SQL字段的模糊匹配。通配符查询支持两种通配符:*(匹配0个或多个字符)和(匹配一个字符)。下面...
    99+
    2023-10-11
    es sql
  • SQL多表联合查询时如何采用字段模糊匹配
    目录先说一下背景和要求方法一方法二方法三先说一下背景和要求 背景:由于业务或是其他不描述的原因的问题导致原有存储的数据发生变动,与现有数据有差别,但还是能勉强看明白数据内容。 要求:实现A表的名称字段和B表的名称字段要模...
    99+
    2024-04-02
  • redis模糊批量删除key的方法
    目录一、命令行删除二、golang代码删除一、命令行删除 Redis-cli -h 172.18.255.99 -p 6379 -n 6 -a 123456 KEYS "websocket127.0.0.1:5*" | ...
    99+
    2022-12-16
    redis模糊删除key redis模糊批量清除key redis批量清除
  • python 字符串模糊匹配Fuzzywuzzy的实现
    目录(1)安装(2)接口说明(3)使用Python提供fuzzywuzzy模块,不仅可用于计算两个字符串之间的相似度,而且还提供排序接口能从大量候选集中找到最相似的句子。 (1)安装...
    99+
    2024-04-02
  • Python实现字符串模糊匹配方式
    目录Python字符串模糊匹配包含四个参数python-re模块,模糊匹配Python字符串模糊匹配 Python的difflib库中get_close_matches方法 包含四个...
    99+
    2024-04-02
  • mongodb数字模糊匹配的方法是什么
    在MongoDB中,可以使用正则表达式来实现数字模糊匹配。例如,假设有一个集合存储了一些文档,其中一个字段是数字类型。现在我们想要模...
    99+
    2023-08-23
    mongodb
  • redis命令模糊匹配查询的方法是什么
    在Redis中,可以使用SCAN命令进行模糊匹配查询。SCAN命令是一个游标方式的迭代器,它可以逐步遍历匹配给定模式的所有键。具体步...
    99+
    2023-08-23
    redis
  • ORACLE数据库对long类型字段进行模糊匹配的解决思路
    1.背景介绍 最近在查询数据时,突然遇到了这样一个场景,如何对一个字段类型为long的字段进行模糊匹配。一顿操作以后发现不能使用like进行模糊查询,仔细查看了一下官方文档才发现,l...
    99+
    2024-04-02
  • vlookup关键字模糊匹配的方法是什么
    VLOOKUP函数在进行关键字模糊匹配时,可以使用通配符*来表示任意字符。可以通过在VLOOKUP函数的第一个参数中使用通配符来匹配...
    99+
    2023-09-07
    vlookup
  • awk模糊匹配字符串的方法是什么
    awk中的模糊匹配字符串可以通过使用正则表达式来实现。可以使用`~`运算符来判断一个字符串是否匹配某个模式。例如,假设我们有一个包含...
    99+
    2023-08-16
    awk
  • java字符串模糊匹配算法怎么应用
    字符串模糊匹配算法可以应用于各种场景,例如:1. 文本搜索引擎:在搜索引擎中,用户输入的查询字符串通常是模糊的,可以使用字符串模糊匹...
    99+
    2023-09-14
    java
  • PHP匹配与排除:解析不模糊包含表达式
    PHP匹配与排除:解析不模糊包含表达式,需要具体代码示例 在PHP编程中,匹配与排除是常见的需求,特别是在处理字符串或者正则表达式时。而有时候,我们需要的并不是模糊匹配,而是精确匹配特...
    99+
    2024-02-28
    php 匹配 排除
  • PHP正则表达式:精确匹配与排除模糊包含
    PHP正则表达式:精确匹配与排除模糊包含 正则表达式是一种强大的文本匹配工具,能够帮助程序员在处理文本时进行高效的搜索、替换和筛选。在PHP中,正则表达式也被广泛应用于字符串处理和数据...
    99+
    2024-02-28
    php 正则表达式 匹配
  • Mybatis mysql模糊查询方式(CONCAT多个字段)及bug
    目录Mybatis mysql模糊查询及bug解决方案:一解决方案:二mybatis多个字段如何模糊查询一个值Mybatis mysql模糊查询及bug 先看下如下xml SELE...
    99+
    2024-04-02
  • PHP字符串匹配技巧:避免模糊包含表达式
    PHP字符串匹配技巧:避免模糊包含表达式 在PHP开发中,字符串匹配是一个常见的任务,通常用于查找特定的文本内容或验证输入的格式。然而,有时候我们需要避免使用模糊的包含表达式来确保匹配...
    99+
    2024-02-29
    php 字符串 匹配
  • 如何在Golang中通过字符串匹配实现模糊查询
    在数据处理中,模糊查询是一项非常实用的技能。在 Golang 中,通过使用正则表达式或者字符串匹配等方法可以实现模糊查询。一般情况下,字符串匹配方法更为简单,且对于一般的模糊查询已经可以满足要求。下面我们来介绍一下如何在 Golang 中通...
    99+
    2023-05-14
  • php如何用正则匹配某个字符并删除
    这篇文章主要介绍了php如何用正则匹配某个字符并删除的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇php如何用正则匹配某个字符并删除文章都会有所收获,下面我们一起来看看吧。两种方法:1、用preg_replac...
    99+
    2023-06-30
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作