惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

T
Tailwind CSS Blog
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
雷峰网
雷峰网
量子位
有赞技术团队
有赞技术团队
阮一峰的网络日志
阮一峰的网络日志
The Cloudflare Blog
博客园 - Franky
罗磊的独立博客
宝玉的分享
宝玉的分享
博客园_首页
腾讯CDC
The GitHub Blog
The GitHub Blog
D
DataBreaches.Net
IT之家
IT之家
D
Docker
Microsoft Security Blog
Microsoft Security Blog
博客园 - 司徒正美
V
V2EX
月光博客
月光博客
N
Netflix TechBlog - Medium
爱范儿
爱范儿
I
InfoQ
P
Proofpoint News Feed

博客园 - 雨V幕

使用chromedp 来做人工模拟操作爬取数据方法 使用rabbitmq 进行任务调度 使用trace进行排查网络瓶颈 使用vscode 调试 Python 使用power shell 拆分 csv文件 将大文件拆分成小文件。 使用postman 添加预处理验签。 go 使用pprof 进行问题排查 Mysql无主键删除重复数据的快速方法 解决mysql 事务死锁的方法 go在处理批量下载时候出现fatal error: runtime: out of memory AnalyticDB 创建db go 序列化反序列化之后时区信息丢失 clickhouse 进行建表期间的一些优化 kraots2.0 在windows 环境搭建开发环境 Sql Server使用函数获取拼音码 关于async 和await关键字 使用kubespray 一键部署 containerd 的安装和熟悉 VMware 配置双网卡实现上网和固定ip
遍历redis按照前缀给未设置过期时间的数据添加过期时间
雨V幕 · 2025-12-23 · via 博客园 - 雨V幕
package main

import (
    "context"
    "github.com/redis/go-redis/v9"
    "log"
    "time"
)

var (
    redisAddr     = "addr"
    redisPassword = "pwd"
    redisDB       = 0

    // ⚠️ 只清这些前缀(非常重要)
    patterns = []string{
        //"PLAT:USER:*",
        "PLAT:USER:NEW:CHANNEL:INFO:*",
        //"PLAT:AD:*",
    }

    // 给历史 Key 补的 TTL
    expireSeconds = int64(7 * 24) // 7 天

    // SCAN 每批数量(别太大)
    scanCount = int64(500)

    // 每处理一批 sleep,防止打爆 Redis
    batchSleep = 50 * time.Millisecond
)

func main() {
    ctx := context.Background()

    rdb := redis.NewClient(&redis.Options{
        Addr:     redisAddr,
        Password: redisPassword,
        DB:       redisDB,
    })

    defer rdb.Close()

    for _, pattern := range patterns {
        log.Printf("🚀 start cleaning pattern: %s\n", pattern)
        if err := cleanByPattern(ctx, rdb, pattern); err != nil {
            log.Fatalf("❌ clean failed: %v", err)
        }
    }

    log.Println("✅ all patterns finished")
}

func cleanByPattern(ctx context.Context, rdb *redis.Client, pattern string) error {
    var cursor uint64
    var total int64

    for {
        keys, nextCursor, err := rdb.Scan(ctx, cursor, pattern, scanCount).Result()
        if err != nil {
            return err
        }

        for _, key := range keys {
            ttl, err := rdb.TTL(ctx, key).Result()
            if err != nil {
                log.Printf("⚠️ TTL error key=%s err=%v\n", key, err)
                continue
            }

            // 只处理「无过期时间」的 key
            if ttl == -1 {
                ok, err := rdb.Expire(ctx, key, time.Duration(expireSeconds)*time.Hour).Result()
                if err != nil || !ok {
                    log.Printf("⚠️ expire failed key=%s err=%v\n", key, err)
                    continue
                }
                total++
            }
        }

        log.Printf("pattern=%s cursor=%d processed=%d\n", pattern, nextCursor, total)

        cursor = nextCursor
        if cursor == 0 {
            break
        }

        time.Sleep(batchSleep)
    }

    log.Printf("🎯 pattern=%s done, total expired=%d\n", pattern, total)
    return nil
}