惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

酷 壳 – CoolShell
酷 壳 – CoolShell
H
Hacker News: Front Page
P
Palo Alto Networks Blog
T
ThreatConnect
Apple Machine Learning Research
Apple Machine Learning Research
博客园_首页
T
True Tiger Recordings
P
Privacy & Cybersecurity Law Blog
B
Blog
IT之家
IT之家
Last Week in AI
Last Week in AI
F
Full Disclosure
Hacker News: Ask HN
Hacker News: Ask HN
C
Comments on: Blog
Microsoft Azure Blog
Microsoft Azure Blog
C
Cybersecurity and Infrastructure Security Agency CISA
Microsoft Security Blog
Microsoft Security Blog
博客园 - 【当耐特】
N
News and Events Feed by Topic
NISL@THU
NISL@THU
腾讯CDC
雷峰网
雷峰网
Security Latest
Security Latest
李成银的技术随笔
M
Microsoft Research Blog - Microsoft Research
L
LangChain Blog
L
Lohrmann on Cybersecurity
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
C
Check Point Blog
Y
Y Combinator Blog
Recent Announcements
Recent Announcements
博客园 - Franky
N
News | PayPal Newsroom
V
V2EX
A
About on SuperTechFans
The Register - Security
The Register - Security
月光博客
月光博客
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
Google Online Security Blog
Google Online Security Blog
MyScale Blog
MyScale Blog
Cisco Talos Blog
Cisco Talos Blog
Vercel News
Vercel News
WordPress大学
WordPress大学
C
Cyber Attacks, Cyber Crime and Cyber Security
The Hacker News
The Hacker News
IntelliJ IDEA : IntelliJ IDEA – the Leading IDE for Professional Development in Java and Kotlin | The JetBrains Blog
IntelliJ IDEA : IntelliJ IDEA – the Leading IDE for Professional Development in Java and Kotlin | The JetBrains Blog
爱范儿
爱范儿
A
Arctic Wolf
L
LINUX DO - 最新话题
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More

博客园 - GDOUJKZZ

.net 8程序如何在信创的arm64架构下运行【nuget包如何判断能不能在arm架构跑呢】 【AI】第五篇 大话说神经网络第一篇 docker 目录下的overlay2层的太多,导致占用大量占用磁盘空间怎么办呢。【docker目录清理】 【AI】第四篇 什么是神经网络 - GDOUJKZZ 【AI】第三篇 RAG是什么 【AI】前置篇 Ai Agent的全貌概览 【AI】第二篇 为什么会有神经网络 【AI】第一篇 语言模型的前世 n-gram的简单介绍 【一】AI赋能 javascript里面的var let const关键字区别和使用 学习心态 从应用开发转到大数据开发 一分钟RequireJS介绍 .NET 6 在小并发下如何生成唯一单据号 垃圾回收机制简单理解 NPOI导出大量数据的避免OOM解决方案【SXSSFWorkbook】 递归有环问题解决方案 C# 使用NPOI处理Excel模板-【前面部分固定,中间是动态的几行,尾部是固定的部分】 高并发的场景下,如何保证生产者投递到消息中间件的消息不丢失
【AI应用】【声纹识别】一、mini io 来构建高可用的文件存储方案
GDOUJKZZ · 2026-01-22 · via 博客园 - GDOUJKZZ

  今天甲方这边提了一个需求,希望把很多的录音文件(里面是噪声),交给AI识别来分析到底是什么类型的声音,从而进行自动的溯源。

      那么先解决甲方的文件存储的问题,录音文件很多,一年下来50T左右。考虑到大部分文件除了给AI学习使用之后,业务上一般也就访问最近一到两个月的数据。

      所以考虑采用Mini IO双层存储的方案

     image

      Mini IO 自迁移策略

# lifecycle_migration.py
import boto3
from datetime import datetime, timedelta
from minio import Minio
from minio.lifecycleconfig import LifecycleConfig, Rule, Expiration, Filter

class StorageManager:
    def __init__(self):
        # 连接两个MinIO实例
        self.hot_client = Minio(
            "hot-minio:9000",
            access_key="hot-access-key",
            secret_key="hot-secret-key",
            secure=False
        )
        self.cold_client = Minio(
            "cold-minio:9000",
            access_key="cold-access-key",
            secret_key="cold-secret-key",
            secure=False
        )
    
    def auto_migrate_old_files(self):
        """自动迁移30天前的文件到冷存储"""
        # 1. 扫描热存储中30天前的文件
        objects = self.hot_client.list_objects("recordings", recursive=True)
        
        for obj in objects:
            if self.is_older_than(obj.last_modified, days=30):
                # 2. 复制到冷存储
                self.copy_to_cold_storage(obj.object_name)
                
                # 3. 从热存储删除(或设置标记)
                self.hot_client.remove_object("recordings", obj.object_name)
                
                print(f"Migrated: {obj.object_name}")

  还要集成AI分析的功能。

       AI的声纹识别后面再讲