惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Blog — PlanetScale
Blog — PlanetScale
B
Blog
A
About on SuperTechFans
大猫的无限游戏
大猫的无限游戏
爱范儿
爱范儿
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
H
Help Net Security
H
Hackread – Cybersecurity News, Data Breaches, AI and More
博客园 - 三生石上(FineUI控件)
有赞技术团队
有赞技术团队
酷 壳 – CoolShell
酷 壳 – CoolShell
WordPress大学
WordPress大学
IT之家
IT之家
D
Docker
Google DeepMind News
Google DeepMind News
罗磊的独立博客
T
The Blog of Author Tim Ferriss
aimingoo的专栏
aimingoo的专栏
博客园 - 叶小钗
Recent Announcements
Recent Announcements
阮一峰的网络日志
阮一峰的网络日志
D
DataBreaches.Net
博客园 - 司徒正美
Engineering at Meta
Engineering at Meta

Prompt 语宙

kimi-thinking-preview – 月之暗面推出的多模态思考模型 pdf-craft – 开源 PDF 转 Markdown 工具 UltraMem – 字节豆包大模型团队推出的全新超稀疏模型架构 EasyControl – Tiamat AI 联合上海科大等开源的图像生成控制框架 GaussianCity – 南洋理工大学 S-Lab 团队推出的 3D 城市生成框架 X-Prompt – 用于多模态视频目标分割的通用框架 豆包大模型1.5 – 字节跳动推出的最新版大模型 GaussianAnything – 南洋理工 S-Lab 和上海 AI Lab 等推出的 3D 生成框架 Cube 3D – Roblox 推出的 AI 3D 生成模型 OpenMath-Nemotron – 英伟达开源的数学推理系列模型 MAI Transcribe-1.5 – 微软 MAI 推出的语音转文本模型 Seed1.5-Embedding – 字节跳动 Seed 团队推出的向量模型 2026世界杯人机大战引爆!联想携手DeepSeek等顶尖AI大模型,对战亿万球迷预测冠军 高考公平守护战!豆包、文心等主流大模型集体禁用拍题功能 ShotAdapter – Adobe联合UIUC推出的多镜头视频生成框架 Devstral – Mistral AI联合All Hands AI开源的编程专用AI模型 MMaDA – 字节联合普林斯顿大学等推出的多模态扩散模型 Software Copyright Materials Skill – 开源软著资料生成Skill Dulus – 开源的 CLI AI Agent,可驱动多模型工具调用 Reasonix – 专为 DeepSeek 推出的开源终端编程 Agent Mega-ASR – NTU、NUS、上海AI Lab开源的语音识别模型 CodeGraph – 开源代码知识图谱工具,加速代码理解和分析 MiniCPM5-1B – 面壁智能联合清华开源的端侧文本基座模型 Horizon – 开源 AI 信息聚合系统,构建专属新闻雷达 BitCPM-CANN – 面壁智能联合清华开源的端侧大模型 Xiaomi Auto World Model – 小米推出的辅助驾驶世界模型 opera-browser-cli – Opera Neon 开源的命令行工具 omp – 开源的 AI 终端编程智能体,能与 IDE 深度联动 Claude Opus 4.8 – Anthropic 推出的旗舰级大语言模型 Hy-Memory – 腾讯混元推出的 Agent 记忆插件
谷歌重磅开源MedGemma 1.5:多模态AI医疗模型革新影像诊断与...
站外新闻 · 2026-06-14 · via Prompt 语宙

💡 站外导读:医疗AI正迎来从单模态到多模态的范式跃迁。面对海量、高维的医学影像与复杂文本数据,传统模型常感力不从心。谷歌此次开源的MedGemma 1.5,正是为解决这一核心痛点而生。它是一个集视觉与语言于一体的“超级医生助手”,能深度解读CT、MRI及病理切片等关键影像,同时理解病历与实验室报告,为精准诊断与高效临床决策提供了革命性工具,标志着医疗AI应用进入新阶段。

MedGemma 1.5 是谷歌开源的多模态AI医学模型,专为处理医学影像和文本数据设计。模型支持高维医学影像(如CT和MRI)、全切片病理影像、纵向影像分析、解剖定位、医学文档理解和电子健康记录(EHR)解读等功能。模型基于SigLIP图像编码器和强大的语言模型,使用多种医学数据进行预训练,包括影像、文本和实验室报告。MedGemma 1.5 在影像分类、视觉问答和医学知识推理等任务中表现出色,适用多种临床相关任务,可助力医学研究和临床实践。

  • MedGemma 1.5是什么
  • MedGemma 1.5的主要功能
  • MedGemma 1.5的技术原理
  • MedGemma 1.5的项目地址
  • MedGemma 1.5的应用场景
      • 📝 站长洞察 (Editor’s Insight)

MedGemma 1.5

MedGemma 1.5的主要功能

  • 高维医学影像解读:模型能处理和解读三维医学影像,如 CT 和 MRI,帮助分析复杂的体积数据。

  • 全切片病理影像分析:模型支持对全切片病理影像(WSI)的多区域同时解读,辅助病理诊断。

  • 纵向医学影像分析:模型支持对比当前影像与历史影像,例如分析胸部 X 光的长期变化。

  • 解剖定位:在胸部 X 光中通过边界框定位解剖结构和病变。

  • 医学文档理解:从非结构化的医学实验室报告中提取结构化数据,如数值和单位。

  • 电子健康记录(EHR)理解:解析基于文本的 EHR 数据,辅助医疗决策。

  • 医学文本和图像的多模态理解:结合文本和图像输入,生成相关的文本输出,例如回答医学问题或生成影像报告。

MedGemma 1.5的技术原理

  • 解码器-only Transformer 架构:用与 Gemma 3 相同的架构,支持长上下文(至少 128K tokens),适合处理复杂的多模态任务。

  • SigLIP 图像编码器:专门针对医学影像预训练的图像编码器,支持处理多种医学影像数据,如胸部 X 光、皮肤科影像、眼科影像和病理切片。

  • 多模态融合:结合文本和图像输入,通过统一的编码和解码流程,生成文本输出。这种融合方式使模型能同时处理医学文本和影像数据。

  • 指令调优:模型经过指令调优,能更好地理解和生成符合医疗领域需求的文本内容。

  • 预训练与微调:基于大量去标识化的医学数据进行预训练,通过微调适应特定的医疗任务,提升性能。

MedGemma 1.5的项目地址

  • 项目官网:https://developers.google.com/health-ai-developer-foundations/medgemma/model-card
  • HuggingFace模型库:https://huggingface.co/google/medgemma-1.5-4b-it

MedGemma 1.5的应用场景

  • 医学影像分析:MedGemma 1.5 能处理高维医学影像(如 CT 和 MRI),支持全切片病理影像分析、纵向影像对比以及解剖结构定位,辅助医生进行精准诊断。

  • 临床决策支持:模型通过分析患者主诉和病历数据,提供急诊分诊、术前评估和临床实践指南支持,帮助医生快速做出决策。

  • 电子病历管理:MedGemma 1.5 可从非结构化病历中提取关键信息,生成病历摘要,提升病历管理效率。

  • 医学问答系统:在医学问答基准测试中表现优异,能为医生和患者提供准确的医学建议。

  • 医学文档理解:将非结构化的医学实验室报告转化为结构化数据,便于进一步分析和应用。

📝 站长洞察 (Editor’s Insight)

谷歌推出MedGemma 1.5,并非简单发布一个模型,而是在布一个深远的局。这标志着大模型竞争正从“通用能力”卷入“垂直深度”,医疗作为高价值、高壁垒的赛道,其数据特殊性决定了专用多模态模型的绝对优势。开源此举,旨在快速构建开发者生态,将谷歌的AI基础设施嵌入全球医疗工作流。它揭示的趋势是:未来的医疗AI竞争,将是“数据飞轮”与“临床场景嵌入度”的比拼。谁能率先利用此类模型,在真实的诊疗闭环中获取反馈、迭代模型,谁就能定义下一代智能诊疗标准。这不仅是技术开源,更是一场抢占未来医疗AI生态制高点的战略行动。