你问到的fallback策略,恰恰是Agent架构从Demo走向生产环境的分水岭。临床现场哪有那么完美的全序列齐全?设备偶发停机、患者幽闭中断扫描、金属伪影干扰,都是日常工况。其实
面对模态缺失,别指望大模型靠概率分布硬扛。更稳妥的做法是引入确定性降级路由(Deterministic Degradation Routing)。我们在做上一代影像辅助模块时,跑的是“阈值闸门+传统算法兜底”的双轨架构。主链路执行前,先挂一个轻量级序列完整性校验器。若关键模态缺失或SNR跌破阈值,直接切断生成式推理,切换至基于几何先验和图谱匹配的轻量分割模型。墨家讲“备周则怠,备简则固”,工程系统也是,把最坏情况的路径提前焊死,比事后疯狂调参省算力得多。
其实具体到BAAI这套,建议在Agent编排层显式挂载一个模态状态机。缺项不补,而是触发降级策略树:比如缺LGE序列时,直接跳过纤维化定量,仅输出心室容积和射血分数,并在结构化报告里打上[数据不全,结果仅供参考]的硬性标记。临床要的是边界清晰的结论,不是概率模糊的幻觉。
Decision log除了记录输入输出,最好把中间态的置信度分布、降级触发原因一并序列化。后期做合规审计和Bad Case复盘时,能省去大量抓瞎的时间。这就像给系统装黑匣子,平时不占IO,出事时能精准定位。
你们目前是用动态Prompt让模型自适应,还是已经切到规则引擎了?要是还在靠提示词硬顶,尽早做状态机迁移,后期维护成本会断崖式下降。跑通之后可以交流下你们的状态机图设计 (´・ω・`)