新方法提升金融文档直通处理可靠性

论文AI 评分 65/100arXiv cs.AI
AI 聚合

本条为 AI 依据下方公开信源自动整理生成的摘要,不构成转载,可能存在偏差,请以原文为准。整理者:贝果科技 AI 资讯助手。

针对金融文档自动处理中视觉语言模型置信度不可靠的问题,研究提出一种包含感知、布局和验证三个通道的分解置信度层。该方法结合保形风险控制,在两个模型家族上的测试显示,能将区分正确与错误提取的 AUROC 从 0.54-0.74 提升至 0.90-0.99。在目标误差低于 10% 的风险控制下,该方法可自动批准 49-72% 的字段,而原生模型信号仅能批准 0.1%-7.0%。

全文梳理

AI 摘要依据下方信源原文自动整理,非原文转载

拆成三条可解释通道

这篇论文关注的是金融单据关键字段的直通处理,也就是在没有人复核的情况下让系统自动放行。作者指出,现代视觉语言模型可以直接完成关键字段抽取,但它们口头给出的置信度信号并不可靠,与字段是否正确的关联很弱。为此,论文提出把置信度拆成三个可解释的通道:感知、版面与校验,再叠加一层保形风险控制,使最终得分能够支撑可靠的直通处理。三个通道各自对应抽取过程中的不同环节,合起来构成一个可分解的置信度层,而不是依赖模型自报的单一分数。

两个模型族与三类数据

验证工作在三个公开数据集上展开,覆盖真实发票、合成发票以及广告投放表单。使用的视觉语言模型来自两个不同的模型族,分别是 Qwen3.6-27B 与 Gemini-3.1-Flash-Lite。论文报告,分解后的得分在区分正确与错误抽取方面表现稳定,AUROC 从视觉语言模型口头信号的 0.54 至 0.74 提升到 0.90 至 0.99,且三个设计通道都有贡献。这一区间的两端分别对应不同数据集与模型组合下的结果,说明提升并非只在单一设置下出现。

风险控制下的放行比例

对工业部署更关键的是可用的直通处理能力。论文给出的对比是:在目标错误率低于百分之十的风险控制下,视觉语言模型原生的置信度信号只能放行极少比例的字段,区间为 0.1% 至 7.0%;而所提方法在把被接受层的经验错误率控制在目标值以内的同时,自动批准了 49 至 72 的字段比例。原文此处以百分号表述该区间,即自动放行的字段占比落在这一范围内。两个数字的差距说明,决定直通处理能否落地的不是抽取本身,而是置信度是否经过校准、是否带有对残余误差的有界保证。

适用范围与边界

论文设定的前提是抽取出的关键字段在无人复核下直接进入后续流程,因此需要同时具备校准后的概率和对自动批准层残余误差的有界保证,二者缺一不可。方法本身由三个通道加最终保形风险控制组成,验证限于三个公开数据集与两个视觉语言模型族,覆盖真实发票、合成发票和广告投放表单三类单据。对读者的含义是:视觉语言模型的自报置信度不足以直接作为放行依据,需要额外的置信度层与风险控制机制,才能在给定错误率目标下把自动放行的字段比例提到可用水平。

为什么值得看

大幅提升金融文档自动化处理比例,降低人工复核成本。

GeminiQwen

信源1 家

  1. [1]arXiv cs.AI一手信源Perception, Layout, and Validation: Calibrated Confidence for Reliable Straight-Through Processing of Financial Documents

关键事实

  • 提出包含感知、布局和验证三个通道的分解置信度层。[1]

  • 在 Qwen3.6-27B 和 Gemini-3.1-Flash-Lite 上验证了方法。[1]

  • AUROC 从 0.54-0.74 提升至 0.90-0.99。[1]

  • 目标误差 <10% 时,自动批准率从 0.1%-7.0% 提升至 49-72%。[1]

相关 · 论文

本页内容由 AI 自动聚合公开信源生成,仅供了解行业动态参考,不构成任何投资或决策建议。如需引用请以原文出处为准。