Hugging Face Blog·· 2024-07-25AI 评分45
LAVE：用 LLM 在 Docmatix 上做零样本 VQA 评测——还需要微调吗？
LAVE: Zero-shot VQA Evaluation on Docmatix with LLMs - Do We Still Need Fine-Tuning?
AI 导读
Hugging Face 用 LAVE（LLM-Assisted VQA Evaluation）指标对 Docmatix 约 200 张测试图做零样本评测，基线模型 MPLUGDocOwl1.5（在 DocVQA 测试子集上 ANLS 84%）的 LAVE 得分为 0.58，而 CIDER、BLEU、ANLS 分别只有 0.1411、0.0032、0.002。
来源：Hugging Face Blog · huggingface.co