vla-eval: A Unified Evaluation Harness for Vision-Language-Action Models
vla-eval: 一种用于视觉-语言-动作模型的统一评估工具
机构 * Allen Institute for AI (AI2)(Allen人工智能研究所) ; Seoul National University(首尔国立大学)
专题命中 VLA模型 :VLA(title,title_cn);vision-language-action(title,abstract);action model(title);分类 cs.AI
AI总结 本文提出vla-eval,一种开源评估工具,通过WebSocket+msgpack协议和Docker环境隔离,实现模型推理与评估的解耦,支持14个模拟基准和6个模型服务器,提升评估效率达47倍。