Beyond APIs: Probing the Limits of MLLMs in Physical Tool Use
超越API:探索多模态大语言模型在物理工具使用中的极限
机构 * Singapore Management University(新加坡管理大学) ; The Hong Kong Polytechnic University(香港理工大学)
专题命中 其他VLM :multimodal large language model(abstract);分类 cs.CV、cs.AI
AI总结 提出PhysTool-Bench基准,评估多模态大语言模型在真实场景中识别物理工具并规划使用的能力,发现最强模型仅完成21%任务,揭示感知与规划双重缺陷。