LLM-Based World Models Can Make Decisions Solely, But Rigorous Evaluations are Needed
基于LLM的世界模型可以独立做出决策,但需要严谨的评估
机构 * The Hong Kong Polytechnic University(香港理工大学) ; Singapore Management University(新加坡国立大学)
专题命中 规划决策 :agent(abstract);planning(abstract);分类 cs.AI
AI总结 本文从决策视角出发,对基于LLM的世界模型进行综合评估,设计了政策验证、行动提案和政策规划三项任务,评估了GPT-4o和GPT-4o-mini在不同环境中的表现,发现LLM世界模型在长期决策任务中性能下降,且不同功能组合会引入额外的不稳定性。
Comments Accepted to TMLR