HarmVideoBench: Benchmarking Harmful Video Understanding in Large Multimodal Models
HarmVideoBench:大型多模态模型中有害视频理解的基准测试
机构 * Central South University(中南大学) ; Tsinghua University(清华大学) ; South China Normal University(华南师范大学) ; ByteDance Inc(字节跳动公司) ; University of Zaragoza(阿拉维达大学) ; CosmosMind ; Wuhan University(武汉大学) ; University of California, Los Angeles(加州大学洛杉矶分校) ; Southeast University(东南大学) ; Tencent(腾讯公司) ; Nankai University(南开大学) ; Supermicro Computer Inc(Supermicro计算机公司) ; Huazhong University of Science and Technology(华中科技大学)
AI总结 提出HarmVideoBench,一个包含1379个视频和4137道选择题的多层次诊断基准,从三个维度评估模型对有害视频的深层理解,并引入BCR方法将宏平均准确率从61.7%提升至84.4%。