LSR: Linguistic Safety Robustness Benchmark for Low-Resource West African Languages
LSR:低资源西非语言的语言安全鲁棒性基准
机构 * Fagmart Lab(法格马特实验室)
专题命中 代码评测 :repository(abstract);分类 cs.CL、cs.AI
AI总结 LSR是首个评估跨语言拒绝退化现象的基准,针对西非语言中的有害意图表达,发现模型拒绝率从英语的90%降至35-55%,其中Igala语言退化最严重。
Comments 6 pages. Reference implementation: https://huggingface.co/spaces/Faruna01/lsr-dashboard. Dataset: https://huggingface.co/datasets/Faruna01/lsr-benchmark