孟加拉法律土地记录基准KhatianDoc评估多模态LLM

该研究推出KhatianDoc基准，用于评估多模态大语言模型在处理孟加拉法律土地记录中的表现。这些记录使用独特的十六进制分数系统和专用Unicode字形，现有OCR和分词器无法处理。基准旨在诊断模型在此类低资源场景下的失败模式。

AI推荐理由 该基准暴露了多模态大语言模型在处理特殊低资源文档（如孟加拉法律土地记录）时的系统性缺陷，提示从业者在评估模型能力时需引入领域特定测试，避免因常规基准表现良好而高估模型在专业场景中的实用性。