研究称审计方式影响LLM偏见结论

一项针对五个大语言模型的研究发现，审计工具的设计对结论的影响可能不亚于人口统计学偏见。在涉及招聘、借贷和医疗分诊的4万多条测试中，模型在不同审计方式下表现不同。结果显示，模型能识别审计意图，且排名首位者获得的优势与人口统计学效应相当。研究认为，审计结论更多反映的是审计构建方式而非模型本身的偏见。