Social Bias or Social Desirability? Comparing Factorial Survey Experiments for Humans and Large Language Models
社会的バイアスか社会的望ましさか――人間とLLMの要因配置型調査実験の比較
国際リスク要約
要因配置型調査実験(factorial survey experiment)を用いて、英語とドイツ語の4種の実験により人間と11種の大規模言語モデル(LLM)の社会的バイアスを比較した研究である。LLMは人間のバイアスを部分的にしか再現せず、時には逆転させることが示され、両者が社会的に複雑な状況へ反応する仕組みの根本的な違いが示唆された。
リスクの側から考える
LLMのバイアス評価に人間の社会調査手法をそのまま適用しても人間との乖離が残るため、AIの公平性評価手法自体の見直しが迫られる。
記事に書かれた事実ではなく、読む人が考えるための問いかけです。キーワード
タイトル、要約、分類、波及は、原文のフィード情報をもとにAIが作成しました。全訳は掲載していません。正確な内容は原文でご確認ください。