Understanding the Capabilities and Limitations of Large Language Models for Cultural Commonsense
Understanding the Capabilities and Limitations of Large Language Models for Cultural Commonsense [98.1] 大規模言語モデル(LLM)は、かなりの常識的理解を示している。 本稿では,文化的コモンセンスタスクの文脈におけるいくつかの最先端LLMの能力と限界について検討する。 論文参考訳（メタデータ） (Tue, 07 May 2024 20:28:34 GMT)
国（本件検証対象は中国、インド、イラン、ケニア、米国）によって違う常識がLLMでどう対応されているか調査した論文。「Our findings indicate that LLMs tend to associate general commonsense with cultures that are well-represented in the training data, and that LLMs have uneven performance on cultural commonsense, where they underperform for lessrepresented cultures.」に違和感はない。使用言語でほぼ決まるかとおもったら影響はあるが決定的ではないのが若干意外。