A Causality-aware Paradigm for Evaluating Creativity of Multimodal Large Language Models / Leap of Thought
A Causality-aware Paradigm for Evaluating Creativity of Multimodal Large Language Models [100.2] オオギリゲーム(オオギリゲーム)は、ユーモアと連想的思考を必要とする創造的な仕事である。 LoTbenchはインタラクティブで因果性を考慮した評価フレームワークである。 その結果、ほとんどのLLMは制約された創造性を示すが、LLMと人間の間の性能格差は克服できないことがわかった。 論文参考訳（メタデータ） (Sat, 25 Jan 2025 09:11:15 GMT)
LLMの創造性を測るベンチマークの提案、大喜利に注目しているのが興味深い（This paper investigates creativity in LLMs and provides an in-depth analysis of their Leap-of-Thought (LoT) abilities through the Oogiri game.）。