- CREAK: A Dataset for Commonsense Reasoning over Entity Knowledge [32.6]
エンティティ知識に関するコモンセンス推論のためのテストベッドであるCREAKを紹介する。 私たちのデータセットは、真か偽かのエンティティに関する主張で構成されています。 クラウドワーカーはこれらのステートメントを簡単に見つけ出すことができ、データセット上での人間のパフォーマンスは高い。
論文 参考訳（メタデータ） (Fri, 3 Sep 2021 17:56:40 GMT)- Commonsense reasoning タスクのデータセット、データ数は約13Kで単文のクレームとその真偽（＋説明文）で構成される。文を「読解」しなくても解けるような特徴（アーティファクト）が無いか丁寧に確認されているなど品質の高いデータとの印象。
- ただ、CREAKが何の略か不明だった・・・
- WEBサイトはhttps://www.cs.utexas.edu/~yasumasa/creak/
- Commonsense reasoning タスクのデータセット、データ数は約13Kで単文のクレームとその真偽（＋説明文）で構成される。文を「読解」しなくても解けるような特徴（アーティファクト）が無いか丁寧に確認されているなど品質の高いデータとの印象。