Measuring Causal Effects of Data Statistics on Language Model’s `Factual’ Predictions Measuring Causal Effects of Data Statistics on Language Model’s `Factual’ Predictions [59.3]大量のトレーニングデータが、最先端のNLPモデルの高性能化の大きな理由の1つである。 トレーニングデータがどのように予測に影響を及ぼすかを記述するための言語を,因果的フレームワークを通じて提供する。 我々のフレームワークは、高価なモデルの再訓練の必要性を回避し、観測データのみに基づいて因果効果を推定することができる。論文 参考訳（メタデータ） (Thu, 28 Jul 2022 17:36:24 GMT)言語モデルにおいて[MASK]の中を共起関係（相関）で予測しているのか、意味的な背景があって予測しているのかは不明瞭である。因果推論のフレームワークで妥当に推測ができているの確認可能という報告。
因果性を用いた敵対的攻撃対策 Adversarial Robustness through the Lens of Causality [105.5]ディープニューラルネットワークの敵対的脆弱性は、機械学習において大きな注目を集めている。 我々は、因果関係を敵対的脆弱性の軽減に組み込むことを提案する。 我々の手法は、敵の脆弱性を緩和するために因果性を利用する最初の試みと見なすことができる。論文 参考訳（メタデータ） (Fri, 11 Jun 2021 06:55:02 GMT)因果グラフを敵対的攻撃の防御に用いるという報告。敵対的攻撃は自然なデータ分布に対する特定の介入とみなせる、というのはその通りでベンチマーク上も効果があるのが興味深い。