- CoIN: A Benchmark of Continual Instruction tuNing for Multimodel Large Language Model [128.5]
逐次的命令チューニングパラダイムにおける既存のMLLMを評価するためのベンチマークであるContinuous Instruction tuNing(CoIN)を提案する。 CoINの実験では、現在の強力なMLLMが依然として破滅的な忘れを被っていることが示されている。 従来の命令アライメントを維持するのに有効なMLLMにMoELoRAを導入する。
論文 参考訳(メタデータ) (Wed, 13 Mar 2024 08:54:31 GMT) - マルチモーダルな大規模言語モデルに対する継続的な命令チューニングのベンチマークデータ
- リポジトリはzackschen/CoIN: Instruction Tuning in Continual Learning paradigm (github.com)