Multilingual Instruction Tuning With Just a Pinch of Multilinguality
Multilingual Instruction Tuning With Just a Pinch of Multilinguality [33.2] 多くの言語が単言語チューニングから命令追従機能を他の言語に移行していることを示す。 複数の言語において、多言語混合に調整されたモデルが同等または優れた性能を示すことが観察された。 この結果から,多言語命令調整モデルの構築は,ごく少数の多言語命令応答で行うことが可能であることが示唆された。 論文参考訳（メタデータ） (Wed, 3 Jan 2024 17:48:10 GMT)
LLMにおける多言語対応に関する報告。LLM以前のマルチリンガルなPLMでも同様の指摘はあったが「Our results suggest that building massively multilingual instruction-tuned models can be done with only a very small set of multilingual instructionresponses.」は重要な特性だと思う。