タグ: 歌詞作成

Automatic Song Translation: 歌詞の自動翻訳

  • Automatic Song Translation for Tonal Languages [23.1]
    歌詞翻訳のための新しいベンチマークを開発し,事前学習と3つの復号制約を組み合わせた教師なしASTシステムであるガイド付きAliGnment for Automatic Song Translation (GagaST)を開発した。 自動評価と人的評価の両方で、GagaSTはセマンティクスと歌声のバランスをとることに成功した。
    論文  参考訳（メタデータ）  参考訳（全文）  (Fri, 25 Mar 2022 02:25:33 GMT)
    • 歌詞の翻訳は元の意味を保持することに加えて、既存の音楽の韻律に一致する必要があり難しい。音素だけでなく発音によって意味が異なる言語の場合は問題が大きい。著者らはこのタスクを定義、データセットを作成、モデル構築（翻訳モデル構築では外部データを活用）を行っている。下記サイトのデモが面白い（が中国語が分からないので、翻訳の有効性が確認できず残念）。
    • リポジトリはAutomatic Song Translation for Tonal Languages (with Demo) (gagast.github.io)

Youling: AIが支援する歌詞作成

  • Youling: an AI-Assisted Lyrics Creation System [72.0]
    本稿では,AIによる歌詞作成システムである Youling について紹介する。 歌詞生成プロセスでは、Youlingは従来の1パスのフルテキスト生成モードとインタラクティブな生成モードをサポートする。 システムは、ユーザーが望まない文や歌詞の言葉を繰り返し修正できるリビジョンモジュールも提供する。
    論文  参考訳（メタデータ）   (Tue, 18 Jan 2022 03:57:04 GMT)
    • GPT-2をベースとした歌詞作成支援システムの提案。30GBの中国語書籍コーパスで学習後、300Kの歌詞コーパスでfine tuningを実施したとのこと。
    • デモシステム利用する案内が論文中に存在（ID等を含むのでここには記載しなかった）