複数のエンジンで音声合成できるようにする

[Hiroshiba]

内容

VOICEVOX製ではない、いわゆるサードパーティ製の音声合成エンジンを、VOICEVOX製のものとシームレスに利用できるようにしたいです。

VOICEVOXはエンジンや音声合成コアと疎結合になっているので、音声合成エンジンさえ変えればVOICEVOX製じゃないエンジンを挿せるはずです。
が、現状だとキャラクターイラストなども含めてビルドする必要などがあるため、エンジンごとにエディターを分ける必要があってしまいます。
これらの課題を解決すれば複数のエンジンに対応することができ、いろんなエンジンのいろんなキャラクターが利用可能になったり、自由にエンジンを作って付けたりできるようになるはずです。

Pros 良くなる点

エンジンの自由度が増える

Cons 悪くなる点

無いはず

実現方法

これらのissueを解決する必要がありそうです

• CharactorInfoが必要な情報（立ち絵など）をエンジンに実装する
  • https://github.com/Hiroshiba/voicevox_engine/issues/169
• CharactorInfoをエンジンから取って来るようにする
  • CharacterInfoをエンジンから取って来るようにする #433
• 複数のエンジンのキャラクターを利用可能にする
  • 別キャラクターのエンジンを用意する
  • エディタ側から複数のエンジンを見るようにする（.envのVUE_APP_ENGINE_URLを複数にする）
• 設定で複数のエンジンを登録可能にする
  • ポートが登録できる
  • VOICEVOX起動時に一緒に起動できる

VOICEVOXのバージョン

0.7.5

その他

0.9.0や0.10.0で追加したいマイルストーンです。

[shirowanisan]

問題なければ「CharacterInfoをエンジンから取って来るようにする」担当します。

[Hiroshiba]

@shirowanisan よろしくおねがいします！！ #433 でassignします！

[Hiroshiba]

@shirowanisan さん、実装ありがとうございます！！

次は 複数のエンジンのキャラクターを利用可能にする でしょうか。
これは、「別キャラクターのエンジンを用意する」というのと、「エディタ側から複数のエンジンを見るようにする（.envのVUE_APP_ENGINE_URLを複数にする）」の２つに分けられそうです。

@shirowanisan どうでしょう、前者の「別キャラクターのエンジンを用意する」をおまかせすることってできそうでしょうか・・・？
（将来的にCOEIROINKとVOICEVOXをつなげるときに必須の工程になるはずなので、であればデバッグ用に作成をお願いできないかなと思った次第です！）

[shirowanisan]

@Hiroshiba
マージありがとうございます。あまり慣れておらず時間がかかってしまいすみません。

どうでしょう、前者の「別キャラクターのエンジンを用意する」をおまかせすることってできそうでしょうか・・・？

了解です。どう実現するのか考えるため、別のissueを作って設計の相談させていただくかもしれません。

[aoirint]

エディタ側から複数のエンジンを見るようにするの方、取り組んでみても大丈夫でしょうか...?（簡単なデバッグはできそうだなと思いました）

[Hiroshiba]

パラレルに進められそうなので、良いと思います！
いろんな設計が考えられそう＆変更箇所が大きそうなので、一旦issue化して頂いて、調査したり議論したりしつつ進められると良い実装にたどり着きやすいかもと感じました。

[aoirint]

こちらの方でも議論がありましたね。

• マルチエンジン及びプラグインエンジンに関する議論 #431

いったんIssueを作ってみようと思います！

[Hiroshiba]

これがopenしたのが2021年の11月、懐かしいです。
こちらのissueに移動しています！

• エンジンのプラグイン化（複数のエンジンを同時に見れるようにする） voicevox_project#2

もう完了しているので閉じたいと思います。