More than 5 years have passed since last update.

ToWhisper を使った"囁き声"の一括作成

Last updated at 2019-06-08Posted at 2019-06-04

1. 概要

近年、ニコニコ動画にて、ボイロ音声を"囁き声"化したのボイロ劇が多く見られます。
多くの場合、ボイロ音声の"囁き声"化には、音声をささやき声化するプログラム作ってみたで紹介されているソフトを利用しているようです。

しかし、"囁き声"化ソフト(toWhisper)を使用した場合、イヤフォンを使用しないと視聴出ないぐらいのボリュームになります。

このようにボリュームを抑える理由は下記の2つがあると思っています。

囁き声なので、演出的に小さい声にしている
ボリュームを大きくすると合成しているホワイトノイズ感が目立ってしまう

本記事では

スピーカー視聴できる程度のボリュームで、2 のようにノイズ感を提言する加工する方法
複数の音声ファイルに対して、上記のノイズ低減処理を、一括で処理する方法を紹介します。
の2つを紹介します

筆者はこの手法を用いて、"囁き声"をスピーカー視聴レベルまで、ボリュームアップさせることができました。
多少のノイズ感は残るものの、及第点レベルになっているかと思います。
自分が作成した動画ですが、具体例として視聴してください(ダイマ）！
ニコニコ動画 : 【姉妹百合】真摯な甘いささやき【ピロートーク】

2. 「ボリュームを大きくすると少し荒があるように聞こえる」ってどういうこと？

実際に音声を聞いてもらうとわかりやすいかと思います。
それぞれをクリックすると sound cloud で視聴できます。

a. オリジナル音声
琴葉姉妹のVoiceroidの出力のまま。
b. 囁き化ソフトで加工したのみ(オプションは "-l 0.14" のみ)
変換後はオリジナル音声よりも音が小さくなっているので、ノイズ感は気にならない。
しかし、イヤフォンを使わないと聞き取りが難しい。
c. 囁き化ソフトで加工したボイスのボリュームアップ(13db)
音質改良する前のボイス。少しノイズ感が気になる。
d. 音質改良化した cの音声(音質改良したボイス)
イコライザーで調整。多少のノイズ感は残るが、スピーカー視聴できるレベルにボリュームアップできた。

d はボリュームを上げても、ノイズ感が気にならない程度になったかと思います。
また、b の囁き化ソフトの出力音声に対しても、同様の処理をすることで、音質改善が望めます(b のボリュームだとほぼ気になりませんが)。

スクリプト
茜(01aka.wav) : なぁ、葵。一緒に寝るの久しぶりやな。
葵(02aoi.wav) : そうだねおねいちゃん。
茜(03aka.wav) : ちょっと恥ずかしいんやけど、おねいちゃん葵としたいな。
葵(04aoi.wav) : うん、恥ずかしいけどいいよ。
茜(05aka.wav) : ええんか？
葵(05aoi.wav) : いいけど、寝るまでしりとりするのは、子供っぽくて恥ずかしいよね。

3. 使用環境

OS : Windows 10 (toWhisperNet v1.1が Windows用)
囁き声化ソフト : toWhisper.Net版
音声加工ソフト : Audacity

補足
今回は一括処理しやすいコマンド版の "toWhisper.Net版"を使いましたが、使いやすいGUI版もあります。

toWhisper ソフト一覧

オリジナル: zeta氏 toWhisper (Twitter : https://twitter.com/zeta0313)
GUI版 : yamachu氏 toWhisperGUI
.Net版 : toWhisper .Net版

お試しリポジトリ

お試ししやすいようにお試し用リポジトリを用意しました。
コマンドのパスやファイルパスなどは、こちらのリポジトリで作業することを前提に記述しています。

本記事のお試しリポジトリ
https://github.com/YoshikazuOota/howto_whisper

リポジトリに内包しているtoWhisperNet は修正BSDライセンスの元、再配布をしております。(toWhisperNet の著作権表記ファイル)

4. 一つの音声に対してて音質改良化する

4.1 toWhisper.Netで声を"囁き化"する

オプションで下記２つを指定してコマンド実行します。

-l : lpf フィルター係数
-o : 出力先ファイル

"./toWhisper-master/ToWhisperNet1.1/ToWhisperNet.exe" ./voices/a_original/01aka.wav -l 0.14 -o ./voices/b_toWhisper/01aka.wav

これで、-o で指定したファイルに"囁き声化"したファイルが出力されます。

補足
ここでは声質変換オプションを -l しか使いませんでしたが、下記のヘルプのようにいろいろ係数はあります。
いくつかの係数を試行錯誤する場合は、GUI版をおすすめします。

The translating voice into whisper voice system
Version 0.91
Copyright (C) 2017 zeta

usage:
        toWhisperNet [options] [infile]
options:
        -o : output file name.       [N/A]     [wave file]
        -e : vowel sound file name.  [N/A]     [wave file]
        -l : lpf filter coefficient. [0.97]    [0.0, 1.0)
        -r : vowel sound rate.       [0.0]     [0.0, 1.0]
        -f : frame length(ms).       [20]
        -O : LPC order.              [auto]
        -h : print this sentence.
infile:
        wave file (MONO File only)

4.2 Audacity でボリュームアップ(13db)

次にAudacityを起動して、ボリュームアップします。
ボリュームはスピーカー視聴できるレベルの音量として、13db 増幅させました。
再生するとわかりますが、"囁き声"化する際の処理で、ホワイトノイズを合成しているためか、少しノイズ感があります。

4.3 イコライザーで音を整える。

ノイズ感を抑えるため、イコライザーでフィルターをかけて上げます。
私の場合は下図のように調整しました。（これが正解というわけではありません。好みで調整してください）
結果を聞いていただくと、ノイズ感が低減できているかと思います。

ゲインの調整は下記サイトを参考にしました
三兎様のブログより『EQの使い方』

補足
このイコライザー設定ファイルはリポジトリの whisper_eq_setting.XMLに、置いてあります。
この設定を使いたい場合は「管理」ボタンから、先述の XML ファイルを読み込むとご利用できます。

4.3 セクションのまとめ

toWhisper で処理した音声を、ノイズ感を減らしつつスピーカー視聴できるレベルに、ボリュームアップできた。
リポジトリに聴き比べ用の Audacity プロジェクトファイルも置いておきました。

5. 4を一括処理する

上記手順で"囁き声"化はできますが、複数ファイルがある場合は少し面倒です。
特に動画作りの作業は、ただでさえ煩雑なので、楽をしたいところです。
そこで、自分なりの一括処理の仕方を紹介します。

手順は下記の2ステップです。

(1) "囁き声"化はバッチ(.bat)で、一括変換する
(2) (1)の出力をAudacityのチェーン処理を使って、一括変換する

5.1 (1)のバッチの作り方

バッチファイルを作って、4.1 のコマンドを登録します。
一度作るまでが面倒ですが、声の再調整をしても簡単に"囁き声"化ができるので、後々とても楽になります。（もっといい書き方がありますが、わかりやすさ重視にしました）

サンプルバッチファイル

whisper.bat

"./toWhisper-master/ToWhisperNet1.1/ToWhisperNet.exe" ./voices/a_original/01aka.wav -l 0.14 -o ./voices/b_toWhisper/01aka.wav
"./toWhisper-master/ToWhisperNet1.1/ToWhisperNet.exe" ./voices/a_original/02aoi.wav -l 0.14 -o ./voices/b_toWhisper/02aoi.wav
"./toWhisper-master/ToWhisperNet1.1/ToWhisperNet.exe" ./voices/a_original/03aka.wav -l 0.14 -o ./voices/b_toWhisper/03aka.wav
"./toWhisper-master/ToWhisperNet1.1/ToWhisperNet.exe" ./voices/a_original/04aoi.wav -l 0.14 -o ./voices/b_toWhisper/04aoi.wav
"./toWhisper-master/ToWhisperNet1.1/ToWhisperNet.exe" ./voices/a_original/05aka.wav -l 0.14 -o ./voices/b_toWhisper/05aka.wav
"./toWhisper-master/ToWhisperNet1.1/ToWhisperNet.exe" ./voices/a_original/06aoi.wav -l 0.14 -o ./voices/b_toWhisper/06aoi.wav