【安定して使いたい】ボイスチェンジャー最適解探し:無料プラグインとソフトウェアで

この記事の概要を簡単まとめ!

  • VTuberの中でも多数派な「ボイスチェンジャー」型
  • 現在は有料・無料問わず多くのものが存在する
  • 無料で有名な「恋声」は致命的不具合を持ち、代替案を探す必要がある
  • DAWとVSTプラグインで安定するという情報を聞き、検証することに
  • VSTプラグインにはRovee, Graillon 2, DAWにはCakewalkを使用する
  • 初期設定と登録が面倒であるが、それをこなせば問題ない
  • VCn以外を目的としたプラグインも簡単に導入できる
  • FFT(高速フーリエ変換)が使えるVSTでマイクノイズの除去も簡単
  • DAW1つで殆どのことができ、負荷もかなり軽い
  • VCnで困っている人、色々したい人の最適解は”DAW+VST“だった

声は、人の第二印象であると考えている。第一印象は外見で、これは言うまでもない。その次に五感で捉えることになるのが音だ。それも、能動的に発生させやすい声である。同時に声はその人のイメージの殆どを決める要素にもなり得る。それ故に多くの人が「第一声」を気にするのであろう、最初にかける言葉は大半が決まった挨拶である。それはそうで、いきなり自分のことを語りだしたとしたらそれは単に危ない人である。

VTuberもこれは同じだ。第一印象はモデル、第二印象はその声であることは簡単に想像がつく。しかし違いがあるとすれば、配信ないし動画投稿をメインとするそれは殆どの場合で「相手の顔が見えない」ことで、さらに不特定多数に見られる構図となる。一応コメントなどの機能があるのでリスナーからの反応を貰えるが、それでも顔は見えないので感情や考えは読み取れないものとなる。

ところでVTuberのモデルは理論上なんでもOKで、その際に考えるのが声である。自身とモデルの性別が一致する場合はそのままでいいとして、異性となる場合や人ではないものになる場合、声を変えて運用することも考えなければならない。その時に登場するのがボイスチェンジャー、私はVCnと呼んでいる。これまで無料である恋声を検証で使用してきたが、バッファが溜まるとフリーズする致命的欠陥を前に、新たな策を探すことになった。そしてある情報から最適解と思われるものに辿り着いた。今回はその検証となる。

【お手軽3D配信】”VRoom”使ってみた!~VTuberの強い味方~

この記事の概要を簡単まとめ!

  • 3DやVR空間を生かした配信ができるのはVTuberの特権
  • VTuberでもVRデバイスを使わない通常配信も行う
  • VR空間を手軽に再現できるなら見せ方も大きく変わるはず
  • それを叶える新アプリが御嬢沙真夜の個人開発・β版提供中の”VRoom
  • VSeeFaceと連携しており、初期設定に手を加えるだけで簡単に連携できる
  • Ver0.9.5では6種類の部屋が実装されている
  • サブメニュー、キーボードとマウスを駆使して自分好みに構築する
  • ファンクションキーにエフェクトが割り当てられ、演出ができる
  • ちょっと3Dで見せたい時、VRoomの出番だ

ゲーミングラップトップに対する各個人の考え方を、その手の人で集まって話し合いをしたいという気分である。そこには純粋なゲーマー、VTuber、玄人志向ならぬ中古志向といった、様々な考えのもとで使う人を集め、それらとゲーミングラップトップについてどう考えているか、どう使っているかということを話す。そこには新しい発見と、既存の考えの間違いを見つけることができるかもしれないからである。と言ったところで、私には企画力はない。

VTuberの3Dモデルという特性を生かした配信は、たまに行われる。その場合は一般にVRデバイスを用いて、VR「向け」にも展開されているSNSのようなアプリで、現実のYouTuberがやるような配信を行う。例を挙げるとVirtualCastがそれである。これを使って配信を行えば、まさに「VTuberらしい」ができるのである。ただこの場合、単純な雑談などの使用が多く、ゲームでは使用することは少ない。

よって普段のゲームや歌の配信では、3Dモデルを端に配置するか、それ向けの部屋っぽい画面構成を作ることであろう。ただその場合はどうしても平面的なものになってしまう。そんな見せ方の悩みを解決するアプリが、個人の開発で登場した。御嬢沙真夜、おそらく開発者自身もVTuberであろう人が”VRoom”を作り、β版として配布されている。これは卯塚ウウ氏が使用しているが、それでも周りではまだ使用している人は少なく、結果、検証量も資料も少ない状況。よって私が実際にこれを使用して、果たしてどんなことができ、どのような使い方をするといいのかを見ていく。

【手もトラッキングしよう】”VSeeFace”使ってみた!~Leap Motion編~

この記事の概要を簡単まとめ!

  • 前回はVSeeFaceのセットアップ作業を解説した
  • VSeeFace自体は頭の動きと表情のみをトラッキングする
  • 手もトラッキングする場合はLeap Motionが必要
  • 中古ながら状態の良いものが偶然にも入手できたので検証する
  • 前提として現サービス提供元のUltraleapへの登録が必須
  • デバイスを認識するためにGenimiのインストールを先に行う
  • Ultraleap Trackingを起動しておけばVSeeFace側でONにするだけで認識する
  • 正しいトラッキングのために、置く場所によって細かく調整する必要がある
  • 結論:トラッキング精度は多くにとって十分と言える

中古市場と日本やアメリカなどでは絶対に見れない、中国製のぶっ飛んだ製品を探すのが好きである。この2つの共通事項は「ギャンブル要素を大きく含む」ということ。はずれを引いたときには台バン不可避だが、あたりを引いたときは嬉しいもの。特に中国は普通では考えないものを作り出すことが得意で、ニッチな需要を満たすこともできる存在である。それを考えると愛国者様が「チャイナフリー」と思考停止に叫んでいることに疑問符しか出ない。中国製品に大いに依存しているのに叫ぶ姿は、現実を直視できない惨めな人間だ。

さて、PCを操作する時はキーボードとマウスが絶対必要なのは言うまでもないことである。CUIのみの昔はキーボードしかないが、今はマウスがほぼ絶対的主権を持っている。というのも、OSがソフトウェアキーボードを用意していることが多く、マウス1つさえあればキーボード入力もできてしまうためだ。ある意味PC初心者にはありがたい話ではある。

それよりもっと進んだ話が、マウスを使わず手で直接操作するということ。このとき、キーボードもタッチパネルも使わない。そんなSFのようなことができるわけがない、そう思うのは既に昔の話になっていた。旧Leap Motion社(米)、現Ultraleap社(英)が開発した非接触型ハンドトラッキングセンサ”Leap Motion”が2012年に登場した。元々は業務用、法人向けに開発されたデバイスで、Amazonでの一般販売は2013年12月16日から開始されている。これがVSeeFaceにも対応しており、これを組み合わせることで手も「再現」できる。これを偶然にも中古で入手したため、再度VSeeFaceを試すことにした。

【VRのおともに】ゆかりねっとコネクターNEOを使いこなす~VR編~

この記事の概要を簡単まとめ!

  • 配信必須ツールの定番、翻訳字幕のゆかNEOとコメント関係のわんコメ
  • 通常は配信で使用するものであり、現在はかなりの利用者と資料がある
  • ゆかNEOはVRでの使用をサポートしている
  • 使用者は存在するが明確な資料は少ないため書くことに
  • 現時点で確認できる対応先はSteamVR, VRChat, VirtualCast
  • 前提として同一のPC上にゆかNEO・わんコメと対応するソフトが存在することが条件
  • 基本となるVRオーバーレイは字幕以外のものも出すことができる
  • VirtualCastはTSOで提供中のVCIを利用して表示できる(はずだった)
  • VRChatはOSCを支援するだけのもので、字幕表示機能ではない
  • 結論:ゆかNEOには土台がある、それを生かせばVRでも使える

VR方面の発展は、他の技術と比べるとどうしても遅いと感じる。これは大手のVRへの参入が少ないせいだろう。特に国内のVR参入について積極的な企業がどうしても少ないように感じており、そのせいもあってまだプラットフォームやデバイスといったものが不十分かつ未発達のようにも思える。特にVRデバイスは、安さの殿堂でもあったMeta Quest2が値上げされ、結局カテゴリー全体で高級デバイスに逆戻りであり、VRの発展が一時的に停滞しかねない事態が発生した。全世界に衝撃が走ったのは、言うまでもない。

VRコンテンツの代名詞とも言えるVR-SNSだが、最前線にあるVRChatは制作・運営の中心はアメリカにある故、言語の壁が大きく立ちはだかる。普段ならDeepLだったりの翻訳ツールなどを使えば簡単に意思疎通が可能だが、VRはその特性上、従来の方法を利用できない。配信でもないのでゆかNEOの翻訳と字幕を利用することも難しいというのがこれまでのVR特有の問題であった。

それでも開発者のNao氏は諦めなかった。ゆかNEOを改良し、いくつかのVRプラットフォームについてはそのプラットフォームで追加の設定や準備を行うことで、配信で使うような字幕と翻訳を出すことを可能にした。一部はゆかNEO以外のものもVR上に映し出すことができるようになっている。字幕はもとより翻訳もVR上で出せるようになれば、VRでも言語の壁を越えることと聴覚障害サポートに繋がり、活動の幅も広がるはず。よって今回はVR検証を行っていく。

【AIの力を借りてトラッキング】”RiBLA Broadcast”使ってみた!

この記事の概要を簡単まとめ!

  • モデルのトラッキングの際に起きる、機材問題
  • Leap Motionは簡単には手に入らないのでカメラだけでやるしかない
  • エイベックス・テクノロジーズが提案したのは”AI”による補正
  • 使用するのは現在β版として無料配布中の最新ツール”RiBLA Broadcast
  • 対応するモデル形式はVRM、必要な物はWebカメラ1台
  • 設定項目も割と多く存在し、細かく決めることもできる
  • 要求されるスペックはかなり高い、低スペックPCではまず無理
  • 動きが自分に対するミラーなのはいただけない
  • 現時点でβ版のため、これからの改善に期待する

VTuberを観るだけだった私は、VTuberとVRに関連するソフトウェア・ツールについて調べているうちに1つの結論に達した。自分が実際にVTuberになって使わなければ、そのソフトウェア・ツールの解説は不十分だと言わざるを得ない。そうして今はVTuberとして活動するための準備をしつつ、これから絶対使うであろうものについても調査をしつつ、万全を期した状態で臨めるよう調整中である。

モデルを動かすためのソフトウェアについては、フリーソフトで高機能、周辺機器と外部ソフトウェアとの連携が可能である、VSeeFaceについて取り上げた。Webカメラ1つあればかなり高いトラッキング精度で顔をしっかり再現してくれるもので、原則として高性能なPCでなければできなかったそれも、低スペック向けの設定を用意していてそのPCでも使用できる。とはいえOBSでのエンコードを前提として、配信必須ツールを同時に使用しているのであれば要求リソースは高いものを要求されるので、8570wで全てをこなすなど以ての外であった。

もう1つの問題点としては、手や腕の動きを再現するのにLeap Motionが別途必要であること。しかし現状は「高い物」になってしまったそれを入手することは難しい。よって手や腕のトラッキングは無理かと諦めていた時に見つけたのが、エイベックス・テクノロジーズが開発し、現在β版として提供している”RiBLA Broadcast”だった。AIを駆使して手や腕の動き、表情を推定・認識して反映するというもの。あらゆるものにAIが組み込まれる時代にこれは最適解となるか、実際に使用して確かめることにした。

【フリーかつ高機能】”VSeeFace”使ってみた!~セットアップ編~

この記事の概要を簡単まとめ!

  • VTuberに必要な物は多い、揃えるには金がかかる
  • リアルに見せるには現実とのリンクを行う必要がある
  • Webカメラは前提、ソフトウェアは様々あり有料も存在する
  • フリーソフトでありながら高機能なソフトウェア”VSeeFace”を試すことに
  • Webカメラが1つあれば、顔のトラッキングは完璧に行ってくれる
  • 設定を最適化すれば低スペックでもそれなりに動かせる
  • 外部周辺機器とソフトウェアに対応する
  • 慣れてきたら腕・手・全身トラッキングも可能になる
  • 難点:VSeeFace自体を閉じないと止められない
  • これ1つでVTuberの基本は達成できる

ある物事を理解するには、その物事に何らかの形で関わることが最適解である。そう感じている私は、VTuber・VR関連の調査のために自分自身がVTuberに近いことを行い、それによって得られた情報をここにまとめている。この手の物はそれをやっている人から話を聞いてそれをまとめるということをしてもいいとは思うが、しかし実際にやらなければわからないことも多いわけで、正確な情報のためには自分自身でやることは大事である。

今回取り上げるものその1つとなる。VTuberの3Dモデルを動かす際に必要なことといえば、現実との動きをリンクさせ、それを表示するソフトウェアだ。これがなければ、リアリティを出すことは難しい。昔は限定的にしかなかったそのソフトウェアも、有料・無料問わず様々なものが作られては市場に流れている。誰がどれを使っているかについては、把握はほぼ不可能だ。

そのソフトウェアの1つとして、かなり高い評価を得ているものがある。それが”VSeeFace”である。これはフリーのソフトウェアとなるが、その完成度は有料のソフトウェア並で、これ単体でかなりトラッキングするようで、細かい部分のトラッキングに関しては必要な機材を入手すれば、殆どが対応しているのですぐにでもトラッキングの設定やテストができるというものになっている。私の周りでは卯塚ウウ氏が使用中であり、さらにこのソフトウェア自体が他のVTuber関連ソフトウェアの解説の基盤にもなる。まずはVseeFaceが一体どのようなものなのか。これをしっかり見ていくこととする。

【スタイル共有】ゆかNEO×わんコメ指南書:字幕表示をテンプレートでカスタマイズ

この記事の概要を簡単まとめ!

  • 字幕と翻訳のゆかNEOとコメントツールのわんコメ
  • 双方での連携が強化され、連携に至る設定機能も簡易化が目指されている
  • 連携することで使える特別な機能が存在する
  • 連携による目玉機能がわんコメテンプレートをゆかNEOで使用できること
  • 以前はテンプレートを正式にサポートしていないため使用が難しかった
  • バージョン更新によってテンプレートを簡単にゆかNEOに導入可能になった
  • テンプレートを使用した場合は認識結果が残るタイプとなる
  • Wordpartyも連携することでゆかNEOの音声認識経由で動作させられる
  • 編集はわんコメから行うが、直接参照のためリロードだけで反映
  • 折角連携するのなら、機能を知ってフル活用していく

あるソフトウェアないしツールがある。それは決してメジャーではないが、必要とする人にとっては重宝されるもので、更新があれば必ず更新を行って最新版にして使用することが多いものである。だが更新情報を見て、今まで存在していた便利機能が削除されてしまうが、最新版にしなければ使えないと分かっているとき。人は「進化」を止めてしまうのだろうか。或いは妥協や代替案で乗り切るのか。このあたりは実に悩ましいところである。

気になったので書いてみたら意外に反響が多いシリーズが、配信者向けの補助ツール解説である。メインで書いているのはゆかコネ/ゆかNEOとわんコメで、それに関連するツール、さらにはVTuberがよく使うであろうツールについても解説をするようになった。また、ゆかNEOとわんコメについては、ゆかコネ公式ガイドclea氏とアンバサダーの卯塚ウウ(うーちゃん, わんコメアンバサダー兼任)から情報を貰って調査に役立てている。特にうーちゃんは最新の情報をよく収集しているため、そこから最新情報を知ることができる。

そこから得たゆかNEOとわんコメの最新情報で、最新版において連携機能がさらに強化された結果、わんコメのテンプレートをゆかNEOで利用しやすくなったのである。それまで非公式ながらサポートしていた機能であるが、どうしても設定と導入が面倒であった。その苦労を一気に解消し、より使いやすく、わかりやすくなったゆかNEOとわんコメ。でも一体何がどうなっているかがよくわからないという人も多いはずなので、記事ベース解説によって、これを読んだらもう使えるようになっている、を目指すのが今回の趣旨である。