タグ: 配信

この記事の概要を簡単まとめ！

• 配信には欠かせないツールを制作するNao氏
• 代表作のゆかコネ以外にも多数のツールを開発し、多方面で利用されている
• 配信中のコメントが母国語以外であると意思疎通に苦労する問題
• コメントを翻訳し、自分のコメントも翻訳して打ちこめるのがTwiChaDash
• 指定したユーザーのチャット欄について翻訳と翻訳後のコメント送信が行える
• 置き換えや読み上げにも対応しており、多数の連携機能も存在
• 配信を「見る側」がメインのツールであるが配信者でも使える
• 使用感：特に重く感じることはなく、邪魔にならない
• 海外配信を見るための強い味方、モデレーターにもおすすめ

私は過去、VTuberに対して否定的だった。それは今から19カ月程前、死のコロナウイルス情勢の拡大で従来型メディアの有名人が次々とYouTubeに参入した結果、YouTuberとVTuberは淘汰され、オワコンが加速するだろうと断言した記事だ。その時点の私は、反V主義でもあった。では19カ月後の今はどうかと言えば、VTuber全体、かつてない盛り上がりを見せている。さらに驚くべきは、clea氏の存在である。過去の私にclea氏と交流が深いと伝えれば、きっと心肺停止するくらいの衝撃になるはずだ。

配信においての面倒事は多い。配信準備、配信中の問題対応、コメントや治安、配信後の後処理。それらの面倒事を解決するために様々なツールが順次開発・更新されている。しかし配信は観てくれる人がいて初めて成り立つもの。そのためリスナーへの配慮も欠かせないが、リスナー補助を目的とするツールというのは、実際少ないものである。多くの人が使用しているものも、殆どが配信者の補助のためのものになっている。

配信における「母国語以外のコメント」というのは、突然来ると配信者はもちろんリスナーでも翻訳作業を挟む結果、対応が遅れるというのはよくあることだ。特にモデレーターを担当している場合、これは厄介なことでもある。配信において不審な行動をされれば即対応するのが理想だが、言語問題によって対応できなかったら、それはそれで問題である。そこでNao氏が制作したツールが、コメントを中心に翻訳を行うツール、TwiChaDashだ。名前からしてTwitch想定なそれは、果たしてリスナーにどんなプラス効果をもたらすのだろうか。実際に使用して、確かめることにした。

この記事の概要を簡単まとめ！

• 字幕のリアルタイム表示と翻訳で有名になりつつあるゆかりねっとコネクターNEO
• ゆかりねっとコネクターよりも利用者が増えたことで開発優先度が上がった
• 定期的に新しい機能が追加され更新されるので再度記事を書くことに
• 検証対象は開発版、安定性を保証しない分最速で最新機能が追加される
• ゆかコネ3周年イベントで先行公開された話者表示機能も最近の更新で追加
• わんコメコラボによりわんコメとの連携も可能になった
• 字幕表示レイアウトも複数追加され、見せ方も多彩に選べる
• 各種プラグイン、マニュアルはゆかNEOの取説ページに殆ど存在
• 情報は十分揃っている、今から使い始めても大丈夫だ

「何かを始めるのに遅いはない」、これはどこかの誰かが言った、割と多くの人が同意していることである。しかし始めるのが遅いと、どうしてもそのコンテンツに既に触れている人と比較して気後れをしてしまう人がいることは、十分あり得ることだ。これはどんなコンテンツでも起こることであり、特にゲームにおいてはそれが顕著である。インターネット接続を前提とするものは尚更であろう。

逆にツールについては遅くから始めると、今まで触れてこなかったことに後悔を覚えつつも、その便利さに愛用し続けるようになることも珍しくない。その1つにゆかりねっとコネクターがある。リアルタイムで翻訳を行い、字幕表示も同時に行えるNao氏が制作したコミュニケーションツールである。単純に翻訳と字幕表示を行うためのツールであったそれは、多彩なプラグインを搭載し他のソフトウェアとも連携が行えるようになった。そして軽量版となるゆかりねっとコネクターNEOが制作されると、「ほぼ同じことができる」ことによってメインの開発がこれに移行することとなった。

通常の仕事の合間に開発が進められる関係で常時更新とはならないが、ユーザーの要望を常に聞いては取り込むことを行っており、更新頻度はかなり早い。そのスピードはiOSのアップデート頻度より上だ。気付けば新しいバージョンが既にアップデートされていて、中身を色々変わってくる。その関係もあり、短い間隔ではあるが、再度ゆかNEOについて書くことにした。

この記事の概要を簡単まとめ！

• 以前に2部構成でゆかりねっと+ゆかりねっとコネクター記事を執筆
• 配信や動画制作で「字幕を使いたいが軽量化したい」と考える人もいる
• 設定項目を極力絞り応答性向上を目指したのが「ゆかりねっとコネクターNEO」
• ゆかりねっとコネクターから「字幕表示に必要な部分」を抜き出した形
• 字幕の細かい設定についてもなるべく簡単にできるようになっている
• 各種連携プラグインが実装されており、制作者のnao氏が要望に応じて随時更新している
• ゆかりねっとコネクターより低負荷であり、実はゆかりねっとコネクターとの差が埋まりつつある
• 余談：ゆかりねっとコネクター多言語字幕アンバサダーclea氏もここで軽く紹介
• 字幕を簡単に使えるようになれば、言語の壁をクリアできるようになる

法人向けのPCは、発表当時には一般ユーザーが買えないものであるが、不思議なことに1年くらい経過すると中古市場に流れ始めて、発表当時よりも圧倒的に安くなり、スペックも現行のものより少し低い程度で十分に使えるものが多い。不思議なことに私は運がいいのか、競合が少ないためにオークション形式のものを安値で競り落としたり、少しの傷や問題によって「ジャンク」扱いされているために安くされている所を真っ先に見つけては購入し、実際に試している。先日公開した記事であるVKT12/SG-5も、早速使いこなしている。

さて、ここしばらくは本業が忙しいために配信そのものはできるタイミングが少なく、それに関する記事も書くことが難しかった私であるが、前に執筆したゆかりねっとコネクターを使用した2つの記事は度々閲覧されているものとなっている。またこの記事、実は書いてしばらくしてからゆかりねっとコネクター制作者のNao氏から反応があり、加えてゆかりねっとコネクター公式アンバサダーとして活動しているclea氏と相互フォローとなった。このことから、字幕に関する関心は一定数存在していると分かる。

ゆかりねっとコネクターは字幕表示以外にも様々なソフトウェアと連携可能なものであるが、プラグインが多数搭載されている関係からPC自体の動作が重くなることも少なくない。そこでNao氏から字幕表示に特化し、軽量化を行った「ゆかりねっとコネクターNEO」が公開されている。字幕表示に限定して調整されている結果、応答性が高いものとなっているこれ。ゆかりねっとコネクターとはどう違うのかについても見ていくこととする。

この記事の概要を簡単まとめ！

• 前回記事でゆかりねっと+ゆかりねっとコネクターで字幕表示を行った
• その2つだけでも十分だが翻訳精度は期待できない
• ゆかりねっとコネクターは他のアプリとも接続可能である
• 音声を認識し文字変換と翻訳を同時に行うUDトークとも接続できる
• UDトーク側で喋り、ゆかりねっとコネクターに結果を送信する形式
• 必要なのはスマートフォン1台、あるいはスマホエミュレータ
• 翻訳精度については問題なし、しかしそれは取り込めない模様
• UDトーク側の設定で特定の単語を容易に変換登録できる
• 無料版は継続して喋れるのは30分、だが接続し直せば問題なし
• 字幕精度の高いUDトーク、誤認識を少なくしたいならこれ

どの世界も奥の深いものである。入りのきっかけは何でもよく、それこそちょっと気になったレベルのものでもOKなわけで、そこから新しい世界が始まる。その反面、一度沼にはまってしまえばそれはもう無限に沈んでいくだけである。記事のネタにするためだけだったのに、いつしか何かに憑りつかれたように熱心に調べるようになって、人並みに使えているということがあるためだ。不思議なものである。

ところで前回はゆかりねっと+ゆかりねっとコネクターで字幕と翻訳をする方法について、設定とその手順、そして配信に反映するまでを書いた。この2つのアプリケーションはよくできており、設定が正しくできていれば配信で使うことができる。コンデンサマイクと発音の良さがあれば、日本語字幕は綺麗に出すことができる。しかし翻訳は無料ユーザーには残念ながら使用できるAPIに制限があるせいで、翻訳精度は低いものになり使えたものではない。

しかし無料でもその問題を解決する方法がある。それが音声認識によって文字化を行い、同時に割と高精度な翻訳も可能なiOS/Androidアプリ「UDトーク」を利用した、ゆかりねっとコネクターによる字幕+翻訳出力である。UDトーク自体はある制約さえ目をつぶれば無料で利用でき、前回記事の方法よりも翻訳精度の高さもあって使いやすいものとなる、はずだった。字幕は満足だったが翻訳精度には満足できなかった私がとる2つ目の手段となるUDトーク+ゆかりねっとコネクター。ここにもまた、その奮闘記を書き、備忘録と他の人への参考資料とすることにしたのである。

この記事の概要を簡単まとめ！

• 回線弱者KIBEKIN、稀に1Mbpsも出ない状況下で配信する
• 音声を「出しにくい人」は音声を字幕にするという方法
• 字幕に変換するアプリケーションに「ゆかりねっと」がある
• ゆかりねっととは別に様々なサービスと連携するゆかりねっとコネクターがある
• 字幕と翻訳を同時に試すため、KIBEKINが実際に設定してみる
• インストールは簡単、しかしセットアップが難しい
• 字幕の調整をゆかりねっとコネクター側で細かく調整していく
• 実はゆかりねっとコネクターだけでも事足りる
• ゆかりねっととの併用はVOICEROIDを使う場合など
• UDトークと合わせて使う方法は次回記事で

回線弱者、それはインターネットにおける人権なしと同義である。配信という「趣味」であり「収益手段」でもあるこれを満足に行うには光回線が前提条件になるが、そうも言っていられないのが現実。しかし残念なことに殆どのルーターは上り速度を全く考慮していないものが多く、重要なのはそこじゃない！と何度もツッコミを入れたくなるほどだ。だが私は以前から言っている通り、金がない上に人脈も人望も人権もない嫌われ者。誰も助けてなどくれないから、与えられた環境でただひたすらにもがくしかないのだ。

そんな私は下心を隠さずに言えば金目的でやっているのだが、その道のりは嫌われ者である私にはとてつもない壁でしかない。最近はプライバシー保護のために声はなるべく出さないことにしているが、しかし無音というのは残念ながら誰も見ない条件に合致するものだ。ではどうするかといえば、声を読み取ってそれを変換し、字幕にすればいいのだ。

音声に合わせて字幕を生成し、それを画面に反映するというのは昔はできなかったことで、技術的に割と進んだ今だからこそできることである。とはいえ音声認識自体はいくら進化しても「個人差」までは完全に反映できないため、喋り方に癖があれば正しく認識してくれないのが玉に瑕というもの。しかしあるとないでは配信の見え方も大きく変わってくるというものである。今回はシェアウェアとなる音声認識アプリケーション「ゆかりねっと」と外部ツールの接続を可能にする「ゆかりねっとコネクター」。これ2つによって字幕を出す方法を探し実際に試したのである。その奮闘記をここに書き、備忘録と他の人への参考資料とすることにしたのである。