Dwango Media Village

Dwango Media Villageは、ドワンゴの機械学習や画像処理・CGの研究とその応用を行なっているチームです。 Dwango Media Villageにて行われている様々な研究を紹介していきます。
お問い合わせなどはDMにてどうぞ。

[Dwango Media Village @Dwango_DMV]

Dwango Media Villageで開発した声変換エンジン「Seiren Voice」を利用した製品が発売されることになりました!
Seiren Voiceにより、コンテンツ制作における表現の幅が広がることを期待しています。

[Seiren Voice @ AIボイスチェンジャー @seiren_voice_25]

高品質な声変換ソフトウェア「SeirenVoice 結月ゆかり」「SeirenVoice 琴葉茜・葵」の発売を発表しました！
https://t.co/fHf66gJDda
誰でもあの人気キャラクターの声になれます。
2022年4月下旬発売を予定しています。
#SeirenVoice

[Dwango Media Village @Dwango_DMV]

先日、東京で行われた第13回コミック工学研究会でLLMを用いた漫画理解システムMangaLensと、SAM3を用いたコマ・吹き出しの領域検出と読み順推定について発表しました。当日の様子と発表スライドを公開しています。
https://t.co/npwbWSxq5g

[Dwango Media Village @Dwango_DMV]

先日大阪で行われたコミック工学シンポジウム2025でDMVの佐々木と兵田が、マルチモーダルLLMを用いた漫画理解データ基盤「MangaLens」と、漫画広告動画作成ソフトウェア「OZManga」について発表しました。当日の様子と発表スライドを公開しています。
https://t.co/KrdMdrEM8A

[Dwango Media Village @Dwango_DMV]

ニューラルボコーダーの追実装はこちら　https://t.co/NoFZDaRyYM

[Dwango Media Village @Dwango_DMV]

DMVのインターン体験記事を公開しました。ドワンゴが提供する生放送配信ソフトN airに組み込まれているリアルタイム音声変換機能を単体で利用できる社内向けデモアプリの開発と、MLSAフィルタを加えたニューラルボコーダーの追実装を行いました。https://t.co/bAenjooo4g

[Dwango Media Village @Dwango_DMV]

pydominoのGitHubレポジトリはこちら。GPUなしで使用できます！ https://t.co/Y5znsJVOyd

[Dwango Media Village @Dwango_DMV]

日本語音素アライメントツールpydominoの精度が向上しました。アラインメントの問題を音素の変わり目に着目して解き、学習用のハードアライメントデータを不要にする新規手法を採用した���果、誤り率が約1.8ポイント改善しました。詳細については解説記事をご覧ください。
https://t.co/D6IRSULiLr

[Dwango Media Village @Dwango_DMV]

国立情報学研究所情報学研究データリポジトリで公開されているニコニコ大百科データセットを約10年ぶりに更新しました。このデータセ���トはユーザーページとユーザーIDを除く記事ヘッダと本文のデータです。LLMでの学習等、様々な研究に活用頂けることを期待しています。 https://t.co/TqHzo9dUim

[Dwango Media Village @Dwango_DMV]

日本語音素アライメントツール pydomino をオープンソースとして公開しまし���。 pip install ですぐに使えます。 Windows / Linux / Mac 環境に対応したコマンドラインツールも用意してあります。詳細は同時に公開した解説記事をご覧ください。https://t.co/I5I8bjmiPU

[Dwango Media Village @Dwango_DMV]

配信ソフト「N Air」にDMVが開発したボイスチェンジャーが搭載されました! GPU不要・キャリブレーション不要で100種類以上の声に変換。変換する声���を自分の好みにブレンドしたり、声の高さを変えたり、キャラクターの声になって簡単に生放送することができます。

[ニコニコ公式 @nico_nico_info]

ずんだもんの声でのニコ生配信が超簡単に😆

配信ソフト「N Air」にボイスチェンジャー機能を搭載🗣🎙
・ずんだもん、春日部つむぎ、琴詠ニアの声で配信できる
・自分だけのオリジナルボイスが作れる

「地声は恥ずかしい」「キャラになりきりたい」という方にオススメで��😊
https://t.co/TS70kdMIrH

[Dwango Media Village @Dwango_DMV]

不完全情報ゲームである麻雀の相手の見えない手牌を拡散過程モデルで生成する手法の記事を公開しました。離散なセットデータである手牌を、連続データを扱う既存の拡散過程でも生成できるようなデータ変換と後処理の方法を提案し、自己回帰モデルとの比較実験を行いました。https://t.co/snOHFbwkkh

[Dwango Media Village @Dwango_DMV]

人工知能学会誌(J-STAGE)にDMVの論文が公開されました。Implicit Maximum Likelihood Estimationを用いて体の一部の位置についての制約を満たしつつ、多様なポーズを生成する手法の提案です。https://t.co/JwQAu6NEkk

[Dwango Media Village @Dwango_DMV]

今日から開催の学会 #MIRU2023 でポスター発表をしています。
『IS2-38：自己教師あり行動推定に基づくゲームプレイ動画の模倣による強化学習の効率化』(村瀬卓也, 佐々木一磨, 北岡伸也, 小田桐優理)です。7/27（木）16:00-18:00のセッションです。気軽にお声掛けください！
https://t.co/MptQZw03SH

[Dwango Media Village @Dwango_DMV]

NeurIPS2022で発表された人間のプレイ動画のみからゲームの遊び方を学習するVideo Pre Training (VPT) の再現実験を行った記事を公開しました。Atari 2600の3つのゲームで実験し、本手法の有効性を確認しました。https://t.co/gOsc0gfdev

[Dwango Media Village @Dwango_DMV]

生放送配信ソフトウェア N Air に、DMVで研究開発したTTSエンジンによる読み上げアシスタント「N Voice 琴詠ニア（ことよみ にあ）」が搭載されました。 是非お試しください。
https://t.co/Shxk6PiNa4

[ニコニコ公式 @nico_nico_info]

＼配信者のみなさん📢／
キャラクターがコメントを読み上げをしてくれる✨
「N Voice 琴詠ニア」をリリースしました‼

あなたの配信にアシスタントはいかがですか🔊
「N Air」の最新バージョンでご利用いただけます🙌

▼詳細はこちら
https://t.co/S1Fu2inA1b

[Seiren Voice @ AIボイスチェンジャー @seiren_voice_25]

高品質な声変換ソフト「Seiren Voice 結月ゆかり」「Seiren Voice 琴葉 茜・葵」の販売を開始しました!
イントネーションや間の取り方など、豊かな表現を反映させた音声を作ることができます。
※動作環境が限定されているため、ご購入の前に体験版で動作確認をお願いします。
https://t.co/d74gLBnHYk

[Dwango Media Village @Dwango_DMV]

機械学習用ハードウェアのTPUの検証をGoogle様の協力で行いました。TPUv3-8を使ったモデル並列学習の��入によりDMVの麻雀AI「NAGA」推論モデルの学習を1枚のGPUに比べて約11倍高速化できました。
https://t.co/MPOe77cOwM

[Seiren Voice @ AIボイスチェンジャー @seiren_voice_25]

開発者の声を「SeirenVoice 結月ゆかり」「SeirenVoice 琴葉茜・葵」で実際に変換してみました！
今後、いろいろなパターンでの変換結果や、実際のソフトウェア画面等の情報も継続的に公開してゆきます。
#SeirenVoice

[Seiren Voice @ AIボイスチェンジャー @seiren_voice_25]

昨日(2022年3月3日)放送されたフジテレビ様の番組「千鳥のクセがスゴいネタGP」のVTuber漫才コーナーの音声変換において、Seiren Voiceの技術協力を行いました。FOD(フジテレビオンデマンド)でも視聴可能です。
https://t.co/LST8p526F4
※番組内25:40頃より

[Dwango Media Village @Dwango_DMV]

ニコニコ自作ゲームフェス2021、DMV協賛の「マールタス賞」はりばりーさん（@riverivery）の「きまぐれ強制スクボール」です。シンプルながらマールタスも人間も楽しめるゲームとして受賞されました。おめでとうございます！https://t.co/ECFxCDR909