雄大｜コグニティブ・ボーカルプロデューサー

AIを従えるボイスアーキテクト兼歌い手兼AIエンジニア。音大卒/元オペラ歌手。AIの客観データと、プロデューサー/エンジニアとしての経験知を融合させ、あなたの声の「なぜ？」を解明。名古屋/全国オンライン。8bit AI作曲支援アプリの開発中。近日公開予定。生成AIとの清く正しい付き合い方を模索中。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

ComfyUIのようなノード接続MIXERルーティングを実装しました。通常ミキサーと切り替えられて、各ノード内で既存パラメーターや既存VSTのみならず、AIがその場でサウンドメイクを直接プログラミングし理想の音が作れます。VSTにも縛られずオリジナルサウンドで自由に音を作り込めます。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

ここまで時間が掛かってるのはAIがVSTを扱うのがあまりにも難しいから。今回かなり痛感したので、出来るだけ音源からエフェクトまでこちらで作ってDAWの標準にするようにします。それもAIが音源そのものを更に整えたりリアル感を増せるようにしたり、FXを自在に組んだり出来るようにしています。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

@rograma19 あるあるですね笑　自分もプロジェクト保存でそのまま残してあったデータが開けなくなって闇に中に消えていったことがあったので分かります。インスタントにコードで作って行くので確かにブラックボックス化しやすい部分ではあるので、書き出し保存復元周りを強化するようにしますね。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

ComfyUIのようなノード接続MIXERルーティングを実装しました。通常ミキサーと切り替えられて、各ノード内で既存パラメーターや既存VSTのみならず、AIがその場でサウンドメイクを直接プログラミングし理想の音が作れます。VSTにも縛られずオリジナルサウンドで自由に音を作り込めます。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

FX同士を内部で繋げたり内部ルーティングも自在に変えられます。画像はデモだけどこんな感じで即席でFXを作って繋げられる

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

ちゃっぴーってサブエージェントとか並列作業とかさせてる時にAI同士お互い連絡を取り合ったりするんだけど、その時の僕への呼び名が定期的に「人間」なの地味に怖いのよな。。。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

や、やるじゃん…！！？？

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

Astraに3Dキャラモデリングさせたらこんな感じで出てきて死ぬほど爆笑した後、しっかりモデリングの基礎を叩き込みました。↓↓

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

まずはちゃんと作りたいモデルの360度の画像からモデルの直径を測れるツールを自作してまずはそれに合わせてみようか！

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

SlackでAI達がせっせこ働いてくれてます
今DAWの制作と平行して楽器クリエイター機能を作っています。当然VSTで使えるし、それをゲーム化しようとしています
世界初本格DAW搭載物理楽器制作ゲームです。どんな楽器も物理的に再現して自分だけのオリジナル楽器を演奏してオンラインで演奏会も出来ます

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

OpenAIのdotsやchatでデータが消えると注意喚起がありますがこれは事実で実際に定期的に揮発する環境になってます。なのでおすすめなのがGoogleドライブを使う方法で彼らは全然ドライブを使えるしそこで共有ノートを作って勝手にやり取りなんかもしてしまいます
画像も全てAIが構築したデータ構造です

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

AI制作ってどう既存の設定や設計をハックするかが大事だと思ってる。仕様上はこうだ、と言われても抜け道があるかも知れないを実現できるのがAI。だから流石にこれは出来ないだろ、をやらせてみると単純に楽しいし実際に近道になる事の方が多い。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

@takustaqu 了解。そういや日曜だったｗ

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

しかしRustって本当に実装が大変だ。。JSで今のDAWのUIとエンジン作ってもらったらほんの1時間で作れた。対してRustは数か月掛けた今でも終わらない。
ビルドが必要というのもあるし、単純にAIがまだ使いこなせてない印象。これは6.1solでも同じ。でも超軽いしカスタマイズし放題だからこれで頑張る

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

@takustaqu おお…じゃあメールの方がいいよね。
[email protected]

問題なければこれに送ってください。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

@takustaqu いいよ！なにしたらいい？

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

@takustaqu そうだよね。。。分かってくれて嬉しい
でも普段JSやpythonとかで無双してるAIがひいひい言いながら作ってるの見るのもそれはそれで一興。完成品を楽しみにしてる

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

ああ、本当に6.1Solに代わってからコーディング鬱みたいなのがほぼなくなった。常に高額レートを気にしたりコードを壊されたり指示をミスって変な実装されてやり直したりみたいな事がめちゃくちゃ少なくなった。コーヒー飲みながら落ち着いてバイブコーディング出来る幸せ。技術の進歩に感謝。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

ああ、dots良いわ。エージェントになって対話形式が少し薄れた感じがしたけどこれはそれが更に進んだ感じ。リアルタイムで友人や社員と会話してるイメージかな。
ちゃんと状況を常に理解してくれているし今までチャットという枠だけで存在していたAIがようやく隣に来てくれたような感じ。楽しい。

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

6.1-Sol来たね

[雄大｜コグニティブ・ボーカルプロデューサー @yuda0526]

昨日動画にした事でそもそも音源とかVSTを毎回新規みたいに扱うから予めキャリブレーションしてスキャンしとけばいいんじゃね？って結論に辿り着いて本当に助かった