いむらむ

株式会社ゆめみ→ @AccentureSong

[Nano(ナノ) @Dstudio_ai]

ChatGPT・Tripo・Blender(人力)を使って、ゼロから6時間ぐらいで3Dモデルを作ってみました。ボーン入れてダンスまでできました！
以下殴り書きみたいな内容ですが全体のフロー書いておきます。

・ ChatGPT(gpt-image-2)の画像生成でキャラクターの顔の３面図+衣装だけを作る。

3Dモデル生成AIに読み込ませるためのデザイン図。
もしチャッピーでうまくいかなければ、Gemini(Nanobanana)がおすすめ。
ここはもうちょい分割してもよかったかも。

・ Tripoで頭と体（衣装）を分けて生成。

スマートトポロジーメッシュで生成。
１度の生成で2万ポリゴンまでしか指定できないので、頭2万・体2万に配分して顔のクオリティを上げる狙い。

・ Blenderでなんとかして頭と体をガッチャンコ

結構知識と慣れが必要です。Blenderに慣れてる人だったら全然いけると思う。

3Dモデルの生成AIが出力するモデルは荒く、構造がおかしかったりするので、いろいろ工夫が必要。

・ あとはBlenderでスキニング（ボーン入れ）

今回はELYTHで使いたかったためVRMを選択。たぶんなんでもいい。
ちなみにここが本編です。半分以上の時間はウェイトを塗っていた…。

普通の構造のモデルではないので、ウェイトがとんでもなく塗りづらい。（自分がキャラモデリングになれてないのもあるかも）
Tripoはセグメンテーションできるが、なんかこれじゃない感。

結局Blenderをいじり倒し試行錯誤しながら塗った。
「自動のウェイトで」はこの場合使い物にならない。（初手の足掛かりに必須だけど）
滅茶苦茶修正が必要。

揺れモノも並行でセットアップ。

・ テクスチャペイントで顔だけ何とかする

モデルで一番見られるのは顔ですが、Tripo君はそんなこと知ったこっちゃないので普通に顔のテクスチャが汚いです。（かなりいい線いってるが）
できる範囲で微修正した。
UVがめちゃくちゃなので注意

・ シェイプキーで表情作る

今回は簡単にしたかったので、まばたき・ウィンク・喜ぶ・口開けの４つだけ作成。
表情あるなしじゃ天と地ほどの差があるので絶対作りたい。

やってみた感想

8割方Blenderの人力作業だった。それでもまったくゼロから一晩でキャラクターが1体できたのでめちゃくちゃ早いと思う。
あと少し時間はかかるがAIが出力したモデルをベースに手作業でモデリングし直した方がクオリティも上がるしそれ以降の作業の速さが段違いになると思う。
それから美術解剖学やイラスト的なバランスの知識・スキルの要求度がぐんと下がった。これはデカい。

テクスチャも荒いし、UVも終わってるので実用的かと言われればあんまり…という感じ。
ぶっちゃけカメラの寄りには耐えられないクオリティです。

こだわればもうちょい綺麗なモデルを作れる気もする。
今回は全体の流れを把握したかったのと、とりあえずELYTHの3Dワールドで動かしたかったので、細かいところや荒いところはめちゃくちゃ残ったまま。
けどまあ動くのでヨシ！

髪の毛はほぼ揺らせないと思った方がいいです。（キャラモデリングに慣れてる人なら何とかできるのかな？）

さんざんTirpoの悪口言ってますが、正直Tripoヤバいです。スマメッシュが革命すぎます。
めっちゃいい感じの低ポリ&構造化済みのモデルを出してくれます。
これなら全然いじってけるレベルです。
以前Meshyも使いましたが全然でした。ウェイト塗りづらいとかのレベル超えて塗れません。低ポリが苦手でTripoの足元にも及んでない感じ。
あとモデルのバランス（比率）とかがバッチリで、一発出しでも全然OKです。
テクスチャが荒いのだけ気になるかな？

ひとまず個人用に作った並感なので、もっといいやり方とか、クオリティ上げたりする方法もあるかもしれません。

楽しいのでぜひやってみてください。
なんか質問あればリプにください。

[いむらむ @emrum_]

大企業で承認スキップってすごいな

#yumemi_growyumemi_grow_satto

[いむらむ @emrum_]

スプシ、gasも便利だし気づくとDB化しちゃうのわかるな

#yumemi_growyumemi_grow_satto

[いむらむ @emrum_]

企業戦士や、、、

#yumemi_growyumemi_grow_satto

[いむらむ @emrum_]

claude designのテンプレートに3Dモデルが生えてるのは見つけたけどまだ試せてないな

#yumemi_growyumemi_grow_satto

[いむらむ @emrum_]

3D空間ちゃんと表現されててすごい！

#yumemi_growyumemi_grow_satto

[いむらむ @emrum_]

［宣伝］
宮城の仙石線下馬駅徒歩7分のブックカフェにて、リアル謎解きゲームやってます！お近く、もしくはご旅行の際はぜひ！

（松島と仙台の間にあるので、松島観光のついでに寄るとちょうどいいかも）

https://t.co/zvBsH413hs

[いむらむ @emrum_]

家一軒を使った脱出ゲームやってきたけど控えめに言って最高だったのでおすすめです

#京都館脱出

[いむらむ @emrum_]

/skill-creatorに既存スキルのテストさせるの超いい。何がいいって改善前と後、スキル使用or未使用でテストやってくれるのが便利

[いむらむ @emrum_]

superwhisperに乗り換え、ultraをローカルで動かすと安全かつ結構快適だった

[いむらむ @emrum_]

最近もう行単位のレビューとかそこまでしっかりやってない。AIが出してくる量に追いつかないので、テストコードレビューと動作確認で回している気がする。動作確認がボトルネックかも

[いむらむ @emrum_]

もういろんなところで何回も言われてそうな話だけど、最近コードレビューと言う作業そのものを変える必要に迫られている気がしたので言語化してみた

https://t.co/ayeZ3ZIrGz

[いむらむ @emrum_]

あれtypeless精度下がってる？

[︎︎🐸いまいまい🐌 @imaimai17468]

imaimai UIをリリースしました

shadcnレジストリを使っているのでCLIから持って来れます

実装が微妙に面倒なやつとかを適当に追加していきます
他のコンポーネントライブラリみたいな網羅的なものにする気はないです

https://t.co/aLmLGjYzG8

[いむらむ @emrum_]

記事を読みやすくするチャンスと思っておくかぁ。頭にスッと入る記事生成を一発でやるの課題だったし

[いむらむ @emrum_]

zenn記事はgptに書かせてcodexでリポジトリにpush、zenn側で修正ってやってたので、間違ってリポジトリ全体を再デプロイしてしまうことによってzenn側の編集が全て上書きされて単なるAI生成記事に戻ってしまった😢
一旦全部非公開にしたけど全滅や。

[いむらむ @emrum_]

操作がうまく行ったらそれをそのままplaywrightでコード化する、みたいなね

[いむらむ @emrum_]

色々試しながらgherkinでテスト仕様書書けばchrome devtools mcpでE2Eは自動化できる気がしてきてる。
うんこいFE実装でもeval使ってで無理くりUI操作してくれるから好き

[いむらむ @emrum_]

ドキュメントは腐るけど新規参画者のキャッチアップは円滑に行いたいのがモチベ。
全体把握と個別把握に必要なドキュメントはその場で作ってもらうのが楽で、間違ったものを出さないために仕様と紐づく実装をAIが迷いなく辿れればいいんじゃないかという話

[いむらむ @emrum_]

仕様書駆動開発で作った要件とテストコードをvitestのanotateプロパティで紐付けてその場限りの仕様書を出力したり質問に答えられるようにするpage indexを用いたメンテが簡単なragを思いついたので次の記事はそれかな。