東大Codex研究所

Codexを極めすぎた東大生が活用事例を毎日発信｜ビジネス活用のためのCodexを学びたいならフォロー必須｜非エンジニアこそ使うべきCodexの最先端ノウハウを毎日発信

[東大Codex研究所 @UT_Codex]

https://t.co/QeGAkkV2rZ

[東大Codex研究所 @UT_Codex]

【話題】
CodexでiPhone上のゲームを操作する実験がめっちゃすごい👀

スマホの画面を見ながらAIが入力する
投稿者が「王者栄耀」を操作させた動画を公開しました

今回の接続は、AIエージェントからMCPを経由し、NanoKVM GoとUSB-CでiPhoneにつなぐ構成
Codexだけを起動すれば使える機能ではなく、専用の機器を組み合わせた実験です

本人の評価では、リアルタイムのアクションゲームはまだ苦手
ゲームが上手にできたという成功例としては紹介されていません

それでも、画面を見てスマホへ入力する経路をつなぎ、実際のアプリで試したところが見どころ

操作する手段を用意することと、その操作を的確に判断することは別の課題
動画では、その両方の現在地が見えます

[東大Codex研究所 @UT_Codex]

https://t.co/EP7zhr2kkC

[東大Codex研究所 @UT_Codex]

現在の保存先とセットアップ仕様はこちら
https://t.co/WneH5KfEpb

[東大Codex研究所 @UT_Codex]

【話題】
Codexで解いた問題を次の作業へ引き継ぐBeaconが話題👀

同じ不具合の直し方や、プロジェクト固有のルールを何度も説明している人向け
作業履歴から再利用できる知識を取り出す仕組みです

BeaconはCodex、Claude Code、Cursorなどのセッションを記録し、役立った手順や修正パターンをSkillsなどで再利用できるようにします

・指示や応答だけでなく実行したコマンドや編集も記録
・うまくいった進め方と修正内容を抽出
・確認した知識を別のエージェントでも参照

例えばClaude Codeで解決した問題の手順を、次にCodexで作業するときにも使う
履歴を残すだけでなく、次の仕事に持ち込める形へ整理するのが特徴です

保存先はセットアップ時に確認が必要
現在の公式手順ではCloudが事前選択されるため、ローカルだけで使う場合はLocalを選びます

[東大Codex研究所 @UT_Codex]

https://t.co/QeGAkkV2rZ

[東大Codex研究所 @UT_Codex]

Codexに今すぐ
この指示を丸投げしてください

台本を変えた動画の字幕は
新しい音声からタイミングを取り直す👇

『音声の単語タイムスタンプと正しい台本をアラインメントしてください。商品名や数字の表記は台本から使い、表示時刻は音声から取得。一致しない箇所を抜き出して確認し、意味が切れる位置で字幕を分けて』

[東大広告研究所 @adops_lab]

https://t.co/j0sJAAnp0N

[東大Codex研究所 @UT_Codex]

Codexに今すぐ
この指示を丸投げしてください

商品のスペックを読み上げるだけの広告を
買う前の迷いに答える会話広告にできます

『ファンデを買う人の「塗った感じが分からない」という悩みを二人の会話に。商品名を言う場面から自社映像を下段に入れ、質感→塗り方→仕上がりを台詞と同期。二人は上段に残して』

[東大広告研究所 @adops_lab]

https://t.co/uq5oXB1CHP

[東大Codex研究所 @UT_Codex]

元動画はこちら
https://t.co/zVb6v87bGX

[東大Codex研究所 @UT_Codex]

Codexに今すぐ
この指示を丸投げしてください

プレゼン動画を縦型にする時に
図を描き直さず話の要点まで伝わる切り抜きが作れます

元動画と残したい区間を渡して

『図やスライドが出る場面では元映像の全体を残して。説明の順番を変えず、字幕は図の外に短く置く。文字が小さいからといって顔だけに寄らない。結論まで言い切る区間を選び、強調色は一番伝えたい一文だけに使う』

図と説明の対応が残ると
短くしても話がつながる。

[動画AIオタクちゃん @videoai_otaku]

https://t.co/FwRT5Qipmp

[東大Codex研究所 @UT_Codex]

共通のAGENTS.mdをプロジェクトのルートに置き、billing/AGENTS.override.mdには請求処理専用のルールを書きます。同じフォルダではoverrideがAGENTS.mdより先に選ばれます。

そのフォルダで新しいCodexセッションを起動して確認します。今回渡した指示はこちら。

今有効な指示から適用ラベルと確認コマンドを答えて。ファイルの探索や変更はしない。

仕様と考え方
https://t.co/7t5ufRVX1q

[東大Codex研究所 @UT_Codex]

Codexの指示書は1枚に詰め込まなくていい
請求処理だけ別ルールで動かせます

共通ルールはルートのAGENTS.mdへ。
請求専用のルールはbillingのAGENTS.override.mdへ。

同じ質問でも、ルートで起動すると全社共通
billingで起動すると請求専用のテストが返ります。
同じフォルダではAGENTS.mdよりoverrideが優先される。

どの場所で起動するかまで含めて設定するのが大事。
置き方と確認に使った指示はリプへ↓

[東大Codex研究所 @UT_Codex]

対象プロジェクトでCodexを開き、この指示を渡します。今回はファイルを書き換えないread-onlyで確認しました。

正常入力では合計190、数量−1では合計−100。Codexは削除された数量チェックを指摘しました。

未コミットの差分をレビューして。変更は加えず通常入力と異常入力を実行して確認し重大な問題だけを日本語で短く返して。

手順の仕様・考え方
https://t.co/62VPHvTSSj

[東大Codex研究所 @UT_Codex]

ちゃんと動いた決済処理でも
注文金額がマイナスになる穴は残る

Codexに差分だけでなく異常入力まで確認させると
数量チェックが消えた箇所を見つけました。
通常の注文は通るのに数量−1で合計もマイナス。

AIにコードを任せる人ほど
完成後の確認はここまで渡してほしい。
実際に使った指示はリプへ↓

[東大Codex研究所 @UT_Codex]

Codexで美容広告までいけるのえぐい

フックからCTAまで撮影素材をつないで
台本もナレーションも字幕も揃えられる。

素材を渡す時は
「商品名から説明するより、手の動きが気になる場面を先頭に」と添えてみて。

好きな参考広告も一緒に渡すと
字幕のデザインまで合わせやすい。

[東大広告研究所 @adops_lab]

https://t.co/j0sJAAnp0N

[東大Codex研究所 @UT_Codex]

スマホで撮った素材から美容広告をAIで作るなら今すぐこれやって

① Codexに参考の広告と自分の商品を撮った動画を渡す
②「字幕の字形と出る速さを参考にして。口元に文字を重ねず台本はこの商品に合わせて」と指示
③ 新台本をFish Audioで音声にして動画と合わせる

ケースを見せるだけで終わらせず
手元で見た色と唇にのせた仕上がりをつなぐのがコツ。
作り方は引用先に。

[東大広告研究所 @adops_lab]

https://t.co/j0sJAAnp0N

[東大Codex研究所 @UT_Codex]

spec.mdには「合計は0以上の整数」「5000円以上は送料無料」「それ以外は550円」「負数・小数・文字列・boolはValueError」と書きました。

acceptance.jsonには入力と期待値を8件。4999円→550円、5000円→0円の境界も先に入れます。仕様と期待値を変更禁止にして渡します。

spec.mdどおりに送料計算を実装して。acceptance.jsonの8件を実行するhttps://t.co/vFV8Mlugkzも作り全件確認。仕様と期待値は変更しない。最後は境界値4999と5000の結果と合格数を短く。

仕様と考え方
https://t.co/7t5ufRVX1q

[東大Codex研究所 @UT_Codex]

Codexへの実装依頼は
「完成の条件」まで先に渡すと変わる

用意するのは仕様と期待する結果の2ファイル。
「この仕様を実装して。期待値は変えず全件確認して」
と一緒に渡します。

今回は送料計算で実行。
0円や5001円に加えて4999円と5000円の境界
負数・小数・文字列まで含む8件を確認しました。

完成したという返事だけで終わらず
期待する答えと実行結果を照合できる。
合格条件をAIの修正対象から外しておくのがポイントです。

・欲しい動作を先に言葉にする
・境界の期待値も先に決める
・実装後は同じ条件で確かめる

AIに機能追加を頼む人ほど
完成の判定まで自分の手元に残してほしい。

「作れたか」を会話で確認するところから
実行結果で確かめるところまで任せられます。
仕様と実際の指示をリプに置きます↓

[東大Codex研究所 @UT_Codex]

Codexに動画編集の担当を任せると
撮影フォルダから商品紹介が一本出てくる

渡すのは参考広告、自社素材、商品の説明。

「このミストの使い方が伝わる広告にして。字幕と演出は参考に合わせて」と頼めば、台本・ナレーション・カットの順番まで組める。

特に入れておきたいのが
「使い方はメーカーの説明と照合して」の一文。

参考のテンポを使いながら
自分の商品に合う一本へ展開できます。

[東大広告研究所 @adops_lab]

https://t.co/j0sJAAnp0N

[東大Codex研究所 @UT_Codex]

うわ、、
切り抜き動画ってここまでCodexでやれるんや

同じ場面を上下で見比べると
文字の太さだけじゃなく
ツッコミで大きくなる位置と出るタイミングまで詰められる

字幕を付けるところから
編集の演出を作るところまで来てる

[動画AIオタクちゃん @videoai_otaku]

https://t.co/FwRT5Qipmp

[東大Codex研究所 @UT_Codex]

2ch系の動画はもうdotでいいな...
テロップのグラデーションとかアニメーションとかPremiere使う完全に必要ゼロになった

① dotに「太陽系の天体5選で作りたい」とテーマを渡す
② dotに『Codexで台本を5項目に構造化して。公開画像を集めて、ゆっくり音声に合わせて秒単位で切り替え、Remotionで書き出して』と指示
③ Codexが作った声つき動画を見て次のテーマを決める

[ジロ｜AI社員攻略で1億 @jiro_aicompany]

https://t.co/l8byINVBVu

[東大Codex研究所 @UT_Codex]

下の内容をSKILL.mdとして保存してAIに渡してください。
最初の依頼は「机の上が片付く便利グッズ5選で作って」でOKです。

---
name: make-five-shorts
description: テーマから5選の縦型ショート動画を作る
---

テーマを受け取ったら次の順に進めてください。

1. 5つの項目を選び、各項目を「名前＋短いコメント2つ」にする。順位は付けない。
2. 商品名・何が片付くか・選ぶ時の注意点を短くまとめる。価格や寸法は商品の公式ページで確かめる。
3. 台本の全文を見せてから音声と映像を作る。
4. 画像は提供素材か出典を確認できるものを使う。素材がない時は勝手に別の商品画像で代用しない。
5. 大きな項目名と番号を出し、短いコメントを青とピンクで分ける。声の実際の長さに合わせて字幕と画像を切り替える。
6. 最初に合意した見た目を次の項目でも使う。項目が変わるたびに演出を増やさない。
7. 動画を最後まで見て、読み間違い・字幕のはみ出し・不自然な間を直す。
8. 動画と一緒に台本・素材の出典・編集できる制作データを残す。

[東大Codex研究所 @UT_Codex]

Codexに今すぐ
この指示を丸投げしてください

顔出しも撮影もなしで
ナレーションつきのショートを作れる

リプのSKILL.mdを渡して、これを送るだけ👇

『机の上が片付く便利グッズ5選のショートを作って。商品ごとに名前と短いコメント2つで台本を構造化。商品情報と画像の出典を確認して、声の長さに合わせて字幕と画像を秒単位で切り替え、Remotionで縦型動画にして』

[ジロ｜AI社員攻略で1億 @jiro_aicompany]

https://t.co/l8byINVBVu