SP | 個人開発

Software Engineer / Kubernetes
リアルタイム翻訳字幕アプリ OverlaySubs 公開中: ソルバー RangeFlux 開発中:

[SP | 個人開発 @sp_yduck]

PCで再生中の音声をリアルタイム翻訳してオーバーレイ字幕にするアプリ「OverlaySubs」を公開しました。

APIキー不要・完全無料・処理は完全ローカル。
Windows / macOS 対応のOSSです。

めちゃめちゃ精度高くてPLaMo3の凄さに驚いてます。ぜひ試してみてください！

#個人開発

[PFN Tech @preferred_jp]

【ブログ】翻訳特化LLM PLaMo 3 Translateのモデル重みをリリースしました。0.8B / 2B / 8B / 31Bの4パターンで、いずれも世界最高レベルの翻訳能力です。ダウンロードして、ローカルで試せます。開発秘話を描いたTech Blog:
https://t.co/qoumKi5LNx
Hugging Face:
https://t.co/AxzZYYbc9f

[SP | 個人開発 @sp_yduck]

ご使用ありがとうございます！
こちら次のリリースで修正予定です。もうしばらくお待ちください。
#mond_sp_yduck
https://t.co/bexpgcN1Rv

[SP | 個人開発 @sp_yduck]

@PiZZAofDE4TH ご不便をおかけしてます
音声認識モデルが無音の音声入力に対してサンキューと出してしまうことがよくあります。もしかしたらoverlaysubsにうまく音声が届いて無いのかなと想像してます。
可能な限り原因調査お手伝いするので必要があればご連絡ください。

[SP | 個人開発 @sp_yduck]

ご使用ありがとうございます！
自分でも試してみましたが、ウィンドウキャプチャだと確かにオーバーレイが真っ黒になり画面に載せられなかったです。一応画面キャプチャでは取り込めました。
OBS等の配信向けにブラウザソ…

(残り31文字)
#mond_sp_yduck
https://t.co/X0PTv4fWBv

[SP | 個人開発 @sp_yduck]

@Mill_va ご使用ありがとうございます！配信等で使用している方が一定数いるのでユースケースを調査してるのですが、どのような使い方されてるかお聞きしてもよろしいでしょうか？
自分の声をマイク入力からoverlaysubsに取り込んで、オーバーレイ画面をOBSで配信するような形でしょうか？

[SP | 個人開発 @sp_yduck]

できたら作ってみます！
一応このページにインストール後の手順あるので、まだだったら読んでみてください。
https://t.co/aclRvorUbZ

(残り37文字｜画像:1)
#mond_sp_yduck
https://t.co/LP8iDQiYu8

[SP | 個人開発 @sp_yduck]

報告ありがとうございます！恐らくアプリのバグかと思われます。
こちらから最新版をダウンロードしていただけますと修正されていると思います。
https://t.co/GFw8NkLqMi…

(残り78文字｜画像:1)
#mond_sp_yduck
https://t.co/SdNexgnGBm

[SP | 個人開発 @sp_yduck]

@degimone3 https://t.co/KqstyNRBDJ
オーバーレイ内部で履歴を溜めて遡れるようにしてみました。（デフォルトでは10行分まで溜ます）
もし違うような表示方法の要望などがあればまた教えて頂けると助かります。

[SP | 個人開発 @sp_yduck]

OverlaySubs v0.5.0がリリースされました！
v0.4.0で有志の方によって実装された繁体字・簡体字のサポートに加えて、v0.5.0ではオーバーレイ周りの体験が改善されました。
オーバーレイのUIを細かく調整したり、オーバーレイ内のスクロールで履歴を遡れるようになりました。
https://t.co/5NItIgNC9Y

[SP | 個人開発 @sp_yduck]

OverlaySubs v0.3.0をリリースしました！
早速有志の方からバグ報告を頂き、Macでの不具合が修正されました。
これでMacユーザーの方もOverlaySubsがご使用になれます。是非お試しください！
https://t.co/5NItIgNC9Y

[SP | 個人開発 @sp_yduck]

OverlaySubs v0.5.0がリリースされました！
v0.4.0で有志の方によって実装された繁体字・簡体字のサポートに加えて、v0.5.0ではオーバーレイ周りの体験が改善されました。
オーバーレイのUIを細かく調整したり、オーバーレイ内のスクロールで履歴を遡れるようになりました。
https://t.co/5NItIgNC9Y

[SP | 個人開発 @sp_yduck]

@32nagumo はい。自分も動画を拝見して似ているなと思いました。ぼかした円を使うのはAuroraUI（e.g. https://t.co/BJjo4XYlHg, https://t.co/4nUePuPIto, https://t.co/9rQZzIUTGB)として知られるようなそれなりに採用されることのあるデザインだとは思います。
企画についてフィードバックありがとうございます

[SP | 個人開発 @sp_yduck]

@32nagumo 把握しました。動画の背景デザインが@32nagumo さんの動画背景デザイン（e.g https://t.co/YfNo8k2Q4I）に類似しているという主張であってますか？
動画作成にあたっては別の方の動画を参考にしました。

[なぐもさぶ @32nagumo]

📣先出し📣
12月中旬と新年~春先にかけて、
メジャーアプデを予定しているので
モデルに興味ある方はDMﾏｯﾃﾏｽ🙌

[SP | 個人開発 @sp_yduck]

@32nagumo すみまんせんこれOverlaySubsが盗作だっていう主張ですか？

[SP | 個人開発 @sp_yduck]

@siva_enjoy 自分以外の音声というのが何を指しているのか分からず、筋違いな回答だったら申し訳ないのですが
Discordでの通話相手の音声＝システム音声
自分の音声＝マイク入力
なので現在はこの二つのうちのどちらか一方のみを翻訳にかける音源として選択できる仕様です。

[SP | 個人開発 @sp_yduck]

昨日こちらの投稿をしてから想像以上に沢山の反応を頂いて驚いてます！

- TwitchやYouTubeなどライブ配信・動画の視聴
- DiscordやSlackやTeamsなどのオンライン通話
- ゲームのボイスチャット

全部これ一つで対応できる万能アプリです。
是非お試しください！
https://t.co/sULNbhFKU8

[SP | 個人開発 @sp_yduck]

PCで再生中の音声をリアルタイム翻訳してオーバーレイ字幕にするアプリ「OverlaySubs」を公開しました。

APIキー不要・完全無料・処理は完全ローカル。
Windows / macOS 対応のOSSです。

めちゃめちゃ精度高くてPLaMo3の凄さに驚いてます。ぜひ試してみてください！

#個人開発

[SP | 個人開発 @sp_yduck]

@haru_12m 簡単な試算なので多少前後あるかもですが、
最軽量のモデル（Whisper base + PLaMo 3 Translate 0.8B Q4_K_M）使用では1.5-1.8GB
くらいです。

[SP | 個人開発 @sp_yduck]

PCで再生中の音声をリアルタイム翻訳してオーバーレイ字幕にするアプリ「OverlaySubs」を公開しました。

APIキー不要・完全無料・処理は完全ローカル。
Windows / macOS 対応のOSSです。

めちゃめちゃ精度高くてPLaMo3の凄さに驚いてます。ぜひ試してみてください！

#個人開発

[PFN Tech @preferred_jp]

【ブログ】翻訳特化LLM PLaMo 3 Translateのモデル重みをリリースしました。0.8B / 2B / 8B / 31Bの4パターンで、いずれも世界最高レベルの翻訳能力です。ダウンロードして、ローカルで試せます。開発秘話を描いたTech Blog:
https://t.co/qoumKi5LNx
Hugging Face:
https://t.co/AxzZYYbc9f

[SP | 個人開発 @sp_yduck]

@munyaka これ返事書いてて気づいたんですが、GPUドライバが無い環境で動かないバグがありそうなので調査します。。。

[SP | 個人開発 @sp_yduck]

@munyaka NPUでの推論はサポートされてません。CPUのみでの動作もするので一応お使いのCopilotPCでも動作自体はすると思いますが、あくまでCPU推論になります。

[SP | 個人開発 @sp_yduck]

@aYW2Nq7LJHkvpz8 翻訳元言語の種類によるフィルターは提供してないです。
似たような要望が来ているので対応できるか検討します！

[SP | 個人開発 @sp_yduck]

@bigrunsquid sure. let me put it to backlog

[SP | 個人開発 @sp_yduck]

鍵垢の人とかで質問とか要望送りたい人もいるかもと思い、登録してみました。気軽に送ってください。
https://t.co/ryHWCJnp6h #startedmond

[SP | 個人開発 @sp_yduck]

@orz99 Thank you so much for your contribution！
ありがとうございます!

[SP | 個人開発 @sp_yduck]

@degimone3 フィードバックありがとうございます！
検討してみます！