NATIONARITY

3DCG/XR/Virtual/Photogrammetry/Lidar

Next target…Spherical drawing/GNSS
いろんなジャンルをつまみ食い。

[NATIONARITY @nationarity]

@yuta06274444 突然のメッセージ失礼いたします。
本日の『"Space Source" 5th Anniv.』のチケットを、ぜひ[1枚]お譲りいただきたくご連絡いたしました。
スタート直前のお願いとなり恐縮ですが、まだ手元にお持ちでしたらご検討いただけますと幸いです。
よろしくお願いいたします。

[NATIONARITY @nationarity]

Postshot(v0.2) やフォトグラメトリ(Realitycapture)と比べてみても一歩上。#GaussianSplatting

[NATIONARITY @nationarity]

（元からトレーニングしてあるモデルだけど）#TRIPS 試してみた。小さめの画面なら実写に見えるほど超きれい。たった1920*1020px 301枚で生成したとは思えない

[NATIONARITY @nationarity]

カメラキャリブレーションがまだ詰め切れてなくて色がちょっとズレてる。でもフォトグラメトリと違って、その場でデータを確認できるのは良き。コストもミラーレスカメラ1台分ぐらいで全部揃った。

[NATIONARITY @nationarity]

#LiDAR にリアルタイムで色付けられるやつ(#R3LIVE) やっと動いたー！

#3Dスキャン

[NATIONARITY @nationarity]

@n3to4_3d ご指摘の通り仮想スキャンを作成するのが正しいのですが「仮想スキャンを作成」→.E57保存だとRealitycaptureにインポートできませんでしたので回避してました。
おそらくLT2023からこの作業が可能になったと思います。

[NATIONARITY @nationarity]

「スキャン点群」→「仮想スキャンを作成」
→スキャン点群をエクスポート(順序あり) →.ptxで保存
の方が良さげ

[NATIONARITY @nationarity]

Pointcloud→Realitycapture～SCENE LT～

〇CC等でTLS/GBLは設定しておく。
・.pcdで保存。
〇SCENE LT に.pcdインポート
・<構造>右click
→操作
→点群ツール
→スキャン点群を作成
・<構造>右click
→インポート/エクスポート
→スキャン点群をエクスポート(順序なし)
→.e57選択
⇒RC

[NATIONARITY @nationarity]

〇CC等でTLS/GBLは設定しておく。
・.pcdで保存。→.lasの間違い

[NATIONARITY @nationarity]

こっちのが簡単？

[NATIONARITY @nationarity]

もう１つ方法がみつけたかも

[NATIONARITY @nationarity]

@zannijp 動画も見て試行錯誤してみたんですが…。
→そうでしたか、すみません...
私が理解している「構造化点群」というのは「１つの器械点（スキャンデータの計測位置）を持っている点群」で、さらに「器械点から見て縦横に整列された点群」など条件が付く場合もあります。各社、見解が分かれています。

[NATIONARITY @nationarity]

Zip-NeRFで遊んでみたー。深度マップもすごく綺麗
VRAM消費は...容赦なし

[NATIONARITY @nationarity]

反転したらInpainting用のマスクとしても使える。Lamaだとなんか微妙。

[NATIONARITY @nationarity]

@KIROKUYA_SCAN 動線をなるべくなぞらないようにしたり、できるだけ地面を撮ろうとしますがそれでも難しいですよね。
あと光沢があるタイルとかだともう。。。ですね

[NATIONARITY @nationarity]

広域フォトグラメトリする時に”消えてほしい通行人と車”をターゲットに自動でマスク画像を生成するってやつを作ってみた。
Top:Original_Photo
Mid:Segmentation
Bottom:Mask_Image
（機械学習ベースなので若干粗が残る）

[NATIONARITY @nationarity]

@KIROKUYA_SCAN 今回は単純に画像が少なすぎましたね。タイポイントが削られるのでオーバーラップを増やした方が良さそうです。
16.5s×15fps≒249frames
マスク無(132/249)　マスク有(約50/249)

[NATIONARITY @nationarity]

@silvermanphoto If the scan is for multiple locations, you will need to be a little more creative. Message me again if needed.
I hope you will succeed.

[NATIONARITY @nationarity]

Realitycapture(1.2.1)に更新して、点群読込機能に変更がないか確認した。
（→多分何も変わってない）
CCのフォーラムは「TLSは保存できない」とか言ってるし、RCで読み込めるようにはなってもFaro SCENE上では非構造化点群扱いなので謎手順
事前に器械点が分かっていれば.e57でも.ascでも対応可能。