LIDAR スキャン

iphone 12 pro を買いましたので、早速LIDARを試してみました。

使用したアプリは3D Scanner App 

スマホでここまでスキャンできることに驚き。

歩道橋の高さとかもしっかりとスキャンできてるし…

フォトグラメトリといい、LIDARといい最近のテクノロジーの進化凄すぎです…

 3Dで街並みを再現するために、どうやってやるかを検討中です。
闇雲にやっても終わらないだろうから、なるべくワークフローを考えて進めたいなと
今考えているワークフローは以下です。

・測量（計測）
スキャンデータ、フォトグラメトリのメッシュで街の一角を3Dソフト上に再現。

↓

・ラフモデル配置

測量データを元に簡単にモデリングしたデータを位置を合わせ配置。

↓

・Unrealへラフモデル取り込み

Unreal上で街並みの配置を決定

↓

・各モデル作りこみ（主に建物）

↓

・小物作りこみ

↓

・Unreal上で配置

考えただけでも大変そう。。

フォトグラメトリテスト

今日は休みだったので、早速フォトグラメトリのテストをしてみました。
とりあえず3DF Zephyr のフリー版で試してみることに。フリー版は一度に処理できる枚数が50枚までと制限があるようです。

フォトグラメトリはトラッキングの応用技術という事だったので、なるべく視差が出るように意識して市内で写真を撮ってきました 。

写真は40枚ぐらいを用意

ナビゲーションに沿って写真を読み込んで、処理は全自動で進むので楽です。読み込みと解析が終わると、3D空間にポイントクラウドが形成されました。

見る限りうまくいってるっぽい？

メッシュの作成をナビゲーションに沿って実行。初期設定から特に変更はせず。メッシュの計算を含め30分弱ぐらいで終わりました。

奥行も含め街の形状がかなりの精度で再現されてます！

奥の方はあまりできていませんが、手前はかなり再現されているのがわかります。

Σ(ﾟДﾟ)ｽｹﾞｪ!!

写真撮って読み込んだだけでここまで出来るの！？
今の技術すげぇ！

ここまでできるものとは…

店の中も再現されていたり

出来たメッシュをOBJで書き出し、Blenderで読み込んでみました。メッシュだけで見るとガタガタしてたりはしますが、モデリングのガイドとしては使用できそうな印象。

blenderへ読み込み

モデルの寸法（数値）をどうやって合わせる少し悩みましたが、そこは我らが広電の線路がありました。

テクスチャで再現された広電の線路

広電の線路は標準軌なので、線路内側の寸法が1435㎜と規格が決まっています。その数値合わせでスケールをかけてあげれば、ほかの箇所もある程度は数値が合うはずです。これなら数値合わせもある程度簡単に出来そう。

まとめ

フォトグラメトリとりあえずでやってみましたが、かなり使えそうです。lidarセンサーを使用したキャプチャアプリ等と併用してやれば街のキャプチャが本当に出来るかもしれないです。街の一角から少しずつやってみよう（私の根気が続くのか。。）

フォトグラメトリ ソフト検討

ソフトの検討

フォトグラメトリを試してみようという事でまずはソフトを検討。

ネットで情報収集。

いろんなソフトがあるんですね。。

・Reality Capture

名前は聞いたことはある。精度が高く性能はいいらしい。
steam版なら月額40ドルぐらいで使用できるみたい。高い。。

・3DF Zephyr

初めて知りました。

Lite版というのが、15000円ぐらい。買い切りなのが良い。
そこそこ使えそう。フリー版もある。

・Mesh room

これも知らんかった。

オープンソースソフトウェア。誰でも無料（ここ重要）

機能面でも結構いいみたい。

・Recap Photo

天下のAUTODESK製品。サブスク形式。
ネットでもあまり取り上げられていないような印象。

性能は…？？調べてもいまいちわからん。

個人でやるので値段は重要。

この中で言うと3DF Zephyr、Mesh roomが候補となりそう。

まずは無料版の3DF Zephyr辺りを試してみることにしよう。

フォトグラメトリ

 今、広島の街をキャプチャできないかと妄想中です。

出来れば、アンリアルエンジンとかで街並みを再現してみたいなーと。

で、どうやったらできるかを検討してるんですが、大掛かりな計測は現実的じゃないので、まず浮かんだのがフォトグラメトリ。写真をもとに3Dモデルを構築する技術ですね。精度の問題があるみたいですが、グーグルマップとかの画像とかを組み合わせてあげれば、ガイドとしては使用できそう。

それと、気になるのがLIDARスキャナ。最近ではipad proに搭載されているみたい。もう少しで出ると噂のiPhone12がLIDARスキャナーを乗せるみたいなので、ちょうど買い替えのタイミングなのでそれで近距離のモデルのスキャンが出来れば…

遠景はフォトグラメトリ、近距離はLIDARをうまく使い分けて、リモデリングをしてあげれば、大掛かりな計測をせずとも街並みが再現できるんじゃなかろうかと。まずはフォトグラメトリを試してみないといけませんね。ソフトの検討から始めよう。

ブログ開設

 ブログ開設しました。

主に3Dの事に関して書いていければと。

フォトグラメトリが気になる今日この頃。