https://nagakagachi.github.io/categories/voxel/Recent content in Voxel on ながむしメモHugoja-JPSat, 06 Aug 2022 18:43:49 +0900https://nagakagachi.github.io/entry/2022/08/06/184349/Sat, 06 Aug 2022 18:43:49 +0900https://nagakagachi.github.io/entry/2022/08/06/184349/<p><a class="keyword" href="http://d.hatena.ne.jp/keyword/NVIDIA">NVIDIA</a> InstantNeRF (InstantNGP) の環境セットアップと,<br /> 自身で用意した画像群を使った3D再構成をするフローのメモ.</p><p>基本的に公式<a class="keyword" href="http://d.hatena.ne.jp/keyword/%A5%EA%A5%DD%A5%B8%A5%C8%A5%EA">リポジトリ</a>のセットアップ手順そのまま.<br /> <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fgithub.com%2FNVlabs%2Finstant-ngp" title="GitHub - NVlabs/instant-ngp: Instant neural graphics primitives: lightning fast NeRF and more" class="embed-card embed-webcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 155px; max-width: 500px; margin: 10px 0px;" loading="lazy"></iframe><cite class="hatena-citation"><a href="https://github.com/NVlabs/instant-ngp">github.com</a></cite></p> <ul class="table-of-contents"> <li><a href="#セットアップ">セットアップ</a><ul> <li><a href="#実行環境">実行環境</a></li> <li><a href="#Requirementsのセットアップ">Requirementsのセットアップ</a><ul> <li><a href="#CUDA">CUDA</a></li> <li><a href="#CMAKE">CMAKE</a></li> <li><a href="#Python">Python</a></li> <li><a href="#Python-Modules">Python Modules</a></li> <li><a href="#OptiX">OptiX</a></li> </ul> </li> <li><a href="#InstantNgpのビルド">InstantNgpのビルド</a><ul> <li><a href="#リポジトリの取得">リポジトリの取得</a></li> <li><a href="#ビルド">ビルド</a></li> <li><a href="#サンプルを実行">サンプルを実行</a></li> </ul> </li> </ul> </li> <li><a href="#3D再構成の準備">3D再構成の準備</a><ul> <li><a href="#COLMAP">COLMAP</a><ul> <li><a href="#ダウンロード">ダウンロード</a></li> <li><a href="#環境変数Pathへの追加">環境変数Pathへの追加</a></li> </ul> </li> </ul> </li> <li><a href="#3D再構成">3D再構成</a><ul> <li><a href="#画像ファイルの準備">画像ファイルの準備</a></li> <li><a href="#COLMAPによる画像群カメラ姿勢推定">COLMAPによる画像群カメラ姿勢推定</a></li> <li><a href="#InstantNeRFを実行">InstantNeRFを実行</a></li> </ul> </li> </ul> <div class="section"> <h3 id="セットアップ">セットアップ</h3> <div class="section"> <h4 id="実行環境">実行環境</h4> <p>WIndows10 64bit</p> <p>RTX 3070</p> </div> <div class="section"> <h4 id="Requirementsのセットアップ">Requirementsのセットアップ</h4> <div class="section"> <h5 id="CUDA">CUDA</h5> <p>"v10.2 or higher"<br /> 11.7 をインストール.<br /> <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fdeveloper.nvidia.com%2Fcuda-toolkit" title="CUDA Toolkit - Free Tools and Training" class="embed-card embed-webcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 155px; max-width: 500px; margin: 10px 0px;" loading="lazy"></iframe><cite class="hatena-citation"><a href="https://developer.nvidia.com/cuda-toolkit">developer.nvidia.com</a></cite></p>https://nagakagachi.github.io/entry/2020/08/22/180515/Sat, 22 Aug 2020 18:05:15 +0900https://nagakagachi.github.io/entry/2020/08/22/180515/<p>SDFなどのVoxelからMeshを生成する手法のメモ。</p> <p>もとのSDFのセルと、Mesh化で管理されるVoxelは一致しないので注意。</p> <p>もとのSDFのセル中心を頂点とするようなVoxel上でMesh化が実行される。</p> <div class="section"> <h3 id="marching--cubes">Marching Cubes</h3> <p><a href="http://paulbourke.net/geometry/polygonise/">Polygonising a scalar field (Marching Cubes)</a></p> <p>Voxelの頂点のパターンからそのVoxelのポリゴンパターンをLookupしてMesh化する。</p> <p>シャープな形状が作りにくいらしい。</p> </div> <div class="section"> <h3 id="dual-contour">Dual Contour</h3> <p><a href="https://people.eecs.berkeley.edu/~jrs/meshpapers/SchaeferWarren2.pdf">https://people.eecs.berkeley.edu/~jrs/meshpapers/SchaeferWarren2.pdf</a></p> <p>あるVoxelを構成する辺について、SDFをの符号が異なる両端を持つ辺に注目し、辺を横切るような等値面の交差位置と法線をSDFの勾配等から計算する。</p> <p>一つのVoxelについて境界面は複数存在する可能性があり、すべての境界面からの距離の自乗和が最小になるような一点をそのVoxel内の頂点として最小二乗法で推定する。</p> <p>すべてのVoxelについて上記の点を計算し、隣接Cellで点同士をつなげてMeshを構成する。</p> <p>シャープな形状を作ることができるらしい。</p> <p>Voxel毎に最小二乗法を解く必要があるためコストが高い可能性。</p> <p>また自己交差メッシュができてしまう可能性もある。</p> </div> <div class="section"> <h3 id="surfacenets">SurfaceNets</h3> <p><a href="https://www.merl.com/publications/docs/TR99-24.pdf">https://www.merl.com/publications/docs/TR99-24.pdf</a><br /> <a href="https://medium.com/@bonsairobo/smooth-voxel-mapping-a-technical-deep-dive-on-real-time-surface-nets-and-texturing-ef06d0f8ca14">Smooth Voxel Mapping: a Technical Deep Dive on Real-time Surface Nets and Texturing | by DreamCat Games | Aug, 2020 | Medium</a><br /> <a href="https://github.com/TomaszFoster/NaiveSurfaceNets/blob/master/NaiveSurfaceNets.cs">NaiveSurfaceNets/NaiveSurfaceNets.cs at master &middot; TomaszFoster/NaiveSurfaceNets &middot; GitHub</a></p><br /> <p>Meshを構成するVoxel内の頂点を推定することはDual Contourと同様だが、複数ある辺と等値面の交差位置を平均した地点を頂点位置とするところが異なる。</p> </div> <hr> <p><a href="https://nagakagachi.hatenablog.com/entry/2020/08/22/180515">元のはてなブログ記事</a></p>