効率的なポイントクラウド登録の新しい方法
新しいアプローチで3Dポイントクラウドの登録の精度と速度が向上した。
― 1 分で読む
目次
この記事では、複数の視点からポイントクラウドをまとめる新しい方法について話します。ポイントクラウドは、空間内の点の集まりで、3Dモデリングやコンピュータビジョンでよく使われます。異なる角度から集めたポイントクラウドを扱うと、正確に一致させるのが難しいことがあります。私たちの方法は、これらの課題に効果的に対処することを目指しています。
ポイントクラウド登録の問題
ポイントクラウド登録は、3Dモデルの作成や3D空間内のオブジェクトのセグメンテーションなどのタスクに不可欠です。従来の方法は通常、2つのポイントクラウドを同時に見て、最終的な出力をシーンの一部だけに制限しています。完全な3Dモデルを作るには、すべての視点を同時に整列させる必要があります。このプロセスは多視点登録として知られています。
以前の方法は、ポイントクラウド間の多数のペア比較を使って詳細な接続マップ(ポーズグラフ)を作成していましたが、このグラフを作るのは遅く、しばしばあまりにも多くの不正確な接続(外れ値)を含んでしまいます。これらのエラーは、ポイントクラウドを正しく整列させる際に問題を引き起こすことがあります。
私たちのアプローチ
これらの問題に対処するために、私たちは2つの主なアイデアを提案します。まず、ニューラルネットワークを使って、2つのスキャンがどれだけ重なっているかを評価します。これにより、不正確な接続が少ないポーズグラフを作成する手助けになります。次に、グラフ内の異なる接続の重要性を調整する方法を開発し、信頼性の高い接続にもっと焦点を当てるようにします。
これらの戦略を適用することで、従来の方法と比較して、登録の精度と速度で大幅な改善を示すことができました。
ポイントクラウド登録の理解
ポイントクラウド登録の目的は、3Dシーン内の各ポイントクラウドの正しい位置を見つけることです。このプロセスには通常、2つのフェーズがあります。最初のフェーズでは、スキャンのペアを比較して、互いの関係を推定し、ノード(スキャン)とエッジ(接続)からなるポーズグラフを形成します。2番目のフェーズでは、これらの接続を洗練させて、外れ値を排除し、正確な整列を確保します。
最近の多くの方法は外れ値に苦しみ、良い解決策を見つけるのに苦労します。接続の改善に注力するか、重みを調整するための高度な技術を使用しますが、これらの戦略は信頼できないことがあります。
私たちの方法の貢献
私たちの方法は、ポイントクラウド登録の世界に2つの重要な貢献をもたらしました:
- 接続の数を減らし、最も信頼性の高い接続に焦点を当てる新しいポーズグラフの構築方法を提案し、作業をより早く簡単にしました。
- ポーズグラフの接続の重みを調整する改善された方法を提供し、登録プロセス中により安定で正確な結果を可能にしました。
ポーズグラフの構築
良いポーズグラフを作成するには、2つのポイントクラウドがどれだけ重なっているかを評価することから始めます。各ポイントクラウドからグローバルな特徴を抽出し、これらの特徴を通じて重なりを特定します。重なりスコアが高いペアのスキャンのみをリンクすることで、信頼性の高い接続で満たされたスパースなグラフを作成できます。
このアプローチにより、精度を維持しつつ、ペアワイズ登録の数を減らし、最終的に登録プロセスを加速できます。
重みの初期化とポーズの同期
ポーズグラフを作成したら、各接続の信頼性に基づいてエッジの重みを初期化します。この信頼性は、2つのスキャン間で成功裏に一致したポイントの数によって決まります。一致のカウントが多いほど重みが高くなり、少ないほど重みが減少します。
次のステップは、回転と翻訳の同期として知られる方法を使ってポーズを同期させることです。各回転と翻訳が期待される値からどれだけ離れているかを計算し、それに応じて重みを調整します。重みが正確であればあるほど、結果が安定します。
履歴再重み付け関数
私たちの方法には、履歴再重み付け関数というユニークな機能が含まれています。この関数は、現在の重みだけでなく、以前の反復も考慮します。これにより、初期のエラーが最終結果に過度の影響を与えないようにします。この慎重なバランスにより、外れ値に惑わされるのを防ぎ、登録の全体的な質を向上させます。
評価と結果
私たちは、人気のあるデータセット(3DMatch、ScanNet、ETHなど)で私たちの方法をテストし、他の既存の方法と比較してどれだけうまく機能するかを見ました。結果は、私たちのアプローチがより早く動作し、ポイントクラウドの整列がより正確になることを示しました。
たとえば、登録のリコールが改善され、他の方法よりも高い割合のポイントペアを正しく整列させることができました。さらに、私たちの方法では、ペアワイズ登録が大幅に少なくて済み、時間とリソースを節約できました。
他の方法との比較
従来の方法と比較した際、私たちのアプローチは明らかな利点を示しました。確立された技術は通常、完全に接続されたグラフを使用するか、限られた方法でのみエッジを剪定して多くのエラーを引き起こしました。それに対して、私たちの方法のスパースグラフ構築は、より良い初期接続とより正確な整列を可能にします。
また、私たちの方法は、未知のデータセットに直面しても効果を維持できることもわかりました。人気のある学習ベースの方法が新しいシナリオで苦労する一方で、私たちはさまざまな環境で高いパフォーマンスを維持することができました。
実用的な応用
私たちがポイントクラウド登録で行った改善は、さまざまな現実のアプリケーションに特に有益です。たとえば:
- 3D再構成: 様々な角度から撮影された複数の画像から正確な3Dモデルを作成すること。
- ロボティクス: ロボットが環境をよりよく理解できるように、空間を正確にマッピングすること。
- 拡張現実: ARシステムがデジタル情報を現実世界に正確に重ねる手助けをすること。
ポイントクラウド登録の速度と精度を向上させることで、正確な3Dモデリングに依存するいくつかの分野における進展に寄与します。
今後の課題
私たちの方法は強力な結果を示していますが、改善の余地があることも認識しています。今後の取り組みでは、グローバルな特徴抽出プロセスを洗練させたり、特に挑戦的なスキャンペアの扱いを改善することに注力できるでしょう。
さらに、新しいニューラルネットワーク技術を探求することで、登録性能と堅牢性をさらに向上させることができるかもしれません。この作業を継続して、ポイントクラウド登録をさらに効率的で信頼できるものにすることを目指しています。
結論
要するに、私たちは多視点ポイントクラウド登録のための新しい方法を導入し、速度と精度を大幅に向上させました。重なりの推定にニューラルネットワークを活用し、独自の履歴再重み付け関数を使うことで、この分野の新しい基準を設定しました。私たちの結果は、このアプローチが異なるデータセットや条件で効果的であることを示しており、ポイントクラウド技術のさらなる進展への道を開いています。
3Dモデリングやコンピュータビジョン技術が進化し続ける中、私たちの仕事は、ポイントクラウドデータから正確な3Dモデルを構築するためのより効率的で信頼性の高い方法の開発において重要な貢献を果たしています。
タイトル: Robust Multiview Point Cloud Registration with Reliable Pose Graph Initialization and History Reweighting
概要: In this paper, we present a new method for the multiview registration of point cloud. Previous multiview registration methods rely on exhaustive pairwise registration to construct a densely-connected pose graph and apply Iteratively Reweighted Least Square (IRLS) on the pose graph to compute the scan poses. However, constructing a densely-connected graph is time-consuming and contains lots of outlier edges, which makes the subsequent IRLS struggle to find correct poses. To address the above problems, we first propose to use a neural network to estimate the overlap between scan pairs, which enables us to construct a sparse but reliable pose graph. Then, we design a novel history reweighting function in the IRLS scheme, which has strong robustness to outlier edges on the graph. In comparison with existing multiview registration methods, our method achieves 11% higher registration recall on the 3DMatch dataset and ~13% lower registration errors on the ScanNet dataset while reducing ~70% required pairwise registrations. Comprehensive ablation studies are conducted to demonstrate the effectiveness of our designs.
著者: Haiping Wang, Yuan Liu, Zhen Dong, Yulan Guo, Yu-Shen Liu, Wenping Wang, Bisheng Yang
最終更新: 2023-04-02 00:00:00
言語: English
ソースURL: https://arxiv.org/abs/2304.00467
ソースPDF: https://arxiv.org/pdf/2304.00467
ライセンス: https://creativecommons.org/licenses/by/4.0/
変更点: この要約はAIの助けを借りて作成されており、不正確な場合があります。正確な情報については、ここにリンクされている元のソース文書を参照してください。
オープンアクセスの相互運用性を利用させていただいた arxiv に感謝します。