Substance Sampler photogrammetry VS competition

Dimitris Katsafouros

16 Feb 202313:04

Summary

TLDRこのビデオスクリプトでは、Adobeがリリースした新しいバージョンのSubstance Samplerの機能を比較分析しています。Photogrammetryを利用したリアルワールドの物体スキャンが可能で、テクスチャ作成やプロシージャルワークフローが一つのアプリで完結するという点が強調されています。しかし、Meta ShapeやPhoto Catchなど他のソフトウェアと比較して、スキャナリングソリューションの品質とパフォーマンスに関するいくつかの問題点が指摘されています。最終的には、Substance Samplerの潜在的な力は高く、改善が期待されるものの、現在は他のアプリと比べてまだ成長の余地があると結論づけています。

Takeaways

📈 Adobeが新たにリリースしたSubstance Samplerのバージョンでは、写真測量を用いてリアルな物体をスキャンできる機能が追加されました。
🔍 Substance Samplerは、スキャン、テクスチャ作成、プロシージャルワークフローを一つのアプリで完結させることを約束しています。
🤖 Meta ShapeとPhotoCatchという他のソフトウェアと比較して、Substance Samplerのスキャンソリューションの性能をテストしました。
🚫 Substance Samplerではカメラのセンサーサイズとレンズ情報を手動で入力する必要があり、これはプロセスを簡素化するアプリとしては不自然です。
🧩 Substance Samplerは画像のアライメントプロセスでいくつかの問題に直面し、31枚の画像をアライメントできませんでした。
🐞 SamplerのRAWオプションを使用すると、完全なメッシュを出力できないバグが存在するようです。
🔄 高品質オプションを選択することで、期待していたメッシュ結果を得ることができましたが、詳細度は不足しています。
📅 PhotoCatchはAppleのSDKを利用しており、詳細さとスピードの両方を提供しています。
🌟 Meta Shapeはメッシュの詳細さと質に優れていますが、PhotoCatchほど高速ではありません。
⏱️ 処理時間において、AppleのSDKが最も速いとわかりました。Substance Samplerは次いで、Meta Shapeが最も遅いとのことです。
🔧 Substance Samplerはまだ多くのバグを抱えており、品質とパフォーマンスを改善する必要がありますが、将来的には一つのアプリで全てのフォトグラメトリニーズを満たす可能性があると期待されています。

Q & A

アドーブがリリースした新しいバージョンのサブスタンス・サンプラーはどのような機能が追加されましたか？
-アドーブはサブスタンス・サンプラーにフォトグラメトリーを利用したリアルワールド物体のスキャン機能を追加しました。この新機能により、スキャン、テクスチャ作成、プロシージャルワークフローが全て一つのアプリ内で行えるようになりました。
サブスタンス・サンプラーのスキャンソリューションは他のソフトウェアと比較してどのくらいの性能を持っていますか？
-ビデオスクリプトでは、サブスタンス・サンプラーをメタシェイプとフォトキャッチの2つのソフトウェアと比較しています。メタシェイプは機能は優れているが遅いとされ、フォトキャッチはAppleのフォトグラフィSDKを使用しており高速で詳細なメッシュを生成できるとされています。
ビデオスクリプトで使用されたテストオブジェクトは何ですか？
-テストには大きな岩、小さなコンクリートの欠片、木の棒の3つのオブジェクトが使用されました。これらのオブジェクトを使って、各ソフトウェアのスキャン能力を比較しています。
サブスタンス・サンプラーのインターフェースはどのような特徴を持っていますか？
-サブスタンス・サンプラーのインターフェースはシンプルですが、カメラのセンサーサイズやレンズ情報を入力する必要がある点が特徴で、通常はその情報が自動で取得されると期待される箇所です。
ビデオスクリプトで述べられた「raw」オプションとは何を意味していますか？
-「raw」オプションは、サブスタンス・サンプラーで使用される出力オプションの一つで、最高の結果を得るために選択されましたが、完全なメッシュを出力できなかったバグがあることが明らかになりました。
メタシェイプとフォトキャッチはどのようにサブスタンス・サンプラーと比較されていますか？
-メタシェイプとフォトキャッチは、詳細なメッシュとテクスチャを生成する能力においてサブスタンス・サンプラーより優れていると評価されています。特にフォトキャッチはAppleのSDKを利用しており、高速かつ高品質な結果を提供しています。
ビデオスクリプトで述べられた「ハイ」設定とは何を意味していますか？
-「ハイ」設定はサブスタンス・サンプラーの出力オプションの一つで、完全なメッシュを期待する結果を得るために選択されましたが、詳細度は「raw」オプションに比べて劣ります。
スキャン時間において、どのソフトウェアが最も高速ですか？
-AppleのSDKが最も高速で、次にサブスタンス・サンプラー、そしてメタシェイプが続きます。ただし、サブスタンス・サンプラーは91枚の写真のうち60枚しか処理できていなかったため、実際の比較は異なる可能性があります。
サブスタンス・サンプラーの最終的な評価はどのようなものでしたか？
-サブスタンス・サンプラーはまだバグが多く、品質とパフォーマンスにも改善の余地があると評価されていますが、将来的には一つのアプリケーションで全てのフォトグラメトリーニーズを満たす可能性があると期待されています。
ビデオスクリプトの作成者は、現在の状況でどのソフトウェアを使用する予定ですか？
-ビデオスクリプトの作成者は、現段階ではサブスタンス・サンプラーのバグが直るまで現状の分割されたワークフローを使用する予定であり、改善が期待されています。

Outlines

00:00

🚀 Adobeの新しいサブスタンス・サンプラーの評価

Adobeが新たにリリースしたサブスタンス・サンプラーのバージョンを評価。このアプリはフォトグラメトリー技術を用いて、リアルな物体をスキャンし、テクスチャ作成やプロシージャルなワークフローを一つのアプリで完結させることができるという特徴がある。しかし、実際には他のソフトウェアであるMeta ShapeやPhoto Catchと比較して、どのように機能するかを検証する。Meta Shapeは遅いが高性能なアプリで、Photo CatchはAppleのSDKを利用し高速かつ詳細なメッシュを生成できる。Reality CaptureはMac版がなく比較対象から外れている。まず大きな岩をスキャンし、91枚の写真を使用してテストを行う。サブスタンス・サンプラーはカメラのセンサーサイズやレンズ情報を入力する必要があり、これはアプリのプロセスを簡素化しようとしているのに不釣り合いに感じる。アライメントプロセスでは多くの画像が揃わず、最終的なメッシュ生成ではRAWオプションでは完全なメッシュが生成されなかったが、HIGHオプションで期待通りの結果を得ることができた。

05:02

🔍 詳細度の比較と処理時間の評価

サブスタンス・サンプラー、Photo Catch、Meta Shapeの3つのアプリを通じてスキャンされたメッシュの詳細度と処理時間を比較。Photo CatchはAppleのSDKを利用しており、詳細度と速度の両面で優れている。Meta Shapeはメッシュのサイズが大きいが、詳細度はAppleの結果に近く、メッシュの混ぜ方のアルゴリズムが緩和している。サブスタンス・サンプラーは画像のアライメントに問題があり、RAWオプションでは完全なメッシュを生成できなかったが、HIGHオプションでは期待通りの結果を得られた。処理時間ではAppleのSDKが最も速いとされ、サブスタンス・サンプラーは画像の数が少なく、Meta Shapeは遅いが品質は高いと評価されている。

10:04

📈 さらなるテストとサブスタンス・サンプラーの将来性

サブスタンス・サンプラーの他のオブジェクトに対するスキャン能力をさらにテストし、コンクリートの欠片や木の棒をスキャンして詳細度を比較。サブスタンス・サンプラーはハイオプションでポリゴンの上限に達し、他の2つのアプリと比べて詳細度は劣るが、それでも十分な品質である。Photo CatchはAppleのSDKを利用し、より詳細なメッシュを生成し、Meta Shapeは詳細度は劣るが高品質なスキャン結果を提供している。スキャン時間ではPhoto Catchが最も速いとされ、サブスタンス・サンプラーは品質と速度のバランスが良かったが、完全なRAW出力が利用できず、品質向上とパフォーマンスの改善が期待されている。サブスタンス・サンプラーはまだ多くのバグがあり、改善が必要なが、将来的には一つのアプリですべてのフォトグラメトリーニーズを満たすことができると期待されている。

Mindmap

Keywords

💡サブスタンス・サンプラー

Adobe社がリリースした3Dスキャンソフトウェア。ビデオのテーマは、このソフトウェアのスキャン能力を他のソフトウェアと比較することである。ビデオでは、サブスタンス・サンプラーのインターフェースやスキャンプロセス、そして結果について詳細に説明されている。

💡フォトグラメトリー

リアルワールドのオブジェクトをスキャンし、3Dモデルを作成するための技術。ビデオでは、サブスタンス・サンプラーがこの技術を利用して物体をスキャンすることができる機能が強調されている。

💡メタシェイプ

ビデオ内で比較対象として使用された別の3Dスキャンソフトウェア。メタシェイプはスキャン能力が高いが、処理速度が遅いという欠点があると説明されている。

💡フォトキャッチ

AppleのフォトグラフィSDKを使用するスキャンユーティリティソフトウェア。ビデオでは、フォトキャッチの高速さと詳細なメッシュの生成能力に重点が置かれている。

💡テキスチャー

3Dモデルの表面に貼られる画像。ビデオでは、サブスタンス・サンプラーがスキャンされたモデルにテキスチャーを作成することができる点が強調されている。

💡プロシージャルワークフロー

ビデオ内で言及された用語で、サブスタンス・サンプラーが提供する一連の自動化されたプロセス。これは、スキャンからテキスチャリング、そして最終的なモデルの完成までの一連のステップを意味する。

💡ポイントクラウド

3Dスキャンの結果として得られる、オブジェクトの表面を表すポイントの集合。ビデオでは、サブスタンス・サンプラーがポイントクラウドを生成し、それをメッシュに変換するプロセスが説明されている。

💡メッシュ

3Dモデルを構成する三角形や多角形の集合。ビデオでは、サブスタンス・サンプラーが生成するメッシュの詳細度と品質について議論されている。

💡ポリゴンキャップ

ビデオ内で言及された用語で、サブスタンス・サンプラーの「ハイ」設定でメッシュのポリゴン数を制限する機能。これは、最終的なモデルの詳細度に影響を与える。

💡処理時間

ビデオ内で比較された各ソフトウェアのスキャンプロセスに要した時間。特に、AppleのSDKが最も高速であることが強調され、他のソフトウェアと比較されている。

💡バックグラウンド

ビデオ内で言及された用語で、スキャンプロセスでオブジェクト以外の背景要素を識別し、モデルから除外する機能。サブスタンス・サンプラーとフォトキャッチは背景を効果的に除去することができると説明されている。

Highlights

Adobe发布了新版本的substance sampler，增加了使用摄影测量法扫描现实世界对象的功能。

substance sampler承诺提供一站式扫描、纹理创建和程序化工作流解决方案。

测试substance sampler的能力，将其与meta shape和photo catch两款软件进行比较。

meta shape功能强大但速度较慢，而photo catch使用Apple的摄影SDK，速度快且能生成详细网格。

substance sampler在输入相机传感器尺寸和镜头信息时存在问题，不能自动获取这些信息。

substance sampler在图像对齐过程中无法对齐31张图像，而meta shape仅对齐了3张。

substance sampler的raw选项存在bug，无法输出完整网格。

photo catch使用Apple的SDK，生成的网格细节丰富，与substance sampler相比有显著差异。

meta shape的网格质量接近Apple的结果，但算法更为宽容，细节融合更好。

Apple的SDK在处理速度上远超其他软件，而substance sampler处理了较少的图像。

substance sampler在处理第二个对象时没有图像问题，但与其他软件相比细节不足。

photo catch和meta shape生成的网格细节远超substance sampler。

substance sampler的raw选项在所有测试对象中均未工作，限制了其输出质量。

photo catch在扫描木棍时捕获了惊人的细节，而substance sampler的多边形限制影响了细节表现。

meta shape在细节方面表现良好，但结果不如photo catch锐利。

substance sampler和photo catch都能智能去除背景元素，而meta shape则捕获了一些环境细节。

photo catch在扫描时间上最快，substance sampler次之，meta shape最慢。

尽管substance sampler还有改进空间，但其一站式解决方案的方向具有巨大潜力。

如果substance sampler能清除bug并提高性能，可能会成为用户的主要选择。