ビデオからスプラット
ビデオからスプラットは、動画または画像セットからスプラットを作成する機能です。この機能は、視覚的な入力を自動的に3Dポイントベースの表現に変換し、現実世界のシーンを簡単にArrival.Spaceに取り込むことができます。オブジェクト、環境、短いクリップをキャプチャして、複雑な3Dモデリングを必要とせずに3Dコンテンツに変換できます。
インターフェース
ビデオ/画像からスプラットへの処理を開始するには、右下のアクションボタン 1 を使用し、ビデオからスプラット 2 を選択します。
3 ファイルのアップロード
ビデオからスプラットのインターフェースが開き、画像またはビデオのどちらをアップロードするかを選択できます。 ファイルを選択するには、アップロードエリアにドラッグ＆ドロップするか、フィールド内をクリックしてシステムのファイルマネージャーを開いてください。
モバイルのみ
スマートフォンで直接ビデオを録画し、ローカルに保存せずにアップロードできます。トレーニングが正常に完了した後、アップロードしたファイルをダウンロードするオプションが利用可能になります。
4 プリセット
プリセットは、詳細設定に加えて事前定義された設定を自動的に適用するテンプレートです。 詳細設定を手動で変更しない場合は、プリセットの値のみが使用されます。 以下のオプションが利用可能です：
| 名前 | 最大ステップ数 | 画像解像度 | フレーム数 | SH次数 |
|---|---|---|---|---|
| Draft | 4k | 2k | 300 | Level 1 |
| Normal | 20k | 2k | 300 | Level 2 |
| High | 25k | 4k | 600 | Level 3 |
5 新しいスペースを作成
この設定が無効の場合、生成されたスプラットは現在のスペース内に配置されます。 自分のスペース内にいない場合は、この設定を変更できません。
6 詳細設定
詳細設定では、テンプレート設定を変更できます。これらの設定は現在開発中のため、機能はまだ限定的です。
設定を調整した後、タイトル横の左上にある戻るボタンをクリックし、送信を押してジョブを開始します。
1 最大ステップ数 (k) (スプラットトレーニング)
スプラットに適用されるトレーニングステップ数を定義します。値が高いほど詳細になりますが、処理時間も増加します。
2 画像解像度 (カメラ再構成)
カメラ再構成に使用される歪み補正済み画像の解像度を指定します。
3 フレーム数 (フレーム選択)
スプラット生成に使用されるフレームの最大数を設定します。
4 SH次数 (スプラットトレーニング)
球面調和関数の次数を制御し、ライティングと色の精度に影響します。
5 マルチカメラサポート (カメラ再構成)
複数のビデオをアップロードする場合や、異なるカメラで撮影された映像を使用する場合は、このオプションを有効にしてください。
処理プロセス
_送信_を押すとすぐに選択したファイルのアップロードが開始され、アップロードが完了するまで離れることはできません。インターネット接続が不安定な場合や離席する必要がある場合でも心配ありません。約24時間以内に同じファイルをアップロードしてアップロードを続行できますが、これは同じ名前のファイルの場合のみ有効です。
以下の画像は、スプラットが生成される過程を表しています。新しいスペースで行われる場合も、既存のスペースの一部として行われる場合も同じです。唯一の違いは、新しいスペースの場合はファイルタイトル（複数ファイルの場合は最初のファイル名）が使用されることです。
現在、一度に送信できるジョブは1つのみです。新しいジョブを送信しようとすると、古いジョブを中止するかどうか確認されます。
1 2 プログレスバー
スプラットが配置されるスペースの下部にプログレスバーがあります。クリック/タップすると、ビデオからスプラットの進捗状況の詳細ビューが開きます。 処理プロセスには以下のステップがあります：
1. ジョブの初期化
システムがサービスが現在使用中かどうかを確認します。サーバーが別のスプラットを処理中の場合、ジョブはキューに入れられます。
2. フレームの抽出 （ビデオの場合のみ）
アップロードされたビデオから大量の画像が抽出されます。
3. シャープネスの計算 （ビデオの場合のみ）
システムが抽出されたすべてのフレームを評価し、最もシャープなフレームを選択してさらなる処理に使用します。
4. 特徴抽出
選択された各画像から、ポイント、エッジ、テクスチャなどの主要な視覚特徴が検出・保存されます。
5. 特徴マッチング
複数のフレーム間で対応する特徴がマッチングされ、画像間の空間的関係が確立されます。
6. 画像の歪み補正
カメラパラメータを使用してレンズ歪みが補正され、3D再構成のための正確なジオメトリが確保されます。
7. スプラットトレーニング
処理された画像データを使用して3D Gaussian Splattingモデルがトレーニングされ、シーンが高品質で再構成されます。
3 ジョブの中止
ジョブをキャンセルするには、アイコンをクリックしてください。
4 スプラットプレビュー
システムがスプラットトレーニングを開始すると、詳細ビュー内にプレビューが表示されます。
5 ソースマテリアル
アイコンを使用してソースファイルをダウンロードできます。 このオプションは、スマートフォンで直接録画した場合に特に便利で、キャプチャした素材を確認・評価できます。
6 パラメータ
パラメータセクションには、適用されたすべての設定が表示されます。 同じソースマテリアルを使用しつつ、結果を改善するために特定の設定を調整したい場合に役立ちます。
ベストプラクティス
高品質な3Dモデルを作成するためには、素材をキャプチャする際にいくつかの重要なルールを守る必要があります。
推奨撮影ガイドライン
- カメラを動かしてオブジェクトの周りを円形に移動し、すべての面を均等にカバーしてください。
- カメラビューの中心にオブジェクトを置いてください。
- 視点を変えますが、カメラのパン、チルト、ロールは行わないでください。
- さまざまな角度からキャプチャしてください — 高い位置や低い位置からの視点も含めましょう。
- すべてのフレームで一貫した画角を維持するために、焦点距離を固定してください。
- ISO値を固定して、均一な露出を確保し、明るさのずれを防いでください。
- マニュアルフォーカスを設定して、対象のエリアやオブジェクトを正確に定義してください。
- 可能であれば、最適なテクスチャキャプチャのために均一で拡散した照明（例：曇りの日光や柔らかい室内照明）を使用してください。
画像
ビデオの代わりに画像をキャプチャする場合は、最低50枚、オブジェクトのサイズと複雑さに応じて理想的には200枚程度を撮影してください。
オブジェクトをさまざまな側面や角度から撮影し、上からや下からのビューも含めてください。
マニュアルフォーカスと固定ISOを使用してください。
ビデオ
3D再構成用のビデオを録画する場合は、撮影時間を20〜120秒にしてください。
カメラをオブジェクトの周りでスムーズに円形に動かし、複数の角度と高さからキャプチャしてください。
急な動きや強い光のコントラストは避けてください。