ODMはLytroの完遂である

機材の山から引っ張り出した一台が、理論に歴史を与えた

三日前、私は Observation-Dependent Materialization（観測依存型マテリアライゼーション、ODM）についての最初の業界向け投稿を出した。空間を、あらかじめ組まれたポリゴンメッシュとしてではなく、確率的な物理ポテンシャルの場として捉え直し、レンズ光学の介入をトリガーとしてオンデマンドに実体化させる——そういうフレームワークである。

その投稿の後、何か思い出しかけていた。機材の山をかき分けて、目当てのものに辿り着いた。Lytro Illum である。

手に取った瞬間に、気づいたのだ。

ODM は新しいアイデアではない。業界がおよそ十年前に、失敗として葬り去った古いアイデアの、完遂である。

その名前は、Lytro。

光線場という失われた理念

Lytro社（2006–2018）は、たった一つの主張を会社の土台に据えていた。

「光線場は、すでに空間に存在している。カメラは、その一部を読み出す装置にすぎない」

これは、ほぼ逐語的に、ODM が空間細胞（Spatial Cell）について主張していることと同じだ。

2014年に彼らが送り出した Lytro Illum は、40メガレイのプロフェッショナル光線場カメラだった。1/1.2インチ（10.82×7.52mm）のCMOSセンサー上に約20万個のマイクロレンズアレイを配置することで、1画素あたり複数方向の光線情報を同時に記録する構造を持った。史上初めて、世界を「像」としてではなく「光線の場」として扱う量産型デバイスが、現実に市場に出た瞬間である。

しかし四年後、Lytro は消えた。Google に技術を売却し、ひっそりと事業を停止した。光線場技術は「商業的失敗」として歴史の棚に整理された。

けれど、理念は、一度も間違っていなかった。

ただ、早すぎたのだ。

Lytro を阻んだ三つの壁

Lytro は、光線場をひとつのハードウェア筐体の中に閉じ込めて捕捉しようとした。この戦略が、三つの構造的な壁にぶつかった。

壁1：センサー解像度の限界

Illum の 40MP センサーは、角度情報と空間情報に分配された結果、最終的な空間解像度は約 5MP に留まった。角度と空間が、同じ固定ピクセル予算を奪い合うしかなかったのだ。

壁2：記録範囲の狭さ

単一筐体で捕捉できる光線場は、レンズの視錐台（フラスタム）内という、実際の環境のごくごく一部でしかない。ショット一つ分、ロケーション全体の光線場を保持することは、物理的に不可能だった。

壁3：計算コスト

光線場を保存し、処理し、表示するためのデータ量と演算資源は、2010年代中盤のコンピューティング環境では現実的ではなかった。

この三つは、光線場という理念そのものの失敗ではない。ハードウェア単体で光線場を完結させようとした戦略の失敗である。

理念は無傷だった。手段が時代に追いついていなかっただけだ。

ODM は、三つの壁をどう突破するか

十年以上を経て、三つの壁はそれぞれ突破可能となった。

壁1 → マルチソース統合による突破

ひとつのセンサーに全情報を背負わせる代わりに、ODM は役割を分散する。BLK レーザースキャンが絶対座標を、ドローン空撮フォトグラメトリが広域の幾何構造と SH による環境照明を、デュアル360度ステレオカメラが人間スケールの視差と近接質感を、それぞれ専門化して受け持つ。各ソースから得られる断片的なデータを、空間細胞フィールドに非破壊的に注入することで、単一ハードウェアの分解能制約から解放される。

壁2 → 空間スケールへの拡張

ODM の光線場は、視錐台内に閉じていない。環境全体が空間細胞の集合体として定在し、カメラが向けられた瞬間に、任意の視点・任意のレンズで、そこから光線場が読み出される。光線場は「1ショット分」ではなく「環境全体」として、そこに在る。

壁3 → AI による光線補完

記録された光線ベクトルの間隙——Lytro が物理センサーでは埋められなかった領域——を、AI の推論能力が補完する。空間細胞は、観測された光線データから、観測されていない方向の光線を生成する。これは「機械学習によるライトフィールド超解像」と呼ぶべき処理であり、Lytro の時代には存在しなかった計算資源である。

つまり、ODM は Lytro の否定ではない。ODM は Lytro の完遂である。理念を継承し、時代が追いついた技術で、手段だけを刷新する。

理論から検証へ

ここから先は、具体的な話だ。

私は Lytro Illum を持っている。今も動く。

Jan Kučera 氏がアーカイブ化した Lytro Desktop 5.0.1 は、今も LFP ファイルを開く。オープンソースの lfptools 系ツール群は、今も LFP データをマイクロレンズアレイレベルまで分解できる。

私は、ODM 白書 v0.2 に向けて、三段階の実証実験を計画している。

1. 対比キャプチャ

同一被写体を、Lytro Illum（光線場記録）、一般的な単眼カメラ（単一視点 2D）、そして ODM 想定ソース（BLK / ドローン / 360度ステレオ）でそれぞれ撮影し、並置する。ODM が構築しようとしている空間細胞フィールドは、Lytro が 1台の筐体内で物理的に実現しようとしたものの、空間スケールへの拡張である——この主張を、視覚的に提示する。

2. LFP データ構造と空間細胞属性の対応関係の解析

Illum が出力する LFP ファイルを lfptools 系ツールで分解し、マイクロレンズアレイの生データ、u-v 方向のサンプリング構造、角度解像度の実測値を抽出する。これらを ODM の空間細胞属性スタック（座標、BSDF、媒質特性、相互作用カーネル、信頼度）と 1 対 1 で対応させる表を作成し、両者の技術的系譜を明示する。

3. 同一シーンでのアルゴリズム適用実証

Lytro Illum で撮影した光線場データに対し、ODM の「レンズ駆動型変形」アルゴリズム（インナー／アウターフラスタム分離、奥行方向のセル伸長、周辺部の放射状横伸び）を適用したリフォーカス処理を実装する。Lytro Desktop による純正リフォーカスとの比較により、ODM アルゴリズムの光線場処理への一般化可能性を検証する。

これは郷愁ではない。要点はこうだ——ODM には、動作する先行者がいる。失敗した先行者ではあるが、その失敗理由は今や精密かつ機構的に説明可能であり、その理念は「拡張可能である」という事実そのものによって、逆に正当性を証明されている。

v0.2 準備中

ODM 白書の次版 v0.2 には、この系譜と上記の検証計画を扱う専用章を新設する。

前回の投稿で挙げたコラボレーション対象——VFX スタジオ、研究機関、パイプラインエンジニア、ハードウェアパートナー——は、引き続き募集中である。今回、もう一つ加えたい。

Lytro、Raytrix、あるいはその他の光線場関連プロジェクトに関わった経験をお持ちの方。もし、あの時代に公開されなかった知識をお持ちなら、ぜひお話ししたい。

Lytro が目指したものは、死んでいない。ただ、スタックの残りが追いつくのを待っていただけだ。

関連リンク

・白書 v0.1（v0.2 準備中）: https://lnkd.in/gd7WbUKs ・LinkedIn 同テーマ英語版投稿: https://www.linkedin.com/posts/jeffry-kb-59722887_observation-dependent-materialization-a-activity-7451206229361688576-HvkT?utm_source=share&utm_medium=member_desktop&rcm=ACoAABJdY0MBhCFIgW5Aw3ZNNmEJue2k00W2gyk

著者

Jeffry "Galapagos" Kobayashi（小林真吾） The Materialization Project X: @Jeffry_iguana_K Mail: gokigenda4@aol.com

#VFX #バーチャルプロダクション #デジタルツイン #Volumetric #NeuralRendering #CinemaCamera #ODM #Photogrammetry #LiDAR #LightField #Lytro #ComputationalPhotography #Plenoptic #光線場 #映像制作 #映像技術 #観測依存型マテリアライゼーション