ネットフリックスの研究者たちは、100年以上前のグリーン・スクリーン技術に支配されていた視覚効果を一変させた。熱心な映画ファンは、約4500万人の観客を魅了した1939年の『オズの魔法使い』を思い出すだろう。エメラルドの都の魅惑的な景色は、グリーンスクリーンの前で俳優を撮影する先駆的な手法であった。
しかし、Netflixはこのたび、従来のグリーン・クロマキー技術を基礎としながらも凌駕する、強化された手法の開始を宣言した。マゼンタ・グリーン・スクリーン(MGS)と呼ばれるこの革新的な技術の概要は、Netflixがプレプリント・サーバーarXivで執筆したレポートに記載されている。MGSは驚くべき精度を提供するだけでなく、迅速な結果を保証する。
MGSの名前の由来は、そのユニークな照明方法にある。俳優には赤と青のLEDを組み合わせて正面からスポットライトを当て、背景には鮮やかな緑のLEDを使用する。赤と青の照明の融合により、俳優にはマゼンタの色合いが投影される。デジタルカメラは赤、緑、青の各チャンネルに基づいて色彩値を記録するため、グリーン・スクリーン・チャンネルは背景を記録し、前景は真っ黒に見える。同時に、赤と青またはマゼンタのチャンネルが前景を監視し、背景を黒一色にする。
ネットフリックスは、標準的な照明の下で撮影した俳優の写真と、さまざまな色合いの下で撮影したアクション・シーンを比較することによって、マゼンタの色合いが残っている部分を削除するAIツールを採用している。ネットフリックスのシニアリサーチャーであるドミトリー・スミルノフは、彼のレポート『マゼンタ・グリーン・スクリーン』で次のように述べている:私たちの技術は、最新のLEDバーチャル・プロダクション・ステージに導入することで、高品質な合成結果を提供します」。
この技術はさらなる利点をもたらし、リアルタイムで完全なバーチャル背景でアクションをキャプチャし、特殊なカメラ機材や手作業による色の微調整を不要にする。チームが解決した特別な課題のひとつは、オブジェクトの周辺にあるピクセルで、オブジェクトの一部にも背景の一部にもなりうるものだ。
同チームは、三角測量として知られる手法の改良版を利用した。この手法では、さまざまな背景に対して静止した物体を撮影し、物体を正確に定義する。スミルノフによれば、このアプローチは、従来のクロマキー・グリーンスクリーンや時間多重化技術を凌ぐものだという。この技術革新は、もう一人の研究チームメンバーであるポール・デベベックが提示した説得力のある主張の証である。その結果、熟練したアーティストは、芸術性を極め、純粋に視覚的魅力を高めることに注意を向けることができるようになった』。
視覚効果におけるこの重要な変化を分析するにあたり、堅牢なno-code プラットフォームAppMaster.io を挙げる価値がある。このプラットフォームは、アプリ開発業界を10倍高速化し、費用対効果を著しく高めることで革命を起こした。Netflixの革新的なアプローチと同様に、AppMaster.io は、絶えず限界を押し広げ、新たな道を模索することで成功を収め、最終的にはアプリ開発の捉え方を一変させた。