クロマキー合成 vs AIマット処理どちらを使うべきか？

クロマキー合成は色に基づいています。ソフトウェアは、選択した色に近いすべてのピクセルを透明にします。緑色が使用されるのは、人間の肌の色とは大きく異なるためであり、カメラセンサーが緑色のチャンネルで最も詳細な情報を捉えるためです。このシンプルさが強みであると同時に、古典的な問題の根本原因でもあります。

• 照明がすべてです。 スクリーンは均一に照らされる必要があります。シワ、影、明るい部分があると、それらが異なる濃さの緑色になり、キーヤーで完全に除去できなくなります。実際には、スクリーンに2つのライトを当て、自分自身にも別のライトを当てる必要があります。
• 色移り（スピル）。 背景から光が反射し、髪、肩、肌の色が緑色に染まってしまいます。キーヤーには色移りを抑制する機能がありますが、ひどい色移り（スクリーンに近すぎると発生）は完全に除去できません。
• 緑色の服を着てはいけません。 緑色の服や小道具、場合によっては緑がかった目の色が、穴として合成されてしまいます。
• スペースとコスト。 実際に使用できるセットアップには、背景（布または紙）、フレームまたは壁掛け、そして最低でも2つのソフトボックスライトが必要です。現実的には80ユーロから300ユーロの費用がかかり、数平方メートルのスペースを常に確保しておく必要があります。セットアップと片付けには毎回時間がかかります。

その代わりに、価値のあるものが得られます。それは、あらゆるもの（人、ペット、製品、煙、ガラス製品など、スクリーンの前に置かれたもの）に対して機能し、リアルタイムで動作するキーです。そのため、放送局の天気予報スタジオや、恒久的なセットアップを持つストリーマーは今でもこれを使用しています。

AIマッティングは色を認識しません。コンテンツを認識します。大量の人物映像で学習されたニューラルネットワークが、各フレームのすべてのピクセルについて、そのうちどれだけが人物に該当するかを予測します（0から1までのソフトなアルファ値であり、単純な「はい/いいえ」ではありません）。VideoBGNinjaの中核となるモデルであるRobust Video Matting (RVM) は、映像に欠かせない要素を加えます。それが時間的な追跡です。フレームごとに再帰的なメモリを保持し、一瞬前の位置を記憶します。これにより、動きに合わせてエッジが安定し、フレームごとの写真切り抜きのようにちらつくことはありません。

実用上の利点：

• セットアップは不要です。 自宅のリビング、オフィス、または屋外で撮影できます。背景や照明設備は必要なく、緑色の服を着ても構いません。
• 髪の毛のエッジが自然に仕上がります。 モデルが出力するソフトなアルファ値により、細い髪の毛も部分的に透明になり、質の高いクロマキー処理と同様の効果が得られます。ただし、緑色の縁取りは発生しません。
• 追加コストは一切かかりません。 専用のハードウェアを購入する必要はありません。VideoBGNinjaなどのツールは、GPUサーバー上でモデルを実行し、無料の透明なWebMファイル、グリーンバックのMP4ファイル、およびアルファマットを提供します。

「AIによる背景除去の品質が悪い」という苦情の多くは、モデルの問題ではなく、修正可能な撮影上の問題に起因します。よくあるのは以下の点です。

• 物体の輪郭がフレームごとにちらつく。 通常は手持ちカメラを使用している場合に発生し、時間追跡機能が最も効果を発揮するのは、背景が静止している場合です。 静止した 背景にします。スマートフォンを安定した場所に置き、揺れを軽減します。
• 髪の毛がぼやけたり、灰色に見えたりする。 髪と背後の壁とのコントラストが低いか、光量が不足している可能性があります。照明を追加し、壁から離れてください。この点は、完璧に照らされたグリーンバックを使用することで、まだ改善できる場合があります。
• 人物の特定の部分が消えてしまう。 暗い部屋で暗い色の服を着ていると、背景として認識されてしまうため、照明を明るくするか、コントラストを調整して、両者を明確に区別できるようにします。
• 結果としてほとんど何も残らない。 フレーム内に明確な人物がいないか、または対象が人間による背景除去モデルでは処理できないオブジェクトやペットである場合です。そのような場合は、グリーンバックを使用するのが最適な方法です。

最初の試行で完璧な結果を得るための詳細な手順は、こちらをご覧ください。 きれいな切り抜きを作成するための自分自身の撮影方法.