「もし写真をもっと違う角度から撮り直せたら、と願ったことはありませんか？ 新しいGoogleフォトの「オートフレーム」機能は、高度な画像編集でこの願いを叶えます。機械学習を用いて、写真を空間レイアウトを考慮した3Dシーンとして理解します。システムは、本質的に画像の3D空間内に仮想カメラを再配置します。これにより、これまで見ることのなかったコンテンツが生成され、新しい、本物の視点が生まれます。これは、元の固定された視点に制限される従来の編集とは異なります。このプロセスには、3Dシーン推定と生成インペインティングという2つの主要な段階が含まれます。3Dポイントマップが作成され、その後、生成モデルを使用して欠落部分が埋められます。MLは、被写体の顔と向きを自動的に検出し、理想的なフレーミングを決定します。また、広角写真の遠近感の歪みも修正します。この技術は現在Googleフォトで利用可能であり、「オートフレーム」機能を通じてポートレートを向上させます。ユーザーは、再構成された画像を代替写真レンディションとして簡単にアクセスできます。この開発は、Google DeepMindとGoogle Platforms & Devicesチームの共同作業でした。」