はじめに
Google DeepMindのMarcos SeefelderとPedro Velezが2026年4月22日、撮影済みの写真を新しいアングルで再構成できる技術を開発し、Google Photosの「Auto frame」機能として提供を開始したことを発表しました。本稿では、この機能の仕組みと実用上の意味について解説します。
参考記事
- タイトル: It’s all about the angle: Your photos, re-composed
- 著者: Marcos Seefelder (Staff Software Engineer, Platforms & Devices), Pedro Velez (Senior Research Engineer, Google DeepMind)
- 発行元: Google Research Blog
- 発行日: 2026年4月22日
- URL: https://research.google/blog/its-all-about-the-angle-your-photos-re-composed/
関連記事


要点
- Google Photosの「Auto frame」機能に、AIを使って写真の視点を後から変える技術が追加された
- 処理は2段階で構成される。①3D点群マップによる空間推定、②潜在拡散モデルによる隠れた背景の生成
- 顔の3D姿勢を検出して理想的なフレーミングを自動計算し、ワイドレンズによる歪みも補正できる
- ユーザーはAuto frameの候補一覧から再構成済み画像を選ぶだけで、操作は1アクションで完結する
詳細解説
従来の写真編集が抱えていた限界
スマートフォンで撮影した写真を後から調整する場合、これまでは主にトリミング(切り抜き)や拡大縮小が選択肢でした。しかし、これらの操作ではカメラを別の角度に向けていた場合の景色を再現することはできません。フレームの外に何があったかも、被写体との距離感を示す遠近感(パララックス)も、元の一枚に固定されたままです。
特にセルフィーで問題になりがちなのが、広角レンズによる歪みです。顔の一部がレンズに近すぎることで、鼻や顎が不自然に大きく見えることがあります。こうした「ほぼ完璧だが惜しい」写真は、Googleによれば多くのユーザーが経験しているものとのことです。
Auto frameの2段階処理
今回発表された技術の核心は、2D画像を3Dシーンとして解釈し直す点にあります。
第1段階では、3D点群マップ推定モデルが動作します。このモデルは画像の各ピクセルに対して3次元上の座標を割り当てることで、シーン全体の空間構造を再現します。人物の体や顔を高精度に再構成するために専用に調整されており、元の人物の外見が損なわれにくい設計になっています。同時に、元の撮影に使われたカメラの焦点距離も推定します。
第2段階では、仮想カメラの位置と向き(姿勢)を変更して3Dシーンを再レンダリングします。しかし、カメラ視点を動かすと元の画像には存在しなかった「穴」、つまり隠れていた背景が生じます。この穴を埋めるために潜在拡散モデル(Latent Diffusion Model)が使われます。このモデルはカメラパラメータが既知のペア画像データセットで学習されており、再レンダリングされた不完全な画像を入力として、自然な背景を生成します。生成にあたっては、元の画像の内容を忠実に保持しながら、未知の領域には適切な内容を補完するよう設計されています。
潜在拡散モデルは、高解像度の画像を直接扱う代わりに「潜在空間」と呼ばれる圧縮された表現を操作するアーキテクチャです。計算コストを抑えつつ高品質な画像生成が可能で、近年の多くの生成AI画像ツールの基盤技術としても広く使われています。
顔の向きを検出して自動フレーミング
この技術のもう一つの特徴は、ユーザーが手動で視点を操作しなくてよい点です。Google DeepMindによれば、MLモデルが主要な被写体の顔の位置と3D方向を検出し、3D点群マップと組み合わせることで理想的なフレーミングに必要なカメラパラメータを自動計算します。
また、広角フロントカメラで撮影したセルフィーに対しては、歪みを検出して仮想カメラの焦点距離を自動調整します。これにより、実際には広角で撮影された写真でも、より自然な遠近感の画像に補正されます。効果としては「撮影後に少し後ろに下がった」ような変化が得られると言えます。
Google Photosで利用可能に
現在、この機能はGoogle Photosの「Auto frame」機能の一部として提供されています。Auto frameの編集候補の中に再構成済みの画像が表示される形で実装されており、ユーザーは候補を選ぶだけで適用できます。複雑な操作は不要で、1アクションで完結する設計です。
なお、本機能は人物が写った対象写真に自動で適用されます。Google PhotosにはAI検索機能「Ask button」も導入されており、写真管理全体にAIが組み込まれる流れが続いています。
まとめ
今回の「Auto frame」の新機能は、写真を2D画像ではなく3D空間の記録として扱い、生成AIで未知の領域を補完することで視点を変えるという技術的なアプローチが特徴です。完全自動で動作するため、ユーザーは専門知識なしに恩恵を受けられます。写真編集AIが単なる補正ツールから「場面の再解釈」ツールへと変化しつつあることを感じさせる発表だと思います。
