Snapseedにインタラクティブなオンデバイスセグメンテーションを導入
選択的な画像調整により、ターゲットを絞った強化が可能になり、写真の品質が向上します。以前は、特にタッチコントロールが不正確で処理能力が限られているモバイルデバイスでは、オブジェクトを編集するために分離するのが難しかったです。Snapseed on iOSでは、オブジェクトブラシを導入し、これらの調整を簡単かつ迅速に行えるようになりました。オブジェクトブラシを使用すると、ユーザーは単にオブジェクトにストロークを描くだけで、個別の編集のために選択できます。この直感的な機能は、Interactive Segmenterと呼ばれるデバイス上のAIモデルによって動作します。この高度なモデルは、単純なタップまたはラインのトレース後に、20ミリ秒未満で全体のオブジェクトまたは人物を検出して選択できます。モデルは、選択されたオブジェクトの境界に合わせて、正確なマスクを生成します。Interactive Segmenterのトレーニングには、大きな教師モデルから小さく効率的なエッジモデルへのBig Transferアプローチと知識の蒸留が含まれます。このプロセスにより、高品質のセグメンテーションが保証されながら、リアルタイムのレスポンス性が維持されます。システムは、画像とプロンプトの理解を別々のサブモデルに分離し、セグメンテーションの品質と低遅延をバランスさせます。最後に、画像サイズのマスクのアップサンプリングにより、詳細な調整のための高解像度の編集品質が保証されます。