凸版印刷、メタバース上に自分のデジタル分身を生成するサービス「メタクローンアバター」を開発

本サービスは、「メタクローンアバター」に自分自身の顔写真を1枚アップロードし、入力した身長と体重の情報を元に再現した、フォトリアルな3Dアバターを自動生成することができる。3Dアバターの自動生成には、GAN（敵対的生成ネットワーク）などのAI技術を活用し、低解像度の写真データからも3Dアバターを作成することが可能だという。また、架空の人物の顔写真を自動生成する事で、肖像権フリーの3Dアバターを利用する事もできる。

さらに、今後は「メタクローンアバター」に本人の肉声や表情、人格を再現するサービスを追加し、「メタクローンプラットフォーム」を拡大させるとのことだ。

現在、ヒトの身体的・生理学的な特徴（ヒトの外見）から、個性や感性、思考、技能などを含む内面までを再現する、ヒトのデジタルツインが注目されている。これらは、広告やエンタメ、接客など様々な分野で活用が期待されている。また、コロナ禍により外出が制限される中で、メタバース上での3Dアバターによる交流が活発化している。しかし、顔の情報を再現したフォトリアルな3Dアバターを製作するためには、CGクリエイターによる高度な技術と製作機材や高額なスキャンマシンを要するうえ、長期間の製作工程が必要になる。そのため、現在利用されているアバターの多くは、架空のキャラクターが使用されており、利用者本人を模したアバターはごく少数だという。

このような背景から、凸版印刷ではAIおよび3D復元技術を組み合わせることで、アバター生成の難しさを解決し、簡単にフォトリアルな3Dアバターを生成できる「メタクローンアバター」を開発。このサービスを活用することで、様々なメタバース体験ができるようになる。例えば、自分のアバターをゲームやバーチャルライブに登場させたり、バーチャルショッピングで自身のアバターに服を試着させることができたり、バーチャル観光で友人と集合写真を撮れたり、実際に会議室に集まっているかのようなバーチャル会議ができたりなどに利用できる。

・1枚の顔写真から、フォトリアルな3Dアバターを簡単に生成
利用者は、正面を向いている写真1枚をアップロードするだけで、短時間でフォトリアルな3Dアバターを自動で生成できる。生成した3Dアバターは、まばたきや口を開くことも可能で、自然な表情を見せる事ができる。

・多様な写真から3Dアバターを生成
本サービスでは、ディープラーニングなどのAI技術を活用することで、低解像度の写真や、ノイズがあり不鮮明な顔写真、モノクロ写真、絵画や古写真など、これまで3Dアバターの生成が困難とされていたコンテンツに対して、顔の構造・形状・表面・陰影・色等の特徴量を再現し、汎用性の高い修復を行う。また、物体の特徴や種類、隣接している領域等を考慮して、元々の色を予想し着彩することもできるので、様々な写真やコンテンツからフォトリアルな3Dアバターを生成することが可能だ。

・架空の人物の3Dアバターを生成
GAN（敵対的生成ネットワーク）を用いた人物生成アルゴリズムを利用して、架空の人物の3Dアバターを作成できる。これは、実在する人物の顔写真から生成した3Dアバターとは異なり、肖像権を持たない。これにより、利用者は権利処理を気にせずに利用できる3Dアバターを、手軽に生成することが可能だ。

・ニーズに合わせた多様なカスタマイズが可能
利用者は、生成する3Dアバターに身長体重などの身体情報を付与することで、利用者に近い体型の3Dアバターが生成できる。また、服装の変更やメガネなどのアクセサリーを選択することで、より自分の特徴や個性を再現した3Dアバターの生成が可能だ。

・モーションのカスタマイズが可能
生成された3Dアバターには、メタバース上で使いやすい「挨拶」や「歩き」などの基本モーションが付与される。カスタマイズで利用者自身に似たモーションを選択する事もでき、より再現性の高い3Dアバターを生成できる。