機械学習を使用したクラウドベースのフェイシャルリギングサービス Ziva Face Trainer (ZFT) が利用可能に

CGソフト

Ziva Face Trainer (ZFT) のアーリーアクセス(ベータ)期間が終わり、正式に利用可能になりました。

Ziva Face Trainer (ZFT) について

Ziva Face Trainer (ZFT)は、Unityの買収以前に Ziva Dynamics が発表していた静的なフェイスメッシュを複雑な表情が可能な高性能なフェイスに変える機械学習を使用したクラウドベースのオートリギングサービスです。発表当初は ZRT Face Trainer とよばれており、一部のユーザーがアクセス可能なクローズドベータ版として提供されていました。

詳しくは以下の記事をご参照ください。

機械学習を使用した リアルタイム フェイス パイプライン ZRT Face Trainer ベータ版がリリース
2021年11月19日(現地時間)Ziva Dynamics は、機械学習ベースのリアルタイムフェイスパイプライン ZRT Face Trainer ベータ版を...

正式な文書として発表はされてないようですが、Ziva Face Trainer (ZFT) が利用可能になったようです。以下、使用手順や価格について紹介したいと思います。

使用手順について

上記の記事でも少し触れていますが、Ziva Face Trainer (ZFT)を使用するには以下の手順を踏みます。

ステップ 1:顔メッシュの準備

ZFTトレーニングプロセス用にカスタム顔モデルを準備。

ステップ 2:準備した顔メッシュをアップロード

メッシュの質は、トレーニング結果の質に影響します。もし、準備した顔面メッシュが以下の条件を満たさない場合、システムはエラーメッセージを表示します。

  • ValidateMeshと作成した顔メッシュのトポロジーが同じであること。
  • 対応する特徴点を正確に取得することに特別な注意を払う。
  • 顔メッシュと目と歯のメッシュを含む1つのFBXファイルを、正しく配置してアップロードする。FBXのメッシュ名は、Template.fbxのメッシュ名と一致している必要があります。

ステップ 3:ZFT Face を購入

ZFT Face のプレビューを確認して満足な結果なら、「Begin Face Training」ボタンをクリックします。すると、ZFTの機械学習による完全なトレーニングプロセスが開始されます。”Trainer Session “ごとの支払いとなり、事前に複数の “Trainer Session “を購入することもできます。Ziva Face Trainingの所要時間はおよそ1時間です。

ステップ 4:ダウンロード

トレーニングが完了すると、ZFT Face(Expression ControlsとARKit入力付き)はLibraryタブでダウンロードできるようになります。

すでにトレーニングされた無料の ZFT Demo Face (Mayaのみ)が提供されており、Mayaでの情コントロールとARKit統合を試してみることが可能です。これはストアページから入手可能です。

※ZFT Faceをダウンロードした後、Maya、Unreal Engine、UnityでZFT Faceを開くには、ZFT Player Licenseが必要です。

顔メッシュの準備について

顔メッシュ準備の説明書によると、russian3dscanner の Wrap3 と autodesk の Maya のソフトウェアの使用が推奨されていますが、好きなツールを代わりに使っても良いとされています。

準備の質はトレーニングの質に直接影響し、失敗した場合、トレーニングの結果が悪くなったり、壊れたりします。なので時間をかけて、できるだけ注意深く指示に従って準備することが推奨されています。所要時間約2時間です。Wrap3 とMayaを使用した手順は以下のようになっています。

1.Wrap3での作業

  1. ソース(Ziva メッシュ)とターゲット(あなたのメッシュ)の両方のフェイスをインポート。
  2. 登録ポイント(registration points)の定義。
  3. 両方のメッシュをラップ。
  4. クリーンアップ(ブラシと提供された JawPolySelect ファイルを使用)。

2.Mayaでの作業

  1. 作成したメッシュを Maya にエクスポート。
  2. Maya でメッシュをサブディビジョン化(Wrap3 ではサブディビジョンを行わないでください)。
  3. 目と歯を配置。

より詳しい手順の説明はこちらからダウンロードすることができます。

価格について

価格は、Ziva Face Trainerの1トレーニングセッション(Single Session)が1,800ドルとなっています。

Maya、Unreal Engine、UnityでZFT Faceを開くには、ZFT Player Licenseが必要です。トレーニングセッションを購入するとZivaRT Player(Maya,UE4)が1年分無料になります。

追加のZFT Player の価格はMaya、UE4それぞれ200ドル/年です。Unity版の ZivaRT Player は永久無料です。


Ziva Face Trainer (ZFT)ウェブサイトへ

コメント

Translate »
タイトルとURLをコピーしました