NVIDIA、Inworld AIを搭載したCovert Protocolデモを発表

masapoco
投稿日
2024年3月19日 9:11
nvidia ace digital human

本日のGTC 2024の基調講演で、NVIDIAのJensen Huang CEOは、「Covert Protocol」と呼ばれる新しいAI NPCのデモを披露した。

このデモは、AIゲームのスタートアップであるInworld AIと共同で構築され、NVIDIAのAvatar Cloud Engine(ACE)テクノロジーを使用している。ACEは、NVIDIAが昨年5月に公開した未来的なラーメン屋のデモを動かしたのと同じ技術だ。

11月、MicrosoftはInworld AIとの提携を発表し、AI設計Copilotとキャラクター・ランタイム・エンジンを特徴とするマルチプラットフォーム・ツールセットを開発した。現在、Inworldの技術は、昨年のComputexで発表されたAvatar Cloud EngineプラットフォームであるNVIDIA ACE for Gamesに統合されている。

Unreal Engine 5上で構築されたCovert Protocolは、InworldのSDKを活用してMetaHumanとの統合を迅速かつシンプルにしている。

そしてNVIDIA ACEは、完全な「デジタル・ヒューマン・パイプライン」の提供を目指している。これは、カスタマイズ可能なNemotron大規模言語モデル(LLM)による自動音声認識(ASR)とテキスト音声合成(TTS)を可能にするRivaからなる。ここで開発者は、開発者のゲーム世界に合った特定のキャラクターのバックストーリーや性格を作成することが出来る。また、NeMo Guardrailsを使用したNPC用のプログラム可能なルールにより、シーンのコンテキスト内でプレイヤーのインタラクションをより適切に調整出来る。そして、NVIDIAのAudio2Faceテクノロジーを用いて、より自然な顔の動きが再現される。

Audio2Faceテクノロジーは、近日公開予定のMMO「World of Jade Dynasty」の映像でも紹介され、英語と北京語の両方の音声にリップシンクするキャラクターが実演された。Audio2Faceは、オーディオソースだけからゲームキャラクターの表情豊かなフェイシャルアニメーションを自動的に作成する。手作業でキャラクターの動きを修正する必要がなく、多言語でのゲーム制作を容易にするというものだ。また、近日公開予定のアクションMeleeゲーム『Unawake』のビデオクリップでは、Audio2Faceを使用して、シネマティックとゲームプレイの両方でフェイシャルアニメーションを作成する方法を実演している。

Inworld側では、開発者は特定のNPCごとに、性格、知識と認識力、目標、シーン、安全性、長期記憶、人間関係など、さまざまなパラメータを微調整できます。Inworld AI社のCEOであるKylan Gibbs氏も次のように述べている:

NVIDIA ACEのマイクロサービスとInworld Engineを組み合わせることで、開発者は、ダイナミックなナラティブを駆動できるデジタル・キャラクターを作成することができ、ゲーマーがどのように解読、推理、そしてプレイするかについて、新たな可能性を開くことができます。

開発者の採用を加速させるため、InWorldは近い将来、Covert Protocolのソースコードを公開する予定であり、開発者は技術デモから学び、それを使って独自のイノベーションを生み出すことができる。


Sources



この記事が面白かったら是非シェアをお願いします!


  • quantum
    次の記事

    ORCA Computing、ORCA PT-1フォトニック量子プロセッサーとNVIDIA CUDA Quantumを使用したハイブリッドアルゴリズムのデモを初公開

    2024年3月19日 9:36
  • 前の記事

    AppleがGoogleのAI「Gemini」をiPhone向けにライセンスするため交渉中と報じられる

    2024年3月19日 8:22
    final keyword header.width 1600.format webp
この記事を書いた人
masapoco

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です


おすすめ記事

  • openai

    OpenAI、15秒の音声サンプルから感情豊かで自然な音声を合成できる「Voice Engine」を発表

  • a04c35e8e555c1cc7ae1d6a5f3159856

    MicrosoftとOpenAI、1000億ドル以上をかけて超人的AI開発のためのスーパーコンピューター「Stargate」を開発する計画

  • Sam Altman TechCrunch SF 2019 Day 2 Oct 3 cropped cropped

    ベンチャーキャピタリスト、OpenAIのSam Altman氏を“誇大妄想的”と非難

  • google logo image

    Googleが非営利団体を対象に2000万ドルの資金を提供し生成AI活用を支援

  • Pixel 8 in Rose.max 936x936.format webp

    Google、方針を転換しPixel 8にもGemini NanoによるオンデバイスAI機能を搭載へ

今読まれている記事