Blog

Oct 01, 2023

Nouveau NVIDIA Maxine Cloud

La dernière version de NVIDIA Maxine ouvre la voie aux communications audio et vidéo en temps réel. Que ce soit pour une vidéoconférence, un appel passé vers un centre de service client ou une diffusion en direct, Maxine

La dernière version de NVIDIA Maxine ouvre la voie aux communications audio et vidéo en temps réel. Que ce soit pour une vidéoconférence, un appel passé vers un centre de service client ou une diffusion en direct, Maxine permet des communications claires pour améliorer les interactions virtuelles.

NVIDIA Maxine est une suite de kits de développement logiciel (SDK) d'IA accélérés par GPU et de microservices cloud natifs permettant de déployer des fonctionnalités d'IA optimisées et accélérées qui améliorent les effets audio, vidéo et de réalité augmentée (AR) en temps réel.

Et grâce aux modèles de pointe de Maxine, les utilisateurs finaux n'ont pas besoin d'équipement coûteux pour améliorer l'audio et la vidéo. Grâce à la technologie basée sur l'IA NVIDIA, ces effets de haute qualité peuvent être obtenus avec des microphones et des caméras standards.

Au GTC, NVIDIA a annoncé la réarchitecture de Maxine pour les microservices cloud natifs, avec la version à accès anticipé du microservice d'effets audio de Maxine. De plus, de nouvelles fonctionnalités du SDK Maxine ont été dévoilées, notamment la mise au point du haut-parleur et l'estimation de l'expression du visage, ainsi que la disponibilité générale du contact visuel. NVIDIA Maxine inclut désormais également des versions améliorées des fonctionnalités du SDK existantes.

Les microservices cloud natifs de Maxine permettent aux développeurs de créer des applications d'IA en temps réel. Les microservices peuvent être gérés de manière indépendante et déployés de manière transparente dans le cloud, accélérant ainsi les délais de développement.

Le microservice Audio Effects, disponible en accès anticipé, contient quatre fonctionnalités audio de pointe :

Pexip, l'un des principaux fournisseurs de solutions de visioconférence et de collaboration d'entreprise, utilise les technologies NVIDIA AI pour faire passer les réunions virtuelles à un niveau supérieur avec des fonctionnalités avancées pour la main-d'œuvre moderne.

« Avec le passage de Maxine aux microservices cloud natifs, il sera encore plus facile de combiner les technologies avancées d'IA de NVIDIA avec notre propre architecture côté serveur unique », a déclaré Eddie Clifton, vice-président senior des alliances stratégiques chez Pexip. "Cela permet à nos équipes chez Pexip d'offrir une expérience améliorée pour les réunions virtuelles."

Inscrivez-vous pour un accès anticipé.

Maxine propose trois SDK accélérés par GPU qui réinventent les communications en temps réel avec l'IA : effets audio, vidéo et AR.

Le SDK d’effets audio fournit des algorithmes d’amélioration de la qualité audio multi-effets, à faible latence et basés sur l’IA. Speaker Focus, disponible en accès anticipé, est une nouvelle fonctionnalité qui sépare les pistes audio des haut-parleurs de premier plan et d'arrière-plan, rendant chaque voix plus intelligible. De plus, la fonctionnalité Audio Super Résolution SDK a été mise à jour avec une qualité améliorée.

Le SDK d'effets vidéo crée des effets vidéo basés sur l'IA avec une entrée webcam standard. La fonctionnalité d'arrière-plan virtuel, qui segmente le profil d'une personne et applique la suppression, le remplacement ou le flou de l'arrière-plan grâce à l'IA, a été mise à jour avec une stabilité temporelle améliorée.

Et le SDK AR fournit un suivi du visage 3D en temps réel et une estimation de la pose du corps, alimentés par l'IA, basés sur un flux de caméra Web standard. Les dernières fonctionnalités incluent :

Les fonctionnalités AR suivantes ont été mises à jour :

Essayez les SDK Maxine. Pour découvrir directement les effets de Maxine, téléchargez l'application NVIDIA Broadcast.

Les SDK et microservices Maxine fournissent une suite d'effets d'IA à faible latence qui peuvent être intégrés aux infrastructures client existantes. Les développeurs peuvent exploiter les capacités d'IA de pointe avec Maxine, car la technologie est construite sur la plate-forme NVIDIA AI et dispose de modèles pré-entraînés de classe mondiale permettant aux utilisateurs de créer, personnaliser et déployer des fonctionnalités de qualité audio et vidéo haut de gamme.

Maxine fait également partie du NVIDIA Omniverse Avatar Cloud Engine, une collection de modèles et de services d'IA basés sur le cloud permettant aux développeurs de créer, personnaliser et déployer des avatars interactifs. Les microservices cloud natifs personnalisables de Maxine permettent un déploiement indépendant dans les pipelines d'effets d'IA. Maxine peut être déployé sur site, dans le cloud ou en périphérie.

Apprenez-en davantage sur NVIDIA Maxine et d'autres avancées technologiques en regardant le discours d'ouverture du GTC du fondateur et PDG de NVIDIA, Jensen Huang :