Diagrammes et flux de données d'AI Companion

Les diagrammes suivants démontrent les principaux flux de traitement des données et l'architecture fonctionnelle de chaque fonctionnalité.

AI Companion 3.0

Le diagramme suivant illustre les flux de données pour AI Companion 3.0.

Comment AI Companion 3.0 se connecte à diverses sources de données internes et externes

Fonctionnalités principales d'AI Companion

Le diagramme suivant illustre les flux de données à l'origine de la plupart des fonctionnalités de Zoom AI Companion, organisés par ressources de contenu qui fournissent des entrées à ces services d'IA :

• Artefacts statiques 📦: Artefacts stockés au repos, tels que les transcriptions après réunion, les messages Zoom Chat, les SMS, la messagerie vocale, etc.

• Artefacts en temps réel ⚡: Artefacts considérés comme « en direct » et en cours en temps réel, tels qu'une transcription en direct d'une réunion ou d'un appel téléphonique, ou une conversation active avec un chatbot. Gardez à l'esprit qu'une fois la session en direct terminée, si ces enregistrements sont conservés, ils passeront à Artefacts statiques⚡.

• Sources de données 🤖: Artefacts tiers (e-mail, calendrier et/ou fichiers) indexés dans un module de génération augmentée par récupération afin d'améliorer les capacités de l'IA, si le paramètre du compte est activé. Par exemple, les e-mails et événements du calendrier que les utilisateurs peuvent rechercher avec AI Companion.

• Artefacts à la demande 💥: Informations traitées en temps réel pendant les sessions actives de l'utilisateur dans l'application Zoom Workplace, exclusivement pour fournir une entrée contextuelle aux services d'IA sans stockage ni indexation persistants. Ces artefacts sont extraits dynamiquement à partir de sources locales uniquement lorsque cela est nécessaire pour un contexte de flux de travail immédiat. Par exemple, répondre à un fil d'e-mails en cours avec la fonctionnalité Email Compose inclura temporairement les e-mails précédents dans la charge utile envoyée au service tiers directement depuis l'accès local de l'application Zoom Workplace—pas le serveur hôte—fournissant un contexte qui aide à orienter la réponse. Une liste d'artefacts à la demande peut inclure, sans s'y limiter :

  • Messages Zoom Chat

  • Zoom AI Docs

  • E-mail

En conjonction avec les ressources de contenu, chaque fonctionnalité appartient à l'une de trois catégories selon la façon dont elle utilise les informations contextuelles, comme indiqué dans le Tableau contextuel:

• Fonctionnalités dépendantes du contexte: Fonctionnalités qui toujours utilisent un artefact contextuel pertinent pour fournir un service d'IA. Par exemple, les transcriptions en direct sont utilisées pour produire les résumés de réunion.

• Fonctionnalités contextuelles possibles / conditionnelles: Fonctionnalités qui peuvent utiliser des artefacts contextuels pertinents pour fournir un service d'IA, selon le contexte ou les actions de l'utilisateur. Par exemple, répondre à un fil d'e-mails en cours avec Email Compose utilisera un artefact contextuel, alors que l'utilisation d'Email Compose dans un tout nouvel e-mail n'en utilisera pas.

• Fonctionnalités à entrée utilisateur: Fonctionnalités qui nécessitent toujours une saisie de l'utilisateur pour fonctionner. Par exemple, générer un arrière-plan virtuel à partir de la saisie de l'utilisateur.

En combinant les ressources de contenu et le tableau contextuel dans le tableau unifié suivant, vous pouvez voir quels types de données chaque fonctionnalité utilise, chaque fonctionnalité étant étiquetée avec le symbole approprié pour indiquer la source de contenu sur laquelle elle s'appuie.

Par exemple, dans la section Panneau AI Companion se trouve une liste de fonctionnalités réparties en dépendantes du contexte, contextuelles possibles, et à entrée utilisateur. Dans la dépendantes du contexte section se trouve Smart Scheduling, avec les ressources de contenu Artefacts statiques 📦, Artefacts à la demande💥 , et Sources de données 🤖 dans la colonne à côté. Ensemble, cela montre que cette fonctionnalité peut utiliser des artefacts provenant des trois sources, s'ils sont disponibles (notez que ces fonctionnalités peuvent fonctionner de manière limitée si toutes les sources de contexte ne sont pas disponibles. ). toutes les sources de contexte ne sont pas disponibles. ).

Alternativement, sous à entrée utilisateur section se trouve Requêtes de connaissances générales. Comme cette fonctionnalité ne dépend intrinsèquement d'aucun contexte, à l'exception des entrées utilisateur, aucune ressource de contenu n'est répertoriée.

La plupart des fonctionnalités et flux de données d'AI Companion sont représentés dans cette image. Choisissez votre fonctionnalité ci-dessous et suivez sa ou ses ressources de contenu pour comprendre d'où viennent les données et comment elles sont traitées.

Avertissement

Les tableaux suivants couvrent les cas d'utilisation standard des artefacts. Le diagramme et le tableau ne peuvent pas tenir compte des fichiers fournis par l'utilisateur associés aux demandes. Les lecteurs doivent supposer que les utilisateurs peuvent téléverser des fichiers à tout moment avec n'importe quelle fonctionnalité, sauf si les téléversements de fichiers locaux sont désactivés. De plus, certaines fonctionnalités peuvent combiner plusieurs types d'artefacts pour obtenir des résultats optimaux. Si certaines sources de données ne sont pas disponibles, les fonctionnalités s'adaptent automatiquement afin d'offrir la meilleure expérience possible avec les ressources restantes. Par exemple, les suivis contextuels créent des réponses plus détaillées lorsque les sources de données tierces 🤖 sont accessibles, tout en fournissant des suivis utiles sans elles.

Fonctionnalités d'AI Companion

Panneau AI Companion

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Résumés et recherche dans le chat	Artefacts statiques 📦 Artefacts à la demande 💥	Résume les messages récents dans les canaux de chat actifs et aide à retrouver des points précis de la conversation dont les utilisateurs ne se souviennent peut-être pas clairement.
	Suivis contextuels	Artefacts statiques 📦 Artefacts à la demande 💥 Sources de données 🤖	Génère des messages de suivi personnalisés à partir des transcriptions de réunion afin de garantir l'exactitude et la pertinence de la communication après la réunion.
	Analyse des données	Artefacts à la demande 💥 Sources de données 🤖	Permet aux utilisateurs de téléverser des jeux de données et de générer rapidement des résumés des principales conclusions, tendances et motifs.
	Conscience contextuelle intégrée à l'application	Artefacts statiques 📦 Artefacts à la demande 💥 Sources de données 🤖	Fournit une assistance intelligente et contextuelle qui adapte les réponses en fonction de votre emplacement et de votre activité actuels dans l'application Zoom Workplace.
	Interrogation des transcriptions après réunion	Artefacts statiques 📦	Permet aux utilisateurs de poser des questions en langage naturel sur le contenu des réunions et de recevoir des réponses instantanées à partir des transcriptions de réunion.
	Smart Scheduling	Artefacts à la demande 💥 Sources de données 🤖	Recherche dans les calendriers des collègues pour trouver et planifier des horaires de réunion qui conviennent aux deux parties.
contextuelles possibles	Création d'ordre du jour	Artefacts statiques 📦 Artefacts à la demande 💥 Sources de données 🤖	Génère des ordres du jour structurés en exploitant les informations issues de la préparation de réunion afin de garantir l'alignement des participants sur les sujets de discussion.
	Assistance aux prompts	Artefacts à la demande 💥	Aide les utilisateurs à rédiger de meilleurs prompts d'IA en fournissant des conseils sur la manière de formuler les requêtes pour des résultats optimaux.
	Préparation de réunion	Artefacts statiques 📦 Artefacts à la demande 💥 Sources de données 🤖	Synthétise les données provenant de diverses sources afin de fournir des résumés personnalisés, des points de discussion clés et un contexte pertinent avant les réunions.
à entrée utilisateur	Requêtes de connaissances générales	Aucun	Fournit des définitions, des explications et des informations contextuelles en exploitant les connaissances intégrées du LLM ou en effectuant des recherches sur le Web.
	Génération d'arrière-plan virtuel	Aucun	Crée des arrière-plans personnalisés générés par l'IA pour les réunions à l'aide d'une IA générative basée sur les invites textuelles de l'utilisateur.

Zoom Meetings

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Questions en réunion	Artefacts en temps réel ⚡	Permet aux participants de poser discrètement des questions à AI Companion sur la réunion en utilisant l'analyse de transcription en temps réel.
	Résumé de réunion	Artefacts en temps réel ⚡	Génère automatiquement des résumés structurés capturant les points clés de la discussion, les décisions et les actions à entreprendre après la fin des réunions.

Enregistrements

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Enregistrement intelligent	Artefacts statiques 📦	Améliore les réunions enregistrées dans le cloud en générant automatiquement des résumés structurés, en mettant en évidence les moments clés et en identifiant les actions à entreprendre.
	Enregistreur vocal	Artefacts en temps réel ⚡	Apporte la puissance d'AI Companion aux conversations en personne en capturant, transcrivant et résumant les discussions en direct via l'application mobile Zoom Workplace.

Chat

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Synthèse de fil	Artefacts à la demande 💥 Artefacts statiques 📦	Fournit des résumés générés par l'IA de tous les messages d'un fil, mettant en évidence les points clés, les décisions et les actions à entreprendre.
	Résumé du document	Artefacts à la demande 💥 Artefacts statiques 📦	Fournit des résumés générés par l'IA des fichiers texte joints ou des documents Zoom.
contextuelles possibles	Rédaction de chat	Artefacts à la demande 💥 Artefacts statiques 📦	Utilise l'IA pour aider les utilisateurs à rédiger des messages en analysant le contexte de la conversation et en proposant des suggestions de ton, de sujets ou de longueur.
	Planification rapide	Artefacts à la demande 💥 Artefacts statiques 📦	Permet aux utilisateurs de planifier des réunions directement depuis l'interface de chat en suggérant automatiquement des créneaux disponibles en fonction des agendas des participants.
	Complétion de phrase	Artefacts à la demande 💥	Aide les utilisateurs en proposant des suggestions générées par l'IA pour terminer les phrases au fur et à mesure de leur saisie, en fonction du contexte de la conversation.

Zoom Phone

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Résumé d'appel	Artefacts en temps réel ⚡	Génère des résumés d'appel après coup par l'IA, capturant des détails clés tels que les dates, les noms, les points de discussion et les actions à entreprendre.
	Questions sur l'appel	Artefacts en temps réel ⚡	Répond aux questions de l'utilisateur en utilisant la transcription en direct comme contexte.
	Synthèse de fil SMS d'équipe	Artefacts statiques 📦	Génère des résumés par IA des conversations SMS d'équipe pour les membres de la file d'attente d'appels et de la réceptionniste automatique.
	Priorisation des messages vocaux	Artefacts statiques 📦	Identifie et hiérarchise automatiquement les messages vocaux qui correspondent à des sujets ou intentions prédéfinis.
	Tâches de messagerie vocale	Artefacts statiques 📦	Analyse le contenu de la messagerie vocale et suggère automatiquement des tâches en fonction des détails clés pour aider les utilisateurs à rester organisés.
	Créer un document Zoom	Artefacts statiques 📦	Crée un document Zoom collaboratif à partir du résumé d'appel.

Centre de contact

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Métriques de parole des agents	Artefacts en temps réel ⚡	Fournit des informations en temps réel sur la vitesse d'élocution et la durée de parole des agents pendant les interactions avec les clients.
	Analyse du sentiment des consommateurs	Artefacts en temps réel ⚡	Fournit des informations en temps réel sur le sentiment des clients pendant les interactions par messagerie et vocales à l'aide de l'analyse IA.
	Résumé de conversation	Artefacts en temps réel ⚡	Fournit aux agents des résumés générés par l'IA des conversations précédentes lors de la réception d'interactions transférées.
	Tâches de suivi	Artefacts en temps réel ⚡	Identifie et suggère automatiquement des actions de suivi à partir des détails de la conversation afin de s'assurer que les problèmes sont traités.
	Rédaction intelligente	Artefacts statiques 📦	Aide les agents à améliorer leurs messages en fournissant des suggestions générées par l'IA pour la correction, la reformulation et l'ajustement du ton.

Tâches

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Zoom Tasks	Artefacts en temps réel ⚡	Capture les actions à entreprendre et les suivis directement dans Zoom Workplace, en générant automatiquement des tâches à partir des résumés de réunion ou des interactions du centre de contact.

Mail/Calendrier

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Résumé d'e-mail	Artefacts à la demande 💥	Fournit des résumés générés par l'IA des e-mails.
contextuelles possibles	Rédaction d'e-mail	Artefacts à la demande 💥	Aide les utilisateurs à rédiger des e-mails plus efficacement en proposant des suggestions générées par l'IA basées sur le contexte du fil d'e-mails ou sur des saisies utilisateur spécifiques.

Tableau blanc

Type de contexte	Fonctionnalité	Ressource de contenu	Description
contextuelles possibles	Génération de contenu	Artefacts statiques 📦	Permet aux utilisateurs de générer des idées, d'affiner du contenu existant et d'ajouter des éléments visuels aux tableaux blancs avec l'aide de l'IA.

Docs

Type de contexte	Fonctionnalité	Ressource de contenu	Description
contextuelles possibles	Génération et révision de contenu	Artefacts statiques 📦	Aide les utilisateurs à créer et à affiner des documents en proposant des suggestions de nouveau contenu, en générant des résumés et en révisant le contenu existant.
	Complétion de phrase	Artefacts à la demande 💥	Aide les utilisateurs en proposant des suggestions générées par l'IA pour terminer les phrases au fur et à mesure de leur saisie, en fonction du contexte de la conversation.

Événements

Type de contexte	Fonctionnalité	Ressource de contenu	Description
contextuelles possibles	Rédaction de chat	Artefacts statiques 📦	Permet aux utilisateurs de rédiger rapidement des réponses professionnelles et contextuelles dans les halls d'événements.
à entrée utilisateur	Rédaction d'e-mail	Aucun	Aide les utilisateurs à créer du contenu d'e-mail pour les communications d'événements, y compris le corps du message, les lignes d'objet et le texte d'appel à l'action.
	Génération d'images	Aucun	Crée des images personnalisées pour les événements, y compris les en-têtes, les images de session et les images d'exposition à l'aide de contenu généré par l'IA.
	Rédaction intelligente	Aucun	Génère rapidement du contenu pour les descriptions d'événements, les détails des sessions, les biographies des intervenants et les annonces du hall à partir des invites de l'utilisateur.

Zoom Hub

Type de contexte	Fonctionnalité	Ressource de contenu	Description
dépendantes du contexte	Poser des questions	Artefacts statiques 📦	Interroge les documents sélectionnés par l'utilisateur pour obtenir des informations et fournit des réponses générées par l'IA en utilisant les informations issues des artefacts sélectionnés.

Architecture de l'assistant de réunion tiers d'AI Companion

Le diagramme suivant présente les flux de données typiques d'AI Companion lorsqu'il est utilisé avec des services de réunion tiers.

Diagramme illustrant les flux de données de l'assistant de réunion tiers

Génération d'arrière-plan virtuel

Le diagramme suivant illustre la manière dont Zoom génère des arrière-plans virtuels avec AI Companion.

Flux de données de génération d'arrière-plan virtuel Zoom

Complétion de phrase

Le diagramme suivant illustre le fonctionnement de la complétion de phrase dans l'application Zoom Workplace.

Flux de données de complétion de phrase