AI Companion Schémas et flux de données

Les diagrammes suivants illustrent les principaux parcours de traitement des données et l’architecture fonctionnelle de chaque Fonctionnalités.

AI Companion 3.0

Le diagramme suivant illustre les flux de données pour AI Companion 3.0.

Comment AI Companion 3.0 se connecte à diverses sources de données internes et externes

Principales fonctionnalités d’AI Companion

Le diagramme suivant illustre les flux de données à l’origine de la plupart des fonctionnalités de Zoom AI Companion, organisés par Ressources de contenu qui fournissent des entrées à ces services d’IA :

• Artefacts statiques 📦: Artefacts stockés au repos, tels que les transcriptions après réunion, les messages Zoom Chat, les SMS, la messagerie vocale, etc.

• Artefacts en temps réel ⚡: Artefacts considérés comme « en direct » et continus en temps réel, tels qu’une transcription en direct d’une réunion ou d’un appel téléphonique, ou une conversation de chatbot Actif. Gardez à l’esprit qu’une fois la session en direct terminée, si ces enregistrements sont conservés, ils passeront à Artefacts statiques⚡.

• Sources de données 🤖: Artefacts tiers (e-mail, calendrier et/ou fichiers) indexés dans un module généré par récupération-augmentation pour des capacités d'IA améliorées, si le paramètre de compte est activé. Par exemple, les e-mails et les événements du calendrier que les utilisateurs peuvent rechercher avec AI Companion.

• Artefacts à la demande 💥: Informations traitées en temps réel pendant les sessions utilisateur actives au sein de l'application Zoom Workplace, exclusivement pour fournir une entrée contextuelle aux services d'IA sans aucun stockage persistant ni indexation. Ces artefacts sont extraits dynamiquement à partir de sources locales uniquement lorsque cela est nécessaire pour un contexte de flux de travail immédiat. Par exemple, répondre à un fil d'e-mails en cours avec la Fonctionnalités de rédaction d'e-mail inclura temporairement les e-mails précédents dans la charge utile envoyée directement au service tiers depuis l'accès local de l'application Zoom Workplace—pas le serveur hôte—fournissant un contexte qui aide à façonner la réponse. Une liste d'artefacts à la demande peut inclure, sans s'y limiter :

  • Messages Zoom Chat

  • Documents Zoom AI

  • E-mail

En conjonction avec les ressources de contenu, chaque Fonctionnalités relève de l’une des trois catégories selon la manière dont elle utilise les informations contextuelles, comme indiqué dans le Tableau de contexte:

• Fonctionnalités dépendantes du contexte: Fonctionnalités qui toujours utilisent un artefact pertinent et contextuel pour fournir un service d’IA. Par exemple, les transcriptions en direct sont utilisées pour produire des résumés de réunion.

• Fonctionnalités possibles / Fonctionnalités conditionnelles au contexte: Fonctionnalités qui peut utiliser des artefacts pertinents et contextuels pour fournir un service d’IA, selon le contexte ou les actions de l’utilisateur. Par exemple, répondre à un fil d’e-mail en cours avec rédaction d'e-mail va utiliser un artefact contextuel, alors que l’utilisation de la rédaction d'e-mail dans un tout nouvel e-mail ne le fera pas.

• Fonctionnalités d’entrée utilisateur: Des Fonctionnalités qui nécessitent toujours une saisie utilisateur pour fonctionner. Par exemple, générer un arrière-plan virtuel à partir de la saisie de l’utilisateur.

En combinant les Ressources de contenu et la Table de contexte dans la table unifiée suivante, vous pouvez voir quels types de données chaque Fonctionnalités utilise, car chaque Fonctionnalités est étiquetée avec le symbole approprié pour indiquer la source de contenu sur laquelle elle s’appuie.

Par exemple, au sein du AI Companion panel se trouve une liste de Fonctionnalités réparties selon qu’elles sont Dépendantes du contexte, Possibles selon le contexteet Saisie utilisateur. Dans le Dépendantes du contexte la section est Programmation intelligente, avec les ressources de contenu Artefacts statiques 📦, On-Demand Artifacts💥, et Data Sources 🤖 dans la colonne à côté. Ensemble, cela révèle que ces Fonctionnalités peuvent utiliser des artifacts provenant des trois sources, si elles sont Disponible (notez que ces Fonctionnalités peuvent fonctionner avec une capacité réduite si non tous les sources de contexte sont Disponible. ).

Sinon, sous le Saisie utilisateur la section est Requêtes de connaissances générales. Parce que cette Fonctionnalités ne dépend pas intrinsèquement d’un contexte, sauf des saisies utilisateur, aucune ressource de contenu n’est répertoriée.

La plupart des Fonctionnalités AI Companion et des flux de données sont représentés dans cette image. Choisissez votre Fonctionnalités ci-dessous et suivez sa ou ses ressource(s) de contenu pour comprendre d’où viennent les données et comment elles sont traitées.

Avertissement

Les tableaux suivants couvrent les cas d’usage d’artefacts standard. Le diagramme et le tableau ne peuvent pas tenir compte des fichiers fournis par les utilisateurs associés aux demandes. Les lecteurs doivent supposer que les utilisateurs peuvent téléverser des fichiers à tout moment avec n’importe quelle Fonctionnalités, sauf si les téléversements de fichiers locaux sont désactivés. De plus, certaines Fonctionnalités peuvent combiner plusieurs types d’artefacts pour obtenir des résultats optimaux. Si certaines sources de données ne sont pas disponibles, les Fonctionnalités s’adaptent automatiquement pour offrir la meilleure expérience possible avec les ressources restantes. Par exemple, les suivis contextuels génèrent des réponses plus détaillées lorsque les sources de données tierces 🤖 sont accessibles, tout en fournissant malgré tout des suivis utiles sans elles.

Fonctionnalités AI Companion

AI Companion panel

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	Résumés de chat et recherche	Artefacts statiques 📦 On-Demand Artifacts 💥	Résume les messages récents dans les canaux de chat actifs et aide à localiser des points précis de la conversation dont les utilisateurs ne se souviennent peut-être pas clairement.
	Suivis contextuels	Artefacts statiques 📦 On-Demand Artifacts 💥 Data Sources 🤖	Génère des messages de suivi personnalisés à partir des transcriptions de réunion afin de garantir l’exactitude et la pertinence des communications après la réunion.
	Analyse des données	On-Demand Artifacts 💥 Data Sources 🤖	Permet aux utilisateurs de téléverser des ensembles de données et de générer rapidement des résumés des principales constatations, tendances et schémas.
	Conscience contextuelle dans l’application	Artefacts statiques 📦 On-Demand Artifacts 💥 Data Sources 🤖	Fournit une assistance intelligente et contextuelle qui adapte les réponses en fonction de votre emplacement actuel et de votre activité dans l’application Zoom Workplace.
	Interrogation de la transcription après la réunion	Artefacts statiques 📦	Permet aux utilisateurs de poser des questions en langage naturel sur le contenu de la réunion et de recevoir des réponses instantanées à partir des transcriptions de réunion.
	Programmation intelligente	On-Demand Artifacts 💥 Data Sources 🤖	Recherche dans les calendriers des collègues pour trouver et planifier des horaires de réunion qui conviennent aux deux parties.
Possibles selon le contexte	Création d’ordre du jour	Artefacts statiques 📦 On-Demand Artifacts 💥 Data Sources 🤖	Génère des ordres du jour structurés en s’appuyant sur les informations issues de la préparation de la réunion afin de garantir que les participants soient alignés sur les sujets de discussion.
	Assistance aux invites	On-Demand Artifacts 💥	Aide les utilisateurs à rédiger de meilleurs prompts AI en fournissant des conseils sur la manière de formuler les requêtes pour obtenir des résultats optimaux.
	Préparation de la réunion	Artefacts statiques 📦 On-Demand Artifacts 💥 Data Sources 🤖	Synthétise les données provenant de diverses sources pour fournir des résumés personnalisés, les points clés de discussion et le contexte pertinent avant les réunions.
Saisie utilisateur	Requêtes de connaissances générales	Aucun	Fournit des définitions, des explications et des informations contextuelles en s’appuyant sur les connaissances intégrées du LLM ou en effectuant des recherches sur le web.
	Génération d’arrière-plan virtuel	Aucun	Crée des arrière-plans personnalisés générés par l’IA pour les réunions à l’aide de l’IA générative, à partir des invites textuelles de l’utilisateur.

Zoom Meetings

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	questions en réunion	Artefacts en temps réel ⚡	Permet aux Participants de poser discrètement à AI Companion des questions sur la réunion à l’aide de l’analyse en temps réel de la transcription.
	synthèse de réunion	Artefacts en temps réel ⚡	Génère automatiquement des résumés structurés qui capturent les points clés de discussion, les décisions et les actions à mener après la fin des réunions.

Enregistrements

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	enregistrement intelligent	Artefacts statiques 📦	Améliore les réunions enregistrées dans le cloud en générant automatiquement des résumés structurés, en mettant en évidence les moments clés et en identifiant les actions à mener.
	Enregistreur vocal	Artefacts en temps réel ⚡	Apporte la puissance d’AI Companion aux conversations en personne en capturant, transcrivant et résumant les discussions en direct via l’application mobile Zoom Workplace.

chat

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	Résumé du fil	On-Demand Artifacts 💥 Artefacts statiques 📦	Fournit des résumés générés par l’IA de tous les messages d’un fil, en mettant en évidence les points clés, les décisions et les actions à mener.
	Résumé du document	Artefacts à la demande 💥 Artefacts statiques 📦	Fournit des résumés générés par l'IA de fichiers texte joints ou de Zoom Docs.
Possibles selon le contexte	Rédaction de chat	On-Demand Artifacts 💥 Artefacts statiques 📦	Utilise l'IA pour aider les utilisateurs à rédiger des messages en analysant le contexte de la conversation et en proposant des suggestions de ton, de sujets ou de longueur.
	Programmation rapide	On-Demand Artifacts 💥 Artefacts statiques 📦	Permet aux utilisateurs de planifier des réunions directement depuis l'interface de chat en suggérant automatiquement des heures Disponible en fonction des emplois du temps des Participants.
	Complétion de phrase	On-Demand Artifacts 💥	Aide les utilisateurs en proposant des suggestions générées par l'IA pour terminer les phrases au fur et à mesure qu'ils tapent, en se basant sur le contexte de la conversation.

Zoom Phone

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	Résumé de l'appel	Artefacts en temps réel ⚡	Génère des résumés post-appel générés par l'IA capturant des détails clés tels que les dates, les noms, les points de discussion et les éléments d'action.
	Questions d'appel	Artefacts en temps réel ⚡	Répond aux questions de l’utilisateur en utilisant la transcription en direct comme contexte.
	Résumé du fil SMS de l’équipe	Artefacts statiques 📦	Génère des résumés IA des conversations SMS de l’équipe pour les membres de la file d'attente des appels et de la réceptionniste automatique.
	Priorisation de la messagerie vocale	Artefacts statiques 📦	Identifie et priorise automatiquement les messages de messagerie vocale qui correspondent à des sujets ou intentions prédéfinis.
	Tâches de messagerie vocale	Artefacts statiques 📦	Analyse le contenu de la messagerie vocale et suggère automatiquement des tâches basées sur les détails clés pour aider les utilisateurs à rester organisés.
	Créer un document Zoom	Artefacts statiques 📦	Crée un document collaboratif Zoom à l’aide du résumé d'appel.

centre de contact

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	Indicateurs de parole de l’agent	Artefacts en temps réel ⚡	Fournit des informations en temps réel sur la vitesse de parole de l’agent et la durée de la parole pendant les interactions avec les clients.
	Analyse du sentiment des consommateurs	Artefacts en temps réel ⚡	Fournit des informations en temps réel sur le sentiment des clients pendant les interactions de messagerie et vocales grâce à l’analyse par IA.
	Résumé de la conversation	Artefacts en temps réel ⚡	Fournit aux agents des résumés générés par l’IA des conversations précédentes lors de la réception d’engagements transférés.
	Tâches de suivi	Artefacts en temps réel ⚡	Identifie et suggère automatiquement des actions de suivi à partir des détails de la conversation afin de garantir que les problèmes soient pris en charge.
	Composition intelligente	Artefacts statiques 📦	Aide les agents à affiner leurs messages en fournissant des suggestions générées par l’IA pour la relecture, la reformulation et les ajustements de ton.

Tâches

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	Zoom Tasks	Artefacts en temps réel ⚡	Capture les éléments d’action et les suivis directement dans Zoom Workplace, en générant automatiquement des tâches à partir des résumés de réunion ou des interactions du centre de contact.

E-mail/ calendrier

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	Résumé de l'e-mail	Artefacts à la demande 💥	Fournit des résumés d'e-mails générés par l'IA.
Possibles selon le contexte	Rédaction d'e-mail	On-Demand Artifacts 💥	Aide les utilisateurs à rédiger des e-mails plus efficacement en fournissant des suggestions générées par l’IA basées sur le contexte du fil d’e-mail ou sur des entrées spécifiques de l’utilisateur.

tableau blanc

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Possibles selon le contexte	Génération de contenu	Artefacts statiques 📦	Permet aux utilisateurs de générer des idées, d’affiner le contenu existant et l’ajout d’éléments visuels aux tableaux blancs grâce à l’assistance de l’IA.

Documentation

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Possibles selon le contexte	Génération et révision de contenu	Artefacts statiques 📦	Aide les utilisateurs à créer et à améliorer des documents en proposant des suggestions pour de nouveaux contenus, en générant des résumés et en révisant le contenu existant.
	Complétion de phrase	On-Demand Artifacts 💥	Aide les utilisateurs en proposant des suggestions générées par l'IA pour terminer les phrases au fur et à mesure qu'ils tapent, en se basant sur le contexte de la conversation.

Événements

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Possibles selon le contexte	Rédaction de chat	Artefacts statiques 📦	Permet aux utilisateurs de rédiger rapidement des réponses professionnelles et adaptées au contexte au sein des halls d’événement.
Saisie utilisateur	Rédaction d'e-mail	Aucun	Aide les utilisateurs à créer du contenu d’e-mail pour la communication d’événement, y compris le corps des e-mails, les lignes d’objet et le texte d’appel à l’action.
	Génération d'images	Aucun	Crée des images personnalisées pour les événements, y compris des en-têtes, des images de session et des images d’exposition, à l’aide de contenu généré par l’IA.
	Composition intelligente	Aucun	Génère rapidement du contenu pour les descriptions d’événements, les détails des sessions, les biographies des intervenants et les annonces du hall en fonction des invites de l’utilisateur.

Zoom hub

Type de contexte	Fonctionnalités	Ressource de contenu	Description
Dépendantes du contexte	Poser des questions	Artefacts statiques 📦	Interroge les documents sélectionnés par l’utilisateur pour obtenir des informations et fournit des réponses générées par l’IA à partir des informations des éléments sélectionnés.

Architecture de l’assistant de réunion tiers AI Companion

Le diagramme suivant présente les flux de données typiques pour AI Companion lorsqu’il est utilisé avec des services de réunion tiers.

Diagramme représentant les flux de données de l’assistant de réunion tiers

Génération d’arrière-plan virtuel

Le schéma suivant illustre comment Zoom génère la génération d’arrière-plan virtuel avec AI Companion.

Flux de données de génération d’arrière-plan virtuel de Zoom

Complétion de phrase

Le schéma suivant illustre comment Sentence Completion fonctionne dans l’application Zoom Workplace.

Flux de données de Sentence Completion