Benutzererlebnis

Dieser Abschnitt skizziert das Benutzererlebnis bei der Nutzung der Funktionen des Custom AI Companion, einschließlich wichtiger Überlegungen zur Nutzung.

Knowledge-Base-Abfragen

Dieser Abschnitt behandelt die Benutzererfahrung für einen lizenzierten Custom AI Companion-Benutzer mit Zugriff auf vom Administrator konfigurierte Knowledge Bases.

Wenn Ihr Konto einen Dienst eines Drittanbieters zur Indexierung verwendet, müssen Benutzer ein Konto im Drittanbieterindex besitzen und berechtigt sein, dieses für die Nutzung zu verbinden

Um die Funktionalität von Drittanbieter-Indexierungsdiensten des Custom AI Companion zu nutzen, müssen Benutzer zunächst ein aktives Konto beim Drittanbieter-Indexanbieter haben. Außerdem müssen sie die erforderlichen Berechtigungen besitzen, um dieses Konto für die Integration mit ihrem Zoom-Konto zu autorisieren, sodass während der KI-Interaktionen sicherer Zugriff auf indexierte Inhalte möglich ist.

AI Companion-Abfragen versuchen automatisch, Übereinstimmungen in den konfigurierten Knowledge Bases zu finden, und können auch Informationen aus Drittanbieterquellen einbeziehen

Wenn ein Benutzer eine Abfrage über Zoom AI Companion einreicht, führt der Dienst einen doppelten Informationsabrufpfad durch:

1. Abfragen zugänglicher Dokumente innerhalb der Knowledge Base nach relevanten Inhaltsübereinstimmungen.

2. Nutzung von KI-Modellen und -Diensten Dritter.

Wenn Knowledge-Base-Übereinstimmungen identifiziert werden, extrahiert das System nur die spezifisch relevanten Textabschnitte aus den passenden Dokumenten und fügt diese gezielten Textsegmente in die Modellverarbeitungspipeline ein. Das Modell analysiert, synthetisiert und reformuliert diese ausgewählten Dokumentauszüge zusammen mit seinem Basiswissen, um eine umfassende Antwort zu generieren, die die relevanten Textinformationen aus Ihren Organisationsdokumenten einbezieht.

Beispielsweise: Wenn ein Benutzer AI Companion fragt: „Wie lange steht mir eine Pause zu?“, versucht das System, diese Anfrage mit relevanten Personalunterlagen abzugleichen, die im Konto hochgeladen oder über den Drittanbieterindex verbunden sind. Wird eine Übereinstimmung gefunden, extrahiert das System nur die spezifisch relevanten Textabschnitte aus den passenden HR-Dokumenten – beispielsweise den Abschnitt der Richtlinie, der Anspruchsregelungen für Pausen behandelt – und fügt diese gezielten Textsegmente in die Modellverarbeitungspipeline ein. Das Modell verarbeitet diese ausgewählten Dokumentauszüge in Verbindung mit seinen Fähigkeiten, um die Informationen zu analysieren und zu synthetisieren. Bei der Antwortgabe ist AI Companion darauf ausgelegt, die relevanteste Antwort auf die Anfrage des Benutzers zu liefern und dabei die zutreffenden Informationen aus Ihren Organisationsdokumenten zu berücksichtigen.

Beispiel für dynamische Dokumentübereinstimmung basierend auf Benutzeranfragen

Benutzer können AI Companion auch anweisen, ausschließlich in hochgeladenen Konto-Dokumenten oder im integrierten Index zu suchen

Um AI Companion Antworten zu entlocken, die auf bestimmten Kontoresourcen statt auf allgemeinen Modellantworten basieren, können Benutzer AI Companion anweisen, nach Antworten in der Knowledge Base eines Kontos zu suchen, indem sie auf die +‑Schaltfläche klicken und die Knowledge Base angeben, die sie durchsuchen möchten.

Beispiel für die Einschränkung einer Suche auf eine Knowledge Base

Alternativ können Benutzer AI Companion auch anweisen, nach Antworten im Index eines Kontos zu suchen, indem sie auf die +‑Schaltfläche klicken und ihren Index angeben.

Beispiel für die Einschränkung einer Suche auf einen Drittanbieterindex

Benutzerdefinierte Avatar-Clips

Dieser Abschnitt behandelt die Benutzererfahrung beim Erstellen eines benutzerdefinierten Avatars und von Avatar-Clips.

Benutzer können einen Clip erstellen, indem sie einen Standard-Avatar auswählen oder einen eigenen erstellen und den Hintergrund für einen passenden Kontext anpassen

Die Funktion für benutzerdefinierte Avatar-Clips ermöglicht es Benutzern, Videoclips mithilfe einer Auswahl von über 15 Standard-Avataren und sieben virtuellen Hintergründen zu generieren. Diese Avatare und Hintergründe können einfach kombiniert werden, um die gewünschte Szene oder den bevorzugten Stil des Benutzers zu treffen. Für eine individuellere Erfahrung können Benutzer auch einen benutzerdefinierten Avatar in ihrer eigenen Ähnlichkeit erstellen und jeden verfügbaren Hintergrund anwenden.

Beispiel für die Auswahl eines Avatars

Um einen benutzerdefinierten Avatar in der Ähnlichkeit eines Benutzers zu erstellen, muss der Benutzer einen kurzen Clip von sich aufnehmen, in dem er ein Skript vorliest

Um einen benutzerdefinierten Avatar in der eigenen Ähnlichkeit zu erstellen, muss der Benutzer einen Clip aufnehmen, in dem er ein kurzes Skript vorliest. Dieser Clip wird verwendet, um die Stimme und das Aussehen des Benutzers einzufangen, die in zukünftigen Clips verwendet werden, die die Ähnlichkeit des Benutzers zeigen.

Hinweis

Die Qualität des aufgenommenen Clips beeinflusst die Qualität der Clips des benutzerdefinierten Avatars. Wenn ein Benutzer seine Beispielaufnahme in einem trockenen, monotonen Ton aufnimmt, spiegeln die Clips des benutzerdefinierten Avatars diese Eigenschaften wider. Für beste Ergebnisse sollten Benutzer Clips in einem Ton und einer Art aufnehmen, die ihrer natürlichen Sprechstimme entsprechen, und nach Möglichkeit natürlichen Blickkontakt aufnehmen.

Nachdem visuelle Entscheidungen getroffen wurden, schließen Benutzer den Clip durch Einreichen eines Transkripts ab

Nachdem ein Benutzer seinen bevorzugten Avatar und Hintergrund ausgewählt hat, kann er sein Transkript eingeben und auf die Schaltfläche „Clip erstellen“ klicken, um sein Video zu generieren. Nach mehreren Minuten, abhängig von der Länge des Transkripts, wird der Clip verfügbar sein.

Beispiel für ein Skript mit Avatar und Hintergrund

Benutzerdefinierte Clips können beim Einreichen auch in bis zu zwei zusätzliche Sprachen übersetzt werden

Vor dem Einreichen eines Clips können Benutzer zusätzlich zwei Sprachen auswählen, in die der Clip übersetzt werden soll. Dadurch entstehen drei separate Clips.

Beispiel für die Auswahl mehrerer Sprachen zur Übersetzung

Mehrere Übersetzungen erfordern zusätzliche Zeit pro Sprache

Wenn Benutzer Clips gleichzeitig in mehreren Sprachen erzeugen, erfordert jeder Clip zusätzliche Verarbeitungszeit pro angeforderter Sprache. Dies kann zwischen den Sprachen variieren, da einige Sprachen länger oder kürzer für die Verarbeitung des Inhalts benötigen.

Beispielsweise: Wenn ein Benutzer einen etwa zwei Minuten langen Clip in drei Sprachen erstellt, verbrauchen sie ungefähr sechs Minuten an Inhalt.

Benutzerdefiniertes Wörterbuch

Dieser Abschnitt behandelt die Benutzererfahrung bei der Nutzung der Funktion „Benutzerdefiniertes Wörterbuch“.

Alle Benutzer eines Kontos mit benutzerdefiniertem Wörterbuch profitieren davon beim Hosten von Meetings

Das benutzerdefinierte Wörterbuch wird, sobald es von einem Kontoadministrator konfiguriert wurde, automatisch auf alle Benutzer angewendet, wenn sie Meetings im Konto hosten, unabhängig von ihrem individuellen Lizenztyp. AI Companion wird das benutzerdefinierte Wörterbuch automatisch als Teil des Transkriptionserstellungsprozesses für jedes gehostete Meeting referenzieren und so konsistente Terminologieerkennung und Transkriptionsgenauigkeit in der gesamten Organisation sicherstellen, ohne dass Benutzer bestimmte Aktionen oder Konfigurationsschritte durchführen müssen.

Das benutzerdefinierte Wörterbuch gilt nicht für von externen Benutzern gehostete Meetings

Wenn ein Benutzer einem Meeting beitritt, das von einem externen Konto (d. h. außerhalb des Unternehmenskontos) gehostet wird, gilt das benutzerdefinierte Wörterbuch seiner Organisation nicht für das Meetingtranskript.

Benutzerdefinierte Meeting-Vorlagen

Dieser Abschnitt behandelt die Benutzererfahrung bei der Nutzung der Funktion „Benutzerdefinierte Meeting-Vorlagen“.

Bevor benutzerdefinierte Meeting-Zusammenfassungs-Vorlagen verwendet werden können, muss die Zusammenfassungsfunktion von AI Companion aktiviert sein

Um eine benutzerdefinierte Meeting-Zusammenfassungs-Vorlage zu verwenden, muss die Meeting-Zusammenfassungsfunktion von AI Companion während des Meetings aktiviert sein – entweder durch vorherige Vorkonfiguration oder durch Aktivieren, nachdem das Meeting begonnen hat.

Weitere Informationen zum AI Companion: Zusammenfassungsfunktion aktivieren Funktion.

Benutzer können eine benutzerdefinierte Meeting-Zusammenfassungs-Vorlage entweder vor oder nach dem Meeting anwenden

Beim Planen eines Meetings können lizenzierte Custom AI Companion-Benutzer die benutzerdefinierte Meeting-Zusammenfassungs-Vorlage vorab festlegen, die sie auf das Meeting anwenden möchten.

Auswahl einer Meeting-Zusammenfassungs-Vorlage bei der Planung eines Meetings

Alternativ können Benutzer eine benutzerdefinierte Meeting-Zusammenfassungs-Vorlage nachträglich anwenden. Dazu sollten Benutzer die zusammengefasste Sitzung entweder im Bereich „Meeting-Zusammenfassungen“ des Zoom-Webportals oder über die Meeting-Kartenansicht in der Zoom Workplace-App finden. Nach Auffinden können Benutzer ihre bevorzugte Zusammenfassungsvorlage aus dem verfügbaren Dropdown-Menü auswählen.

Auswahl einer Meeting-Zusammenfassungs-Vorlage

Hinweis

Benutzerdefinierte Meeting-Zusammenfassungs-Vorlagen können nicht für Meetings verwendet werden, die vor der Zuweisung einer Custom AI Companion-Lizenz an den Benutzer stattfanden oder für Meetings mit gelöschten Transkripten.

Drittanbieter-Meetings mit AI Companion

Dieser Abschnitt behandelt die Benutzererfahrung bei der Nutzung von AI Companion mit Drittanbieter-Meetings.

AI Companion verwendet die Zoom-Kalenderintegration, um Drittanbieter-Meetings im Kalender eines Benutzers zu identifizieren

Zoom AI Companion identifiziert Drittanbieter-Meetings, indem es den Kalender eines Benutzers über den Kalenderintegrationsdienst von Zoom durchsucht. Durch die Analyse geplanter Ereignisse kann AI Companion erkennen, wenn ein Meeting auf einer Drittanbieterplattform wie Microsoft Teams oder Google Meet gehostet wird, und sich proaktiv vorbereiten, beizutreten und Unterstützung zu leisten, sofern die Funktion AI Companion erlauben, einem Drittanbieter-Meeting beizutreten aktiviert ist.

Drittanbieter-Meeting-Einstellungen im Zoom-Webportal

Benutzer können AI Companion so einstellen, dass es automatisch Drittanbieter-Meetings beitritt, oder es für einzelne Meetings aktivieren

Benutzer haben die Möglichkeit zu steuern, wie AI Companion Drittanbieter-Meetings beitritt: entweder indem sie es so einstellen, dass es automatisch allen geeigneten externen Meetings beitritt, die über ihren integrierten Kalender erkannt werden, oder indem sie es bei Bedarf manuell für einzelne Meetings aktivieren.

Benutzer können AI Companion manuell zu Drittanbieter-Meetings einladen, indem sie das Kalenderelement im Zoom Workspace-Client öffnen, das AI Companion-Dropdown anklicken und "AI Companion einladen" aktivieren.

AI Companion zu einem Drittanbieter-Meeting aus dem Zoom-Kalender-Client einladen

AI Companion tritt einem Meeting nur zur geplanten Startzeit bei

Zoom AI Companion tritt einem Drittanbieter-Meeting nur zu dessen im Kalender des Benutzers angegebenen geplanten Startzeitpunkt bei. Wenn beispielsweise ein Meeting um 30 Minuten verschoben oder vorgezogen wird und diese Änderung nicht im Kalendereintrag reflektiert ist, ist AI Companion möglicherweise nicht zu Beginn des Meetings anwesend, es sei denn, der Kalendereintrag wird aktualisiert, um die neue Startzeit widerzuspiegeln.

Wenn niemand dem Meeting beitritt, trennt sich AI Companion nach 20 Minuten ohne Transkription automatisch

Falls Teilnehmer einem geplanten Drittanbieter-Meeting nicht beitreten, wird AI Companion dennoch wie vorgesehen dem geplanten Meeting beitreten. Wenn jedoch für 20 Minuten keine Audiodaten übertragen werden, trennt sich AI Companion automatisch vom Meeting.

Benutzer können AI Companion so konfigurieren, dass der bevorstehende Meeting-Host und/oder die Teilnehmer über seine geplante Anwesenheit benachrichtigt werden

Benutzer können AI Companion im Zoom-Webportal so konfigurieren, dass es den Meeting-Host und die Teilnehmer automatisch benachrichtigt, wenn es geplant ist, einem bevorstehenden Meeting beizutreten. Dies trägt zu zusätzlicher Transparenz bei, da es alle im Voraus darüber informiert, dass AI Companion anwesend sein wird und Unterstützung wie Notizen oder Zusammenfassungen während der Sitzung anbieten kann. Alternativ können Benutzer die Einstellung deaktiviert lassen und AI Companion tritt automatisch zur vorgesehenen Startzeit dem Meeting bei.

Beispiel für eine Benachrichtigung, wenn AI Companion einem Drittanbieter-Meeting beitritt

Wenn ein Drittanbieter-Meeting-Host oder -Teilnehmer AI Companion nicht möchte, muss es manuell entfernt werden

Falls ein Meeting-Host oder ein Teilnehmer AI Companion innerhalb eines Drittanbieter-Meetings nicht haben möchte, kann der Meeting-Host oder ein entsprechend berechtigter Benutzer es manuell mithilfe der Teilnehmerverwaltungswerkzeuge der Drittanbieterplattform aus dem Meeting entfernen. Alternativ kann der Benutzer, der AI Companion über die Kalenderoberfläche von Zoom Workplace zum Meeting eingeladen hat, dieselbe Option deaktivieren, um es aus dem Meeting zu entfernen.

Drittanbieter-Skills

Dieser Abschnitt behandelt die Benutzererfahrung bei der Nutzung von AI Companion mit Drittanbieteranwendungen.

Kontoadministratoren müssen eine Drittanbieter-App autorisieren, bevor Benutzer ihr Konto integrieren können

Bevor Benutzer eine Drittanbieteranwendung oder Connector-Skills nutzen können, muss ein Kontoadministrator die Anwendung auf Kontoebene für die Nutzung autorisieren.

Nach Genehmigung durch den Kontoadministrator müssen Benutzer Drittanbieter-Skills einzeln autorisieren, um die Funktion zu nutzen

Sobald eine Drittanbieter-Skill-Anwendung für die Nutzung innerhalb eines Kontos genehmigt ist, muss jeder Benutzer die Drittanbieteranwendung individuell für die Verwendung mit seinem Zoom-Konto autorisieren. Nach der Autorisierung können Benutzer Drittanbieter-Skills über das Seitenpanel von AI Companion verwenden.

Bildschirm zur App-Berechtigung beim Hinzufügen der Drittanbieter-Jira-App

Sobald die App vom Benutzer autorisiert ist, können Benutzer den Drittanbieterdienst nutzen

Nachdem ein Benutzer sein Zoom-Konto erfolgreich mit einer Drittanbieter-Skill-Anwendung integriert hat, kann er den Dienst über das Seitenpanel von AI Companion über die Menüoptionen oder durch einfache Konversation nutzen.

Beispiele für mit der Jira-App verfügbare Skills

\