Webex est particuli\u00e8rement bien plac\u00e9 afin de proposer une exp\u00e9rience de collaboration s\u00e9curis\u00e9e et int\u00e9gr\u00e9e sur tous nos appareils, ainsi que sur les ordinateurs de bureau et portables, les smartphones et les autres formats \u00e9mergents. Notre vision est de fournir une exp\u00e9rience comparable, voire sup\u00e9rieure, \u00e0 la participation en personne. Notre fa\u00e7on d\u2019aborder l\u2019IA se traduit par une meilleure compr\u00e9hension, une fatigue moindre et une plus grande simplicit\u00e9 d\u2019emploi. Notre objectif est d\u2019utiliser l\u2019IA pour augmenter la clart\u00e9 des communications entre les participants et r\u00e9pondre de mani\u00e8re plus adapt\u00e9e aux besoins individuels des personnes.<\/p>\n
Les \u00e9quipes Webex ont structur\u00e9 leurs capacit\u00e9s IA de telle sorte que la collaboration soit consid\u00e9r\u00e9e comme une entit\u00e9 globale plut\u00f4t que sous la forme de silos technologiques distincts en lien avec l\u2019IA.<\/p>\n
Une conception pour les environnements de travail hybride complexes<\/strong><\/h2>\nNotre objectif est d\u2019appliquer l\u2019intelligence du machine learning \u00e0 l\u2019audio, \u00e0 la vid\u00e9o et au langage naturel de telle sorte qu\u2019elle se d\u00e9veloppe particuli\u00e8rement dans les environnement de travail hybride complexes et que l\u2019adaptabilit\u00e9 de l\u2019utilisateur final en soit augment\u00e9e.<\/p>\n
Une approche inclusive de la collaboration<\/strong><\/h2>\nNos mod\u00e8les de ML sont entra\u00een\u00e9s avec des ensembles de donn\u00e9es volumineux et diversifi\u00e9s afin de reconna\u00eetre un vaste \u00e9ventail de langues et d\u2019accents pour l\u2019identification de la parole, et des donn\u00e9es d\u00e9mographiques extr\u00eamement vari\u00e9es pour la vision par ordinateur.<\/p>\n
Une conception profond\u00e9ment ancr\u00e9e autour de la confidentialit\u00e9 et de la s\u00e9curit\u00e9<\/strong><\/h2>\nNotre architecture technologique applique intrins\u00e8quement une approche priv\u00e9e et s\u00e9curis\u00e9e aux calculs du machine learning. Pour ce faire, les traitements ont lieu principalement sur les ordinateurs portables et les appareils des utilisateurs finaux plut\u00f4t qu\u2019apr\u00e8s un transfert vers le cloud. Cette m\u00e9thode d\u2019edge computing (informatique en p\u00e9riph\u00e9rie) appliqu\u00e9e \u00e0 la technologie d\u2019IA renforce naturellement la s\u00e9curit\u00e9 des donn\u00e9es et des flux multim\u00e9dias. L\u2019approche de Webex en termes de d\u00e9veloppement de l\u2019IA repose sur les principes de fiabilit\u00e9 des donn\u00e9es de Cisco<\/a>.<\/p>\nUne exp\u00e9rience de collaboration \u00e0 faible latence<\/strong><\/h2>\nL\u2019approche orient\u00e9e vers la p\u00e9riph\u00e9rie fournit \u00e9galement une exp\u00e9rience r\u00e9active car les donn\u00e9es multim\u00e9dias sont ainsi trait\u00e9es en quelques dizaines de millisecondes, alors que des allers-retours via le cloud engendreraient une latence hautement al\u00e9atoire. En outre, nos algorithmes sont con\u00e7us de telle sorte qu\u2019ils s\u2019adaptent \u00e0 diff\u00e9rents types de processeurs, de budgets en termes de puissance et de syst\u00e8mes d\u2019exploitation \u2013 assurant ainsi de pouvoir travailler de partout.<\/p>\n
Uniformisation de l\u2019exp\u00e9rience de collaboration sur les appareils Webex<\/strong><\/h2>\nLes technologies d\u2019IA de Webex fonctionnent en arri\u00e8re-plan pour optimiser l\u2019exp\u00e9rience dans sa globalit\u00e9. Elles sont directement int\u00e9gr\u00e9es aux t\u00e9l\u00e9phones de bureau, aux ordinateurs fixes et aux appareils de salles de conf\u00e9rence Webex.<\/p>\n
Des opportunit\u00e9s d\u2019innovations constantes <\/strong><\/h2>\nL\u2019architecture IA de Webex, compl\u00e8te et centr\u00e9e sur la collaboration, enrichit l\u2019exp\u00e9rience multim\u00e9dia et ouvre la voie \u00e0 de nouvelles opportunit\u00e9s permettant de s\u2019adapter rapidement \u00e0 de nouveaux cas d\u2019utilisation et de domaines sp\u00e9cifiques aux clients.<\/p>\n
Approche bas\u00e9e sur l\u2019IA de Webex pour l\u2019analyse des flux multim\u00e9dias et la reconstruction<\/strong><\/h2>\n![\"analyse](\"https:\/\/blog.webex.com\/wp-content\/uploads\/2022\/03\/Rainbow-Infographic_Audio_-Light_Final.png\")
Figure 1\u00a0: Mod\u00e8le de traitement audio bas\u00e9 sur l\u2019IA de Webex<\/em><\/p><\/div>\nLes clients Webex comptent sur notre portefeuille pour collaborer de partout. Notre approche consiste \u00e0 identifier les caract\u00e9ristiques du participant, ind\u00e9pendamment de son environnement, puis \u00e0 exploiter l\u2019IA et le machine learning (ML) pour s\u00e9parer l\u2019audio ou la vid\u00e9o en flux segment\u00e9s riches en donn\u00e9es. Ce niveau d\u2019extraction d\u00e9taill\u00e9e de flux de composants significatifs n\u2019avait jamais \u00e9t\u00e9 possible dans les logiciels de communication en temps r\u00e9el les plus courants.<\/p>\n
1. D\u00e9composition bas\u00e9e sur le ML <\/strong><\/h3>\nLa d\u00e9composition s\u00e9pare un flux audio entrant comprenant les \u00e9l\u00e9ments suivants\u00a0:<\/p>\n
\n- Les intervenants au premier plan et \u00e0 l\u2019arri\u00e8re-plan <\/strong>sont identifi\u00e9s par l\u2019estimation de la distance entre chaque intervenant et le micro en fonction du volume de la parole et de l\u2019intensit\u00e9 de la r\u00e9verb\u00e9ration.<\/li>\n
- Les \u00e9v\u00e9nements audio <\/strong>sont d\u00e9tect\u00e9s par l\u2019inclusion de d\u00e9clencheurs de sons sp\u00e9cifiques ou de mots cl\u00e9s.<\/li>\n
- La r\u00e9verb\u00e9ration, <\/strong>les \u00e9chos discrets d\u2019une voix dans une pi\u00e8ce, est s\u00e9par\u00e9e et \u00e9ventuellement ajust\u00e9e pour accentuer la clart\u00e9 de la voix du participant.<\/li>\n
- La musique de fond <\/strong>est s\u00e9par\u00e9e en son propre flux, permettant ainsi de r\u00e9gler le volume \u00e0 l\u2019\u00e9tape de recomposition.<\/li>\n
- Le bruit de fond<\/strong> est s\u00e9par\u00e9 des \u00e9l\u00e9ments ambiants (mais il peut en inclure) qui seront ajust\u00e9s selon le cas d\u2019utilisation.<\/li>\n<\/ul>\n
2. Composants audio par utilisateur <\/strong><\/h3>\nUne fois les flux de donn\u00e9es s\u00e9par\u00e9s, nous les regroupons en composants audio par utilisateur, ce qui nous permet de s\u00e9lectionner, de modifier ou d\u2019agir individuellement sur le flux audio de chaque participant.<\/p>\n
3. Reconstruction bas\u00e9e sur le ML<\/strong><\/h3>\nSelon le cas d\u2019utilisation, nous pouvons combiner les flux de donn\u00e9es individuels pour les r\u00e9int\u00e9grer dans l\u2019audio partag\u00e9 avec les autres participants. Cette m\u00e9thode convient \u00e0 divers cas d\u2019utilisation et exigences. Par exemple, la fonctionnalit\u00e9 audio intelligente de Webex smart audio permet aux participants de choisir de supprimer le bruit de fond (Suppression du bruit), de supprimer tous les bruits de fond et les paroles \u00e0 l\u2019arri\u00e8re-plan (Optimiser pour ma voix) ou d\u2019entendre le son d\u2019origine lorsque vous jouez d\u2019un instrument ou chantez (mode Musique).<\/p>\n
4. Rendu audio<\/strong><\/h3>\nLe flux audio r\u00e9sultant est fourni aux autres participants sous une forme compr\u00e9hensible avec un minimum d\u2019effort intellectuel.<\/p>\n
L\u2019avantage computationnel au service de nouveaux cas d\u2019utilisation<\/strong><\/h2>\n\u00c9tant donn\u00e9 que notre architecture IA est ax\u00e9e sur la collaboration, nous s\u00e9parons le flux multim\u00e9dia dans un cycle de calcul unique au lieu de le traiter plusieurs fois via diff\u00e9rents mod\u00e8les. Cette m\u00e9thode augmente l\u2019efficacit\u00e9 globale du processus et fournit une exp\u00e9rience \u00e0 faible latence. Nous pouvons aussi ajouter facilement de nouveaux composants au cycle de calcul du flux, ce qui autorise de nouveaux sc\u00e9narios d\u2019utilisation \u00e9ventuels avec une image plus riche du flux d\u2019entr\u00e9e. L\u2019approche de Webex en mati\u00e8re de traitement du flux multim\u00e9dia s\u2019\u00e9tend aux applications suivantes\u00a0:<\/p>\n
La reconnaissance vocale optimise la compr\u00e9hension<\/strong><\/h3>\nNous pouvons distinguer les intervenants du bruit ambiant, les intervenants qui se trouvent plus pr\u00e8s ou plus \u00e9loign\u00e9s du micro, et m\u00eame r\u00e9gler la r\u00e9verb\u00e9ration de la salle. Tous ces \u00e9l\u00e9ments sont identifi\u00e9s sous la forme de flux s\u00e9par\u00e9s, ce qui offre une plus grande flexibilit\u00e9 pour r\u00e9pondre aux besoins sp\u00e9cifiques d\u2019un utilisateur. Nous pouvons s\u00e9lectionner, modifier et agir individuellement sur ces flux, puis reconstituer de nouveaux flux audio \u00e0 partir d\u2019un choix de composants audio. Par exemple, lors d\u2019un appel, nous pourrions \u00e9galiser le volume des intervenants au premier plan ou \u00e0 l\u2019arri\u00e8re-plan, alors que pour d\u2019autres, nous pourrions seulement mettre en exergue l\u2019intervenant plac\u00e9 au plus pr\u00e8s du micro. Nous pourrions aussi reconna\u00eetre des d\u00e9clencheurs d\u2019\u00e9v\u00e9nement audio tels que \u00ab\u00a0OK Webex\u00a0\u00bb ou mettre en \u00e9vidence d\u2019autres \u00e9l\u00e9ments audio environnants qu\u2019un participant juge importants.<\/p>\n
La vision par ordinateur booste la puissance des flux vid\u00e9o<\/strong><\/h3>\nNotre approche du flux multim\u00e9dia nous permet de mieux comprendre la sc\u00e8ne \u00e0 l\u2019\u00e9cran et de recomposer des \u00e9l\u00e9ments afin d\u2019am\u00e9liorer la qualit\u00e9 vid\u00e9o. Par exemple, nous pouvons dissocier un participant de son arri\u00e8re-plan et distinguer ses gestes. Nous pouvons r\u00e9aliser le rendu vid\u00e9o en s\u00e9lectionnant et en modifiant ces flux s\u00e9par\u00e9s pour que les autres participants voient mieux le pr\u00e9sentateur, avec un minimum d\u2019\u00e9l\u00e9ments g\u00eanants. Cette m\u00e9thode ouvre un univers de possibilit\u00e9s et facilite la collaboration dans des environnements difficiles.<\/p>\n
Webex Assistant optimise l\u2019exp\u00e9rience de collaboration<\/strong><\/h3>\nWebex Assistant fournit des commandes vocales pour l\u2019exp\u00e9rience de collaboration, une intelligence dynamique, des transcriptions et des services de traduction. Nous avons mis en \u0153uvre ces fonctionnalit\u00e9s de telle sorte que la plus grande part de la reconnaissance de la langue soit r\u00e9alis\u00e9e sur l\u2019appareil, ce qui augmente la pr\u00e9cision et r\u00e9duit la latence (jusqu\u2019\u00e0 quatre fois moins par rapport aux syst\u00e8mes cloud standards). Webex Assistant propose \u00e9galement des API avec des comp\u00e9tences Webex Assistant, afin que les d\u00e9veloppeurs ind\u00e9pendants puissent ajouter de nouvelles fonctionnalit\u00e9s et se connecter \u00e0 leurs applications avec des commandes vocales. Nous avons \u00e9largi le nombre de langues prises en charge pour les transcriptions et les traductions, et m\u00eame ajout\u00e9 des langues suppl\u00e9mentaires pour nos appareils, avec l\u2019anglais (d\u00e9j\u00e0 existant), l\u2019allemand, le fran\u00e7ais, l\u2019espagnol et le japonais.<\/p>\n
La vision par ordinateur ouvre les fronti\u00e8res de la\u00a03D<\/strong><\/h3>\nLa vision par ordinateur permet l\u2019identification de l\u2019environnement spatial dans un flux vid\u00e9o. L\u2019approche de Webex concernant la\u00a03D vise \u00e0 r\u00e9duire la charge cognitive pour les pr\u00e9sentateurs et les participants plut\u00f4t que de recourir \u00e0 des casques AR\/VR pour les repr\u00e9senter dans un espace enti\u00e8rement constitu\u00e9 de r\u00e9alit\u00e9 virtuelle. Par exemple, nous pouvons extraire avec pr\u00e9cision une adaptation et des mod\u00e8les\u00a03D. Nous pouvons aussi scanner la g\u00e9om\u00e9trie faciale des participants pour personnaliser et am\u00e9liorer l\u2019image.<\/p>\n
L\u2019approche de Webex concernant l\u2019IA offre aux \u00e9quipes une plus grande flexibilit\u00e9 pour collaborer et leur procure encore plus de possibilit\u00e9s de participer pendant les r\u00e9unions. Le mod\u00e8le robuste de traitement des flux multim\u00e9dias bas\u00e9 sur l\u2019IA fournit d\u00e8s aujourd\u2019hui une exp\u00e9rience de collaboration exceptionnelle et ouvre les nouvelles fronti\u00e8res de demain.<\/p>\n
\nVous souhaitez d\u00e9couvrir la diff\u00e9rence qu\u2019apporte la technologie d\u2019IA \u00e0 la collaboration\u00a0? Contactez-nous<\/a> d\u00e8s aujourd\u2019hui pour b\u00e9n\u00e9ficier d\u2019une d\u00e9monstration.<\/h4>\n<\/blockquote>\nEn savoir plus<\/strong><\/p>\nConcevoir des syst\u00e8mes d\u2019IA responsables<\/a><\/p>\n
Nos mod\u00e8les de ML sont entra\u00een\u00e9s avec des ensembles de donn\u00e9es volumineux et diversifi\u00e9s afin de reconna\u00eetre un vaste \u00e9ventail de langues et d\u2019accents pour l\u2019identification de la parole, et des donn\u00e9es d\u00e9mographiques extr\u00eamement vari\u00e9es pour la vision par ordinateur.<\/p>\n
Une conception profond\u00e9ment ancr\u00e9e autour de la confidentialit\u00e9 et de la s\u00e9curit\u00e9<\/strong><\/h2>\nNotre architecture technologique applique intrins\u00e8quement une approche priv\u00e9e et s\u00e9curis\u00e9e aux calculs du machine learning. Pour ce faire, les traitements ont lieu principalement sur les ordinateurs portables et les appareils des utilisateurs finaux plut\u00f4t qu\u2019apr\u00e8s un transfert vers le cloud. Cette m\u00e9thode d\u2019edge computing (informatique en p\u00e9riph\u00e9rie) appliqu\u00e9e \u00e0 la technologie d\u2019IA renforce naturellement la s\u00e9curit\u00e9 des donn\u00e9es et des flux multim\u00e9dias. L\u2019approche de Webex en termes de d\u00e9veloppement de l\u2019IA repose sur les principes de fiabilit\u00e9 des donn\u00e9es de Cisco<\/a>.<\/p>\nUne exp\u00e9rience de collaboration \u00e0 faible latence<\/strong><\/h2>\nL\u2019approche orient\u00e9e vers la p\u00e9riph\u00e9rie fournit \u00e9galement une exp\u00e9rience r\u00e9active car les donn\u00e9es multim\u00e9dias sont ainsi trait\u00e9es en quelques dizaines de millisecondes, alors que des allers-retours via le cloud engendreraient une latence hautement al\u00e9atoire. En outre, nos algorithmes sont con\u00e7us de telle sorte qu\u2019ils s\u2019adaptent \u00e0 diff\u00e9rents types de processeurs, de budgets en termes de puissance et de syst\u00e8mes d\u2019exploitation \u2013 assurant ainsi de pouvoir travailler de partout.<\/p>\n
Uniformisation de l\u2019exp\u00e9rience de collaboration sur les appareils Webex<\/strong><\/h2>\nLes technologies d\u2019IA de Webex fonctionnent en arri\u00e8re-plan pour optimiser l\u2019exp\u00e9rience dans sa globalit\u00e9. Elles sont directement int\u00e9gr\u00e9es aux t\u00e9l\u00e9phones de bureau, aux ordinateurs fixes et aux appareils de salles de conf\u00e9rence Webex.<\/p>\n
Des opportunit\u00e9s d\u2019innovations constantes <\/strong><\/h2>\nL\u2019architecture IA de Webex, compl\u00e8te et centr\u00e9e sur la collaboration, enrichit l\u2019exp\u00e9rience multim\u00e9dia et ouvre la voie \u00e0 de nouvelles opportunit\u00e9s permettant de s\u2019adapter rapidement \u00e0 de nouveaux cas d\u2019utilisation et de domaines sp\u00e9cifiques aux clients.<\/p>\n
Approche bas\u00e9e sur l\u2019IA de Webex pour l\u2019analyse des flux multim\u00e9dias et la reconstruction<\/strong><\/h2>\nFigure 1\u00a0: Mod\u00e8le de traitement audio bas\u00e9 sur l\u2019IA de Webex<\/em><\/p><\/div>\nLes clients Webex comptent sur notre portefeuille pour collaborer de partout. Notre approche consiste \u00e0 identifier les caract\u00e9ristiques du participant, ind\u00e9pendamment de son environnement, puis \u00e0 exploiter l\u2019IA et le machine learning (ML) pour s\u00e9parer l\u2019audio ou la vid\u00e9o en flux segment\u00e9s riches en donn\u00e9es. Ce niveau d\u2019extraction d\u00e9taill\u00e9e de flux de composants significatifs n\u2019avait jamais \u00e9t\u00e9 possible dans les logiciels de communication en temps r\u00e9el les plus courants.<\/p>\n
1. D\u00e9composition bas\u00e9e sur le ML <\/strong><\/h3>\nLa d\u00e9composition s\u00e9pare un flux audio entrant comprenant les \u00e9l\u00e9ments suivants\u00a0:<\/p>\n
\n- Les intervenants au premier plan et \u00e0 l\u2019arri\u00e8re-plan <\/strong>sont identifi\u00e9s par l\u2019estimation de la distance entre chaque intervenant et le micro en fonction du volume de la parole et de l\u2019intensit\u00e9 de la r\u00e9verb\u00e9ration.<\/li>\n
- Les \u00e9v\u00e9nements audio <\/strong>sont d\u00e9tect\u00e9s par l\u2019inclusion de d\u00e9clencheurs de sons sp\u00e9cifiques ou de mots cl\u00e9s.<\/li>\n
- La r\u00e9verb\u00e9ration, <\/strong>les \u00e9chos discrets d\u2019une voix dans une pi\u00e8ce, est s\u00e9par\u00e9e et \u00e9ventuellement ajust\u00e9e pour accentuer la clart\u00e9 de la voix du participant.<\/li>\n
- La musique de fond <\/strong>est s\u00e9par\u00e9e en son propre flux, permettant ainsi de r\u00e9gler le volume \u00e0 l\u2019\u00e9tape de recomposition.<\/li>\n
- Le bruit de fond<\/strong> est s\u00e9par\u00e9 des \u00e9l\u00e9ments ambiants (mais il peut en inclure) qui seront ajust\u00e9s selon le cas d\u2019utilisation.<\/li>\n<\/ul>\n
2. Composants audio par utilisateur <\/strong><\/h3>\nUne fois les flux de donn\u00e9es s\u00e9par\u00e9s, nous les regroupons en composants audio par utilisateur, ce qui nous permet de s\u00e9lectionner, de modifier ou d\u2019agir individuellement sur le flux audio de chaque participant.<\/p>\n
3. Reconstruction bas\u00e9e sur le ML<\/strong><\/h3>\nSelon le cas d\u2019utilisation, nous pouvons combiner les flux de donn\u00e9es individuels pour les r\u00e9int\u00e9grer dans l\u2019audio partag\u00e9 avec les autres participants. Cette m\u00e9thode convient \u00e0 divers cas d\u2019utilisation et exigences. Par exemple, la fonctionnalit\u00e9 audio intelligente de Webex smart audio permet aux participants de choisir de supprimer le bruit de fond (Suppression du bruit), de supprimer tous les bruits de fond et les paroles \u00e0 l\u2019arri\u00e8re-plan (Optimiser pour ma voix) ou d\u2019entendre le son d\u2019origine lorsque vous jouez d\u2019un instrument ou chantez (mode Musique).<\/p>\n
4. Rendu audio<\/strong><\/h3>\nLe flux audio r\u00e9sultant est fourni aux autres participants sous une forme compr\u00e9hensible avec un minimum d\u2019effort intellectuel.<\/p>\n
L\u2019avantage computationnel au service de nouveaux cas d\u2019utilisation<\/strong><\/h2>\n\u00c9tant donn\u00e9 que notre architecture IA est ax\u00e9e sur la collaboration, nous s\u00e9parons le flux multim\u00e9dia dans un cycle de calcul unique au lieu de le traiter plusieurs fois via diff\u00e9rents mod\u00e8les. Cette m\u00e9thode augmente l\u2019efficacit\u00e9 globale du processus et fournit une exp\u00e9rience \u00e0 faible latence. Nous pouvons aussi ajouter facilement de nouveaux composants au cycle de calcul du flux, ce qui autorise de nouveaux sc\u00e9narios d\u2019utilisation \u00e9ventuels avec une image plus riche du flux d\u2019entr\u00e9e. L\u2019approche de Webex en mati\u00e8re de traitement du flux multim\u00e9dia s\u2019\u00e9tend aux applications suivantes\u00a0:<\/p>\n
La reconnaissance vocale optimise la compr\u00e9hension<\/strong><\/h3>\nNous pouvons distinguer les intervenants du bruit ambiant, les intervenants qui se trouvent plus pr\u00e8s ou plus \u00e9loign\u00e9s du micro, et m\u00eame r\u00e9gler la r\u00e9verb\u00e9ration de la salle. Tous ces \u00e9l\u00e9ments sont identifi\u00e9s sous la forme de flux s\u00e9par\u00e9s, ce qui offre une plus grande flexibilit\u00e9 pour r\u00e9pondre aux besoins sp\u00e9cifiques d\u2019un utilisateur. Nous pouvons s\u00e9lectionner, modifier et agir individuellement sur ces flux, puis reconstituer de nouveaux flux audio \u00e0 partir d\u2019un choix de composants audio. Par exemple, lors d\u2019un appel, nous pourrions \u00e9galiser le volume des intervenants au premier plan ou \u00e0 l\u2019arri\u00e8re-plan, alors que pour d\u2019autres, nous pourrions seulement mettre en exergue l\u2019intervenant plac\u00e9 au plus pr\u00e8s du micro. Nous pourrions aussi reconna\u00eetre des d\u00e9clencheurs d\u2019\u00e9v\u00e9nement audio tels que \u00ab\u00a0OK Webex\u00a0\u00bb ou mettre en \u00e9vidence d\u2019autres \u00e9l\u00e9ments audio environnants qu\u2019un participant juge importants.<\/p>\n
La vision par ordinateur booste la puissance des flux vid\u00e9o<\/strong><\/h3>\nNotre approche du flux multim\u00e9dia nous permet de mieux comprendre la sc\u00e8ne \u00e0 l\u2019\u00e9cran et de recomposer des \u00e9l\u00e9ments afin d\u2019am\u00e9liorer la qualit\u00e9 vid\u00e9o. Par exemple, nous pouvons dissocier un participant de son arri\u00e8re-plan et distinguer ses gestes. Nous pouvons r\u00e9aliser le rendu vid\u00e9o en s\u00e9lectionnant et en modifiant ces flux s\u00e9par\u00e9s pour que les autres participants voient mieux le pr\u00e9sentateur, avec un minimum d\u2019\u00e9l\u00e9ments g\u00eanants. Cette m\u00e9thode ouvre un univers de possibilit\u00e9s et facilite la collaboration dans des environnements difficiles.<\/p>\n
Webex Assistant optimise l\u2019exp\u00e9rience de collaboration<\/strong><\/h3>\nWebex Assistant fournit des commandes vocales pour l\u2019exp\u00e9rience de collaboration, une intelligence dynamique, des transcriptions et des services de traduction. Nous avons mis en \u0153uvre ces fonctionnalit\u00e9s de telle sorte que la plus grande part de la reconnaissance de la langue soit r\u00e9alis\u00e9e sur l\u2019appareil, ce qui augmente la pr\u00e9cision et r\u00e9duit la latence (jusqu\u2019\u00e0 quatre fois moins par rapport aux syst\u00e8mes cloud standards). Webex Assistant propose \u00e9galement des API avec des comp\u00e9tences Webex Assistant, afin que les d\u00e9veloppeurs ind\u00e9pendants puissent ajouter de nouvelles fonctionnalit\u00e9s et se connecter \u00e0 leurs applications avec des commandes vocales. Nous avons \u00e9largi le nombre de langues prises en charge pour les transcriptions et les traductions, et m\u00eame ajout\u00e9 des langues suppl\u00e9mentaires pour nos appareils, avec l\u2019anglais (d\u00e9j\u00e0 existant), l\u2019allemand, le fran\u00e7ais, l\u2019espagnol et le japonais.<\/p>\n
La vision par ordinateur ouvre les fronti\u00e8res de la\u00a03D<\/strong><\/h3>\nLa vision par ordinateur permet l\u2019identification de l\u2019environnement spatial dans un flux vid\u00e9o. L\u2019approche de Webex concernant la\u00a03D vise \u00e0 r\u00e9duire la charge cognitive pour les pr\u00e9sentateurs et les participants plut\u00f4t que de recourir \u00e0 des casques AR\/VR pour les repr\u00e9senter dans un espace enti\u00e8rement constitu\u00e9 de r\u00e9alit\u00e9 virtuelle. Par exemple, nous pouvons extraire avec pr\u00e9cision une adaptation et des mod\u00e8les\u00a03D. Nous pouvons aussi scanner la g\u00e9om\u00e9trie faciale des participants pour personnaliser et am\u00e9liorer l\u2019image.<\/p>\n
L\u2019approche de Webex concernant l\u2019IA offre aux \u00e9quipes une plus grande flexibilit\u00e9 pour collaborer et leur procure encore plus de possibilit\u00e9s de participer pendant les r\u00e9unions. Le mod\u00e8le robuste de traitement des flux multim\u00e9dias bas\u00e9 sur l\u2019IA fournit d\u00e8s aujourd\u2019hui une exp\u00e9rience de collaboration exceptionnelle et ouvre les nouvelles fronti\u00e8res de demain.<\/p>\n
\nVous souhaitez d\u00e9couvrir la diff\u00e9rence qu\u2019apporte la technologie d\u2019IA \u00e0 la collaboration\u00a0? Contactez-nous<\/a> d\u00e8s aujourd\u2019hui pour b\u00e9n\u00e9ficier d\u2019une d\u00e9monstration.<\/h4>\n<\/blockquote>\nEn savoir plus<\/strong><\/p>\nConcevoir des syst\u00e8mes d\u2019IA responsables<\/a><\/p>\n
Une exp\u00e9rience de collaboration \u00e0 faible latence<\/strong><\/h2>\nL\u2019approche orient\u00e9e vers la p\u00e9riph\u00e9rie fournit \u00e9galement une exp\u00e9rience r\u00e9active car les donn\u00e9es multim\u00e9dias sont ainsi trait\u00e9es en quelques dizaines de millisecondes, alors que des allers-retours via le cloud engendreraient une latence hautement al\u00e9atoire. En outre, nos algorithmes sont con\u00e7us de telle sorte qu\u2019ils s\u2019adaptent \u00e0 diff\u00e9rents types de processeurs, de budgets en termes de puissance et de syst\u00e8mes d\u2019exploitation \u2013 assurant ainsi de pouvoir travailler de partout.<\/p>\n
Uniformisation de l\u2019exp\u00e9rience de collaboration sur les appareils Webex<\/strong><\/h2>\nLes technologies d\u2019IA de Webex fonctionnent en arri\u00e8re-plan pour optimiser l\u2019exp\u00e9rience dans sa globalit\u00e9. Elles sont directement int\u00e9gr\u00e9es aux t\u00e9l\u00e9phones de bureau, aux ordinateurs fixes et aux appareils de salles de conf\u00e9rence Webex.<\/p>\n
Des opportunit\u00e9s d\u2019innovations constantes <\/strong><\/h2>\nL\u2019architecture IA de Webex, compl\u00e8te et centr\u00e9e sur la collaboration, enrichit l\u2019exp\u00e9rience multim\u00e9dia et ouvre la voie \u00e0 de nouvelles opportunit\u00e9s permettant de s\u2019adapter rapidement \u00e0 de nouveaux cas d\u2019utilisation et de domaines sp\u00e9cifiques aux clients.<\/p>\n
Approche bas\u00e9e sur l\u2019IA de Webex pour l\u2019analyse des flux multim\u00e9dias et la reconstruction<\/strong><\/h2>\nFigure 1\u00a0: Mod\u00e8le de traitement audio bas\u00e9 sur l\u2019IA de Webex<\/em><\/p><\/div>\nLes clients Webex comptent sur notre portefeuille pour collaborer de partout. Notre approche consiste \u00e0 identifier les caract\u00e9ristiques du participant, ind\u00e9pendamment de son environnement, puis \u00e0 exploiter l\u2019IA et le machine learning (ML) pour s\u00e9parer l\u2019audio ou la vid\u00e9o en flux segment\u00e9s riches en donn\u00e9es. Ce niveau d\u2019extraction d\u00e9taill\u00e9e de flux de composants significatifs n\u2019avait jamais \u00e9t\u00e9 possible dans les logiciels de communication en temps r\u00e9el les plus courants.<\/p>\n
1. D\u00e9composition bas\u00e9e sur le ML <\/strong><\/h3>\nLa d\u00e9composition s\u00e9pare un flux audio entrant comprenant les \u00e9l\u00e9ments suivants\u00a0:<\/p>\n
\n- Les intervenants au premier plan et \u00e0 l\u2019arri\u00e8re-plan <\/strong>sont identifi\u00e9s par l\u2019estimation de la distance entre chaque intervenant et le micro en fonction du volume de la parole et de l\u2019intensit\u00e9 de la r\u00e9verb\u00e9ration.<\/li>\n
- Les \u00e9v\u00e9nements audio <\/strong>sont d\u00e9tect\u00e9s par l\u2019inclusion de d\u00e9clencheurs de sons sp\u00e9cifiques ou de mots cl\u00e9s.<\/li>\n
- La r\u00e9verb\u00e9ration, <\/strong>les \u00e9chos discrets d\u2019une voix dans une pi\u00e8ce, est s\u00e9par\u00e9e et \u00e9ventuellement ajust\u00e9e pour accentuer la clart\u00e9 de la voix du participant.<\/li>\n
- La musique de fond <\/strong>est s\u00e9par\u00e9e en son propre flux, permettant ainsi de r\u00e9gler le volume \u00e0 l\u2019\u00e9tape de recomposition.<\/li>\n
- Le bruit de fond<\/strong> est s\u00e9par\u00e9 des \u00e9l\u00e9ments ambiants (mais il peut en inclure) qui seront ajust\u00e9s selon le cas d\u2019utilisation.<\/li>\n<\/ul>\n
2. Composants audio par utilisateur <\/strong><\/h3>\nUne fois les flux de donn\u00e9es s\u00e9par\u00e9s, nous les regroupons en composants audio par utilisateur, ce qui nous permet de s\u00e9lectionner, de modifier ou d\u2019agir individuellement sur le flux audio de chaque participant.<\/p>\n
3. Reconstruction bas\u00e9e sur le ML<\/strong><\/h3>\nSelon le cas d\u2019utilisation, nous pouvons combiner les flux de donn\u00e9es individuels pour les r\u00e9int\u00e9grer dans l\u2019audio partag\u00e9 avec les autres participants. Cette m\u00e9thode convient \u00e0 divers cas d\u2019utilisation et exigences. Par exemple, la fonctionnalit\u00e9 audio intelligente de Webex smart audio permet aux participants de choisir de supprimer le bruit de fond (Suppression du bruit), de supprimer tous les bruits de fond et les paroles \u00e0 l\u2019arri\u00e8re-plan (Optimiser pour ma voix) ou d\u2019entendre le son d\u2019origine lorsque vous jouez d\u2019un instrument ou chantez (mode Musique).<\/p>\n
4. Rendu audio<\/strong><\/h3>\nLe flux audio r\u00e9sultant est fourni aux autres participants sous une forme compr\u00e9hensible avec un minimum d\u2019effort intellectuel.<\/p>\n
L\u2019avantage computationnel au service de nouveaux cas d\u2019utilisation<\/strong><\/h2>\n\u00c9tant donn\u00e9 que notre architecture IA est ax\u00e9e sur la collaboration, nous s\u00e9parons le flux multim\u00e9dia dans un cycle de calcul unique au lieu de le traiter plusieurs fois via diff\u00e9rents mod\u00e8les. Cette m\u00e9thode augmente l\u2019efficacit\u00e9 globale du processus et fournit une exp\u00e9rience \u00e0 faible latence. Nous pouvons aussi ajouter facilement de nouveaux composants au cycle de calcul du flux, ce qui autorise de nouveaux sc\u00e9narios d\u2019utilisation \u00e9ventuels avec une image plus riche du flux d\u2019entr\u00e9e. L\u2019approche de Webex en mati\u00e8re de traitement du flux multim\u00e9dia s\u2019\u00e9tend aux applications suivantes\u00a0:<\/p>\n
La reconnaissance vocale optimise la compr\u00e9hension<\/strong><\/h3>\nNous pouvons distinguer les intervenants du bruit ambiant, les intervenants qui se trouvent plus pr\u00e8s ou plus \u00e9loign\u00e9s du micro, et m\u00eame r\u00e9gler la r\u00e9verb\u00e9ration de la salle. Tous ces \u00e9l\u00e9ments sont identifi\u00e9s sous la forme de flux s\u00e9par\u00e9s, ce qui offre une plus grande flexibilit\u00e9 pour r\u00e9pondre aux besoins sp\u00e9cifiques d\u2019un utilisateur. Nous pouvons s\u00e9lectionner, modifier et agir individuellement sur ces flux, puis reconstituer de nouveaux flux audio \u00e0 partir d\u2019un choix de composants audio. Par exemple, lors d\u2019un appel, nous pourrions \u00e9galiser le volume des intervenants au premier plan ou \u00e0 l\u2019arri\u00e8re-plan, alors que pour d\u2019autres, nous pourrions seulement mettre en exergue l\u2019intervenant plac\u00e9 au plus pr\u00e8s du micro. Nous pourrions aussi reconna\u00eetre des d\u00e9clencheurs d\u2019\u00e9v\u00e9nement audio tels que \u00ab\u00a0OK Webex\u00a0\u00bb ou mettre en \u00e9vidence d\u2019autres \u00e9l\u00e9ments audio environnants qu\u2019un participant juge importants.<\/p>\n
La vision par ordinateur booste la puissance des flux vid\u00e9o<\/strong><\/h3>\nNotre approche du flux multim\u00e9dia nous permet de mieux comprendre la sc\u00e8ne \u00e0 l\u2019\u00e9cran et de recomposer des \u00e9l\u00e9ments afin d\u2019am\u00e9liorer la qualit\u00e9 vid\u00e9o. Par exemple, nous pouvons dissocier un participant de son arri\u00e8re-plan et distinguer ses gestes. Nous pouvons r\u00e9aliser le rendu vid\u00e9o en s\u00e9lectionnant et en modifiant ces flux s\u00e9par\u00e9s pour que les autres participants voient mieux le pr\u00e9sentateur, avec un minimum d\u2019\u00e9l\u00e9ments g\u00eanants. Cette m\u00e9thode ouvre un univers de possibilit\u00e9s et facilite la collaboration dans des environnements difficiles.<\/p>\n
Webex Assistant optimise l\u2019exp\u00e9rience de collaboration<\/strong><\/h3>\nWebex Assistant fournit des commandes vocales pour l\u2019exp\u00e9rience de collaboration, une intelligence dynamique, des transcriptions et des services de traduction. Nous avons mis en \u0153uvre ces fonctionnalit\u00e9s de telle sorte que la plus grande part de la reconnaissance de la langue soit r\u00e9alis\u00e9e sur l\u2019appareil, ce qui augmente la pr\u00e9cision et r\u00e9duit la latence (jusqu\u2019\u00e0 quatre fois moins par rapport aux syst\u00e8mes cloud standards). Webex Assistant propose \u00e9galement des API avec des comp\u00e9tences Webex Assistant, afin que les d\u00e9veloppeurs ind\u00e9pendants puissent ajouter de nouvelles fonctionnalit\u00e9s et se connecter \u00e0 leurs applications avec des commandes vocales. Nous avons \u00e9largi le nombre de langues prises en charge pour les transcriptions et les traductions, et m\u00eame ajout\u00e9 des langues suppl\u00e9mentaires pour nos appareils, avec l\u2019anglais (d\u00e9j\u00e0 existant), l\u2019allemand, le fran\u00e7ais, l\u2019espagnol et le japonais.<\/p>\n
La vision par ordinateur ouvre les fronti\u00e8res de la\u00a03D<\/strong><\/h3>\nLa vision par ordinateur permet l\u2019identification de l\u2019environnement spatial dans un flux vid\u00e9o. L\u2019approche de Webex concernant la\u00a03D vise \u00e0 r\u00e9duire la charge cognitive pour les pr\u00e9sentateurs et les participants plut\u00f4t que de recourir \u00e0 des casques AR\/VR pour les repr\u00e9senter dans un espace enti\u00e8rement constitu\u00e9 de r\u00e9alit\u00e9 virtuelle. Par exemple, nous pouvons extraire avec pr\u00e9cision une adaptation et des mod\u00e8les\u00a03D. Nous pouvons aussi scanner la g\u00e9om\u00e9trie faciale des participants pour personnaliser et am\u00e9liorer l\u2019image.<\/p>\n
L\u2019approche de Webex concernant l\u2019IA offre aux \u00e9quipes une plus grande flexibilit\u00e9 pour collaborer et leur procure encore plus de possibilit\u00e9s de participer pendant les r\u00e9unions. Le mod\u00e8le robuste de traitement des flux multim\u00e9dias bas\u00e9 sur l\u2019IA fournit d\u00e8s aujourd\u2019hui une exp\u00e9rience de collaboration exceptionnelle et ouvre les nouvelles fronti\u00e8res de demain.<\/p>\n
\nVous souhaitez d\u00e9couvrir la diff\u00e9rence qu\u2019apporte la technologie d\u2019IA \u00e0 la collaboration\u00a0? Contactez-nous<\/a> d\u00e8s aujourd\u2019hui pour b\u00e9n\u00e9ficier d\u2019une d\u00e9monstration.<\/h4>\n<\/blockquote>\nEn savoir plus<\/strong><\/p>\nConcevoir des syst\u00e8mes d\u2019IA responsables<\/a><\/p>\n
Les technologies d\u2019IA de Webex fonctionnent en arri\u00e8re-plan pour optimiser l\u2019exp\u00e9rience dans sa globalit\u00e9. Elles sont directement int\u00e9gr\u00e9es aux t\u00e9l\u00e9phones de bureau, aux ordinateurs fixes et aux appareils de salles de conf\u00e9rence Webex.<\/p>\n
Des opportunit\u00e9s d\u2019innovations constantes <\/strong><\/h2>\nL\u2019architecture IA de Webex, compl\u00e8te et centr\u00e9e sur la collaboration, enrichit l\u2019exp\u00e9rience multim\u00e9dia et ouvre la voie \u00e0 de nouvelles opportunit\u00e9s permettant de s\u2019adapter rapidement \u00e0 de nouveaux cas d\u2019utilisation et de domaines sp\u00e9cifiques aux clients.<\/p>\n
Approche bas\u00e9e sur l\u2019IA de Webex pour l\u2019analyse des flux multim\u00e9dias et la reconstruction<\/strong><\/h2>\nFigure 1\u00a0: Mod\u00e8le de traitement audio bas\u00e9 sur l\u2019IA de Webex<\/em><\/p><\/div>\nLes clients Webex comptent sur notre portefeuille pour collaborer de partout. Notre approche consiste \u00e0 identifier les caract\u00e9ristiques du participant, ind\u00e9pendamment de son environnement, puis \u00e0 exploiter l\u2019IA et le machine learning (ML) pour s\u00e9parer l\u2019audio ou la vid\u00e9o en flux segment\u00e9s riches en donn\u00e9es. Ce niveau d\u2019extraction d\u00e9taill\u00e9e de flux de composants significatifs n\u2019avait jamais \u00e9t\u00e9 possible dans les logiciels de communication en temps r\u00e9el les plus courants.<\/p>\n
1. D\u00e9composition bas\u00e9e sur le ML <\/strong><\/h3>\nLa d\u00e9composition s\u00e9pare un flux audio entrant comprenant les \u00e9l\u00e9ments suivants\u00a0:<\/p>\n
\n- Les intervenants au premier plan et \u00e0 l\u2019arri\u00e8re-plan <\/strong>sont identifi\u00e9s par l\u2019estimation de la distance entre chaque intervenant et le micro en fonction du volume de la parole et de l\u2019intensit\u00e9 de la r\u00e9verb\u00e9ration.<\/li>\n
- Les \u00e9v\u00e9nements audio <\/strong>sont d\u00e9tect\u00e9s par l\u2019inclusion de d\u00e9clencheurs de sons sp\u00e9cifiques ou de mots cl\u00e9s.<\/li>\n
- La r\u00e9verb\u00e9ration, <\/strong>les \u00e9chos discrets d\u2019une voix dans une pi\u00e8ce, est s\u00e9par\u00e9e et \u00e9ventuellement ajust\u00e9e pour accentuer la clart\u00e9 de la voix du participant.<\/li>\n
- La musique de fond <\/strong>est s\u00e9par\u00e9e en son propre flux, permettant ainsi de r\u00e9gler le volume \u00e0 l\u2019\u00e9tape de recomposition.<\/li>\n
- Le bruit de fond<\/strong> est s\u00e9par\u00e9 des \u00e9l\u00e9ments ambiants (mais il peut en inclure) qui seront ajust\u00e9s selon le cas d\u2019utilisation.<\/li>\n<\/ul>\n
2. Composants audio par utilisateur <\/strong><\/h3>\nUne fois les flux de donn\u00e9es s\u00e9par\u00e9s, nous les regroupons en composants audio par utilisateur, ce qui nous permet de s\u00e9lectionner, de modifier ou d\u2019agir individuellement sur le flux audio de chaque participant.<\/p>\n
3. Reconstruction bas\u00e9e sur le ML<\/strong><\/h3>\nSelon le cas d\u2019utilisation, nous pouvons combiner les flux de donn\u00e9es individuels pour les r\u00e9int\u00e9grer dans l\u2019audio partag\u00e9 avec les autres participants. Cette m\u00e9thode convient \u00e0 divers cas d\u2019utilisation et exigences. Par exemple, la fonctionnalit\u00e9 audio intelligente de Webex smart audio permet aux participants de choisir de supprimer le bruit de fond (Suppression du bruit), de supprimer tous les bruits de fond et les paroles \u00e0 l\u2019arri\u00e8re-plan (Optimiser pour ma voix) ou d\u2019entendre le son d\u2019origine lorsque vous jouez d\u2019un instrument ou chantez (mode Musique).<\/p>\n
4. Rendu audio<\/strong><\/h3>\nLe flux audio r\u00e9sultant est fourni aux autres participants sous une forme compr\u00e9hensible avec un minimum d\u2019effort intellectuel.<\/p>\n
L\u2019avantage computationnel au service de nouveaux cas d\u2019utilisation<\/strong><\/h2>\n\u00c9tant donn\u00e9 que notre architecture IA est ax\u00e9e sur la collaboration, nous s\u00e9parons le flux multim\u00e9dia dans un cycle de calcul unique au lieu de le traiter plusieurs fois via diff\u00e9rents mod\u00e8les. Cette m\u00e9thode augmente l\u2019efficacit\u00e9 globale du processus et fournit une exp\u00e9rience \u00e0 faible latence. Nous pouvons aussi ajouter facilement de nouveaux composants au cycle de calcul du flux, ce qui autorise de nouveaux sc\u00e9narios d\u2019utilisation \u00e9ventuels avec une image plus riche du flux d\u2019entr\u00e9e. L\u2019approche de Webex en mati\u00e8re de traitement du flux multim\u00e9dia s\u2019\u00e9tend aux applications suivantes\u00a0:<\/p>\n
La reconnaissance vocale optimise la compr\u00e9hension<\/strong><\/h3>\nNous pouvons distinguer les intervenants du bruit ambiant, les intervenants qui se trouvent plus pr\u00e8s ou plus \u00e9loign\u00e9s du micro, et m\u00eame r\u00e9gler la r\u00e9verb\u00e9ration de la salle. Tous ces \u00e9l\u00e9ments sont identifi\u00e9s sous la forme de flux s\u00e9par\u00e9s, ce qui offre une plus grande flexibilit\u00e9 pour r\u00e9pondre aux besoins sp\u00e9cifiques d\u2019un utilisateur. Nous pouvons s\u00e9lectionner, modifier et agir individuellement sur ces flux, puis reconstituer de nouveaux flux audio \u00e0 partir d\u2019un choix de composants audio. Par exemple, lors d\u2019un appel, nous pourrions \u00e9galiser le volume des intervenants au premier plan ou \u00e0 l\u2019arri\u00e8re-plan, alors que pour d\u2019autres, nous pourrions seulement mettre en exergue l\u2019intervenant plac\u00e9 au plus pr\u00e8s du micro. Nous pourrions aussi reconna\u00eetre des d\u00e9clencheurs d\u2019\u00e9v\u00e9nement audio tels que \u00ab\u00a0OK Webex\u00a0\u00bb ou mettre en \u00e9vidence d\u2019autres \u00e9l\u00e9ments audio environnants qu\u2019un participant juge importants.<\/p>\n
La vision par ordinateur booste la puissance des flux vid\u00e9o<\/strong><\/h3>\nNotre approche du flux multim\u00e9dia nous permet de mieux comprendre la sc\u00e8ne \u00e0 l\u2019\u00e9cran et de recomposer des \u00e9l\u00e9ments afin d\u2019am\u00e9liorer la qualit\u00e9 vid\u00e9o. Par exemple, nous pouvons dissocier un participant de son arri\u00e8re-plan et distinguer ses gestes. Nous pouvons r\u00e9aliser le rendu vid\u00e9o en s\u00e9lectionnant et en modifiant ces flux s\u00e9par\u00e9s pour que les autres participants voient mieux le pr\u00e9sentateur, avec un minimum d\u2019\u00e9l\u00e9ments g\u00eanants. Cette m\u00e9thode ouvre un univers de possibilit\u00e9s et facilite la collaboration dans des environnements difficiles.<\/p>\n
Webex Assistant optimise l\u2019exp\u00e9rience de collaboration<\/strong><\/h3>\nWebex Assistant fournit des commandes vocales pour l\u2019exp\u00e9rience de collaboration, une intelligence dynamique, des transcriptions et des services de traduction. Nous avons mis en \u0153uvre ces fonctionnalit\u00e9s de telle sorte que la plus grande part de la reconnaissance de la langue soit r\u00e9alis\u00e9e sur l\u2019appareil, ce qui augmente la pr\u00e9cision et r\u00e9duit la latence (jusqu\u2019\u00e0 quatre fois moins par rapport aux syst\u00e8mes cloud standards). Webex Assistant propose \u00e9galement des API avec des comp\u00e9tences Webex Assistant, afin que les d\u00e9veloppeurs ind\u00e9pendants puissent ajouter de nouvelles fonctionnalit\u00e9s et se connecter \u00e0 leurs applications avec des commandes vocales. Nous avons \u00e9largi le nombre de langues prises en charge pour les transcriptions et les traductions, et m\u00eame ajout\u00e9 des langues suppl\u00e9mentaires pour nos appareils, avec l\u2019anglais (d\u00e9j\u00e0 existant), l\u2019allemand, le fran\u00e7ais, l\u2019espagnol et le japonais.<\/p>\n
La vision par ordinateur ouvre les fronti\u00e8res de la\u00a03D<\/strong><\/h3>\nLa vision par ordinateur permet l\u2019identification de l\u2019environnement spatial dans un flux vid\u00e9o. L\u2019approche de Webex concernant la\u00a03D vise \u00e0 r\u00e9duire la charge cognitive pour les pr\u00e9sentateurs et les participants plut\u00f4t que de recourir \u00e0 des casques AR\/VR pour les repr\u00e9senter dans un espace enti\u00e8rement constitu\u00e9 de r\u00e9alit\u00e9 virtuelle. Par exemple, nous pouvons extraire avec pr\u00e9cision une adaptation et des mod\u00e8les\u00a03D. Nous pouvons aussi scanner la g\u00e9om\u00e9trie faciale des participants pour personnaliser et am\u00e9liorer l\u2019image.<\/p>\n
L\u2019approche de Webex concernant l\u2019IA offre aux \u00e9quipes une plus grande flexibilit\u00e9 pour collaborer et leur procure encore plus de possibilit\u00e9s de participer pendant les r\u00e9unions. Le mod\u00e8le robuste de traitement des flux multim\u00e9dias bas\u00e9 sur l\u2019IA fournit d\u00e8s aujourd\u2019hui une exp\u00e9rience de collaboration exceptionnelle et ouvre les nouvelles fronti\u00e8res de demain.<\/p>\n
\nVous souhaitez d\u00e9couvrir la diff\u00e9rence qu\u2019apporte la technologie d\u2019IA \u00e0 la collaboration\u00a0? Contactez-nous<\/a> d\u00e8s aujourd\u2019hui pour b\u00e9n\u00e9ficier d\u2019une d\u00e9monstration.<\/h4>\n<\/blockquote>\nEn savoir plus<\/strong><\/p>\nConcevoir des syst\u00e8mes d\u2019IA responsables<\/a><\/p>\n
Figure 1\u00a0: Mod\u00e8le de traitement audio bas\u00e9 sur l\u2019IA de Webex<\/em><\/p><\/div>\n Les clients Webex comptent sur notre portefeuille pour collaborer de partout. Notre approche consiste \u00e0 identifier les caract\u00e9ristiques du participant, ind\u00e9pendamment de son environnement, puis \u00e0 exploiter l\u2019IA et le machine learning (ML) pour s\u00e9parer l\u2019audio ou la vid\u00e9o en flux segment\u00e9s riches en donn\u00e9es. Ce niveau d\u2019extraction d\u00e9taill\u00e9e de flux de composants significatifs n\u2019avait jamais \u00e9t\u00e9 possible dans les logiciels de communication en temps r\u00e9el les plus courants.<\/p>\n La d\u00e9composition s\u00e9pare un flux audio entrant comprenant les \u00e9l\u00e9ments suivants\u00a0:<\/p>\n Une fois les flux de donn\u00e9es s\u00e9par\u00e9s, nous les regroupons en composants audio par utilisateur, ce qui nous permet de s\u00e9lectionner, de modifier ou d\u2019agir individuellement sur le flux audio de chaque participant.<\/p>\n Selon le cas d\u2019utilisation, nous pouvons combiner les flux de donn\u00e9es individuels pour les r\u00e9int\u00e9grer dans l\u2019audio partag\u00e9 avec les autres participants. Cette m\u00e9thode convient \u00e0 divers cas d\u2019utilisation et exigences. Par exemple, la fonctionnalit\u00e9 audio intelligente de Webex smart audio permet aux participants de choisir de supprimer le bruit de fond (Suppression du bruit), de supprimer tous les bruits de fond et les paroles \u00e0 l\u2019arri\u00e8re-plan (Optimiser pour ma voix) ou d\u2019entendre le son d\u2019origine lorsque vous jouez d\u2019un instrument ou chantez (mode Musique).<\/p>\n Le flux audio r\u00e9sultant est fourni aux autres participants sous une forme compr\u00e9hensible avec un minimum d\u2019effort intellectuel.<\/p>\n \u00c9tant donn\u00e9 que notre architecture IA est ax\u00e9e sur la collaboration, nous s\u00e9parons le flux multim\u00e9dia dans un cycle de calcul unique au lieu de le traiter plusieurs fois via diff\u00e9rents mod\u00e8les. Cette m\u00e9thode augmente l\u2019efficacit\u00e9 globale du processus et fournit une exp\u00e9rience \u00e0 faible latence. Nous pouvons aussi ajouter facilement de nouveaux composants au cycle de calcul du flux, ce qui autorise de nouveaux sc\u00e9narios d\u2019utilisation \u00e9ventuels avec une image plus riche du flux d\u2019entr\u00e9e. L\u2019approche de Webex en mati\u00e8re de traitement du flux multim\u00e9dia s\u2019\u00e9tend aux applications suivantes\u00a0:<\/p>\n Nous pouvons distinguer les intervenants du bruit ambiant, les intervenants qui se trouvent plus pr\u00e8s ou plus \u00e9loign\u00e9s du micro, et m\u00eame r\u00e9gler la r\u00e9verb\u00e9ration de la salle. Tous ces \u00e9l\u00e9ments sont identifi\u00e9s sous la forme de flux s\u00e9par\u00e9s, ce qui offre une plus grande flexibilit\u00e9 pour r\u00e9pondre aux besoins sp\u00e9cifiques d\u2019un utilisateur. Nous pouvons s\u00e9lectionner, modifier et agir individuellement sur ces flux, puis reconstituer de nouveaux flux audio \u00e0 partir d\u2019un choix de composants audio. Par exemple, lors d\u2019un appel, nous pourrions \u00e9galiser le volume des intervenants au premier plan ou \u00e0 l\u2019arri\u00e8re-plan, alors que pour d\u2019autres, nous pourrions seulement mettre en exergue l\u2019intervenant plac\u00e9 au plus pr\u00e8s du micro. Nous pourrions aussi reconna\u00eetre des d\u00e9clencheurs d\u2019\u00e9v\u00e9nement audio tels que \u00ab\u00a0OK Webex\u00a0\u00bb ou mettre en \u00e9vidence d\u2019autres \u00e9l\u00e9ments audio environnants qu\u2019un participant juge importants.<\/p>\n Notre approche du flux multim\u00e9dia nous permet de mieux comprendre la sc\u00e8ne \u00e0 l\u2019\u00e9cran et de recomposer des \u00e9l\u00e9ments afin d\u2019am\u00e9liorer la qualit\u00e9 vid\u00e9o. Par exemple, nous pouvons dissocier un participant de son arri\u00e8re-plan et distinguer ses gestes. Nous pouvons r\u00e9aliser le rendu vid\u00e9o en s\u00e9lectionnant et en modifiant ces flux s\u00e9par\u00e9s pour que les autres participants voient mieux le pr\u00e9sentateur, avec un minimum d\u2019\u00e9l\u00e9ments g\u00eanants. Cette m\u00e9thode ouvre un univers de possibilit\u00e9s et facilite la collaboration dans des environnements difficiles.<\/p>\n Webex Assistant fournit des commandes vocales pour l\u2019exp\u00e9rience de collaboration, une intelligence dynamique, des transcriptions et des services de traduction. Nous avons mis en \u0153uvre ces fonctionnalit\u00e9s de telle sorte que la plus grande part de la reconnaissance de la langue soit r\u00e9alis\u00e9e sur l\u2019appareil, ce qui augmente la pr\u00e9cision et r\u00e9duit la latence (jusqu\u2019\u00e0 quatre fois moins par rapport aux syst\u00e8mes cloud standards). Webex Assistant propose \u00e9galement des API avec des comp\u00e9tences Webex Assistant, afin que les d\u00e9veloppeurs ind\u00e9pendants puissent ajouter de nouvelles fonctionnalit\u00e9s et se connecter \u00e0 leurs applications avec des commandes vocales. Nous avons \u00e9largi le nombre de langues prises en charge pour les transcriptions et les traductions, et m\u00eame ajout\u00e9 des langues suppl\u00e9mentaires pour nos appareils, avec l\u2019anglais (d\u00e9j\u00e0 existant), l\u2019allemand, le fran\u00e7ais, l\u2019espagnol et le japonais.<\/p>\n La vision par ordinateur permet l\u2019identification de l\u2019environnement spatial dans un flux vid\u00e9o. L\u2019approche de Webex concernant la\u00a03D vise \u00e0 r\u00e9duire la charge cognitive pour les pr\u00e9sentateurs et les participants plut\u00f4t que de recourir \u00e0 des casques AR\/VR pour les repr\u00e9senter dans un espace enti\u00e8rement constitu\u00e9 de r\u00e9alit\u00e9 virtuelle. Par exemple, nous pouvons extraire avec pr\u00e9cision une adaptation et des mod\u00e8les\u00a03D. Nous pouvons aussi scanner la g\u00e9om\u00e9trie faciale des participants pour personnaliser et am\u00e9liorer l\u2019image.<\/p>\n L\u2019approche de Webex concernant l\u2019IA offre aux \u00e9quipes une plus grande flexibilit\u00e9 pour collaborer et leur procure encore plus de possibilit\u00e9s de participer pendant les r\u00e9unions. Le mod\u00e8le robuste de traitement des flux multim\u00e9dias bas\u00e9 sur l\u2019IA fournit d\u00e8s aujourd\u2019hui une exp\u00e9rience de collaboration exceptionnelle et ouvre les nouvelles fronti\u00e8res de demain.<\/p>\n En savoir plus<\/strong><\/p>\n Concevoir des syst\u00e8mes d\u2019IA responsables<\/a><\/p>\n1. D\u00e9composition bas\u00e9e sur le ML <\/strong><\/h3>\n
\n
2. Composants audio par utilisateur <\/strong><\/h3>\n
3. Reconstruction bas\u00e9e sur le ML<\/strong><\/h3>\n
4. Rendu audio<\/strong><\/h3>\n
L\u2019avantage computationnel au service de nouveaux cas d\u2019utilisation<\/strong><\/h2>\n
La reconnaissance vocale optimise la compr\u00e9hension<\/strong><\/h3>\n
La vision par ordinateur booste la puissance des flux vid\u00e9o<\/strong><\/h3>\n
Webex Assistant optimise l\u2019exp\u00e9rience de collaboration<\/strong><\/h3>\n
La vision par ordinateur ouvre les fronti\u00e8res de la\u00a03D<\/strong><\/h3>\n
\n
Vous souhaitez d\u00e9couvrir la diff\u00e9rence qu\u2019apporte la technologie d\u2019IA \u00e0 la collaboration\u00a0? Contactez-nous<\/a> d\u00e8s aujourd\u2019hui pour b\u00e9n\u00e9ficier d\u2019une d\u00e9monstration.<\/h4>\n<\/blockquote>\n