500 vidéos analysées en local : Qualcomm montre jusqu’où l’IA peut aller sur smartphone

Les appareils photo des smartphones ne se contentent plus de capturer une scène. Ils peuvent désormais l’analyser en temps réel pour comprendre les mouvements, les couleurs, la lumière ou encore les personnes présentes dans l’image. C’est l’une des ambitions affichées par Qualcomm lors du Snapdragon Summit, organisé à Hawaï.

Jude Heep, vice-président en charge de la gestion des produits multimédia et appareil photo chez Qualcomm, a présenté les capacités du Snapdragon 8 Elite de 6e génération, qui inaugure notamment un processeur d’images 20 bits de deuxième génération.

Selon Qualcomm, son nouveau pipeline HDR 20 bits doit offrir une plage dynamique particulièrement étendue et améliorer le rendu des scènes complexes grâce à un nouveau moteur d’intelligence du mouvement reposant sur l’apprentissage automatique.

• Qualcomm scinde son offre haut de gamme et arme ses puces pour l’IA agentique

Trois capteurs de 64 mpx traités en simultané

L'une des principales évolutions concerne la prise de vue. Le nouveau système est capable de traiter simultanément les flux provenant de trois capteurs de 64 mégapixels avec la technologie ZSL (Zero Shutter Lag).

L'idée est de réduire au maximum le décalage entre le moment où l’utilisateur appuie sur le déclencheur et celui où l’image est effectivement capturée. Une approche intéressante pour les scènes en mouvement, où quelques millisecondes peuvent suffire à modifier le résultat.

Qualcomm introduit également son Elite Color Engine, un moteur dédié au traitement des couleurs. Celui-ci exploite des LUT 3D (tables de correspondance) en temps réel afin d’ajuster certaines teintes de manière sélective. Concrètement, il devient possible de renforcer le bleu d’un ciel sans modifier artificiellement la couleur de la peau d’une personne ou celle de la végétation présente dans la scène.

Et sur le front de l’audio, le Snapdragon 8 Elite de 6e génération intègre une fonction baptisée AI Voice Bubble. Elle est conçue pour isoler la voix de l’utilisateur et atténuer les bruits environnants, sans nécessiter l’enregistrement préalable de la voix du locuteur.

L’IA trie des centaines de vidéos en local

L’autre démonstration présentée par Qualcomm concerne cette fois le montage vidéo. Lors du Snapdragon Summit, le vidéaste Joshua Timothy a montré un flux de travail dans lequel l’IA analyse plus de 500 clips vidéo directement sur l’appareil. Ce système repose sur un modèle de langage exécuté localement sur le NPU, l’unité de traitement neuronal du Snapdragon. Les vidéos peuvent ainsi être analysées et classées en fonction de leur contenu, sans nécessiter l’envoi des fichiers vers le cloud.

L’utilisateur peut ensuite effectuer une recherche en langage naturel, par exemple pour retrouver les séquences contenant « beaucoup d’action ». L’agent IA identifie alors les clips correspondants, les classe et peut même préparer des scripts destinés à des logiciels de montage professionnels comme DaVinci Resolve.

Qualcomm affirme qu’une tâche de classification qui pouvait auparavant nécessiter quatre à cinq heures de travail manuel peut désormais être largement automatisée. Les informations issues de cette analyse peuvent ensuite être synchronisées avec un smartphone. Le monteur peut ainsi poursuivre son travail sur mobile, y compris sans connexion Internet. Un scénario qui prend notamment son sens dans les situations où l’accès au cloud est limité, comme à bord d’un avion.