Ambarella, Inc. a annoncé lors de l'exposition sur la sécurité ISC West, l'expansion continue de son portefeuille de systèmes sur puce (SoC) d'IA avec la famille CV75S en 5nm. Ces nouveaux SoC constituent l'option la plus économe en énergie et en coût de l'industrie pour l'exécution des derniers modèles multimodaux de langage de vision (VLM) et des réseaux de transformateurs de vision. Cette efficacité rend ces technologies d'IA de pointe réalisables pour une large gamme d'appareils à coût et à consommation limités dans les caméras de sécurité pour les entreprises, les villes intelligentes et le commerce de détail, la robotique industrielle et le contrôle d'accès, ainsi qu'une multitude d'appareils vidéo grand public dotés d'IA, tels que les caméras de sport et de conférence.

Un exemple typique de la façon dont le CV75S sera utilisé pour faire fonctionner les VLM dans les caméras d'entreprise est une recherche en langage naturel qui est traitée dans la caméra pour rechercher un objet ou une scène dans le contenu qu'elle a capturé. Un VLM multimodal, tel que le modèle CLIP (contrastive language-image pre-training), peut parcourir les séquences et fournir des résultats instantanés sans avoir été formé à un objet ou à un contexte spécifique. Cela ouvre un tout nouvel éventail de capacités d'IA pour les caméras d'entreprise, qui peuvent désormais exécuter des tâches d'IA adaptées à leur installation et aux besoins des utilisateurs sans avoir à réapprendre et à déployer de nouveaux modèles d'IA pour chaque tâche.

Il s'agit de la première famille de SoC grand public d'Ambarella à intégrer son dernier moteur d'IA CVflow 3.0, qui multiplie par trois les performances par rapport à la génération précédente, avec la prise en charge des VLM et des transformateurs de vision, ainsi que du traitement d'image avancé basé sur l'IA. De plus, le CV75S intègre la dernière génération de processeur de signal d'image d'Ambarella, l'encodage vidéo 4KP30 H.264/5, deux cœurs Arm Cortex-A76 de 1,6 GHz et une connectivité USB 3.2. Pour accélérer la mise sur le marché, la famille CV75S est prise en charge par la plate-forme de développement Cooper ? d'Ambarella.

Developer Platform d'Ambarella. Cette plateforme récemment introduite fournit des solutions matérielles et logicielles complètes pour la création de systèmes d'intelligence artificielle de pointe, y compris des capacités de calcul et logicielles puissantes, sûres et sécurisées. Elle se compose d'outils matériels de qualité industrielle, collectivement appelés Cooper Metal, ainsi que de Cooper Foundry, qui fournit une pile logicielle multicouche prenant en charge l'ensemble du portefeuille de SoC AI d'Ambarella.