MaixCAM2 : La caméra IA modulaire révolutionnaire de Sipeed pour les applications d’IA

Selon cnx-software, la MaixCAM2 de Sipeed est une caméra IA modulaire spécialement conçue pour les fabricants et les chercheurs. Elle est équipée d’un SoC IA, l’Axera AX630, capable de délivrer des performances de 3,2 TOPS en INT8 et jusqu’à 12,8 TOPS en INT4. En comparaison, la MaixCAM2 surpasse largement les performances des systèmes OpenMV-N6 et Raspberry Pi 5, offrant des résultats 10 à 20 fois meilleurs. Elle peut même rivaliser avec le Jetson Orin Nano 4 Go, affichant une performance similaire de 140 FPS sur le modèle YOLO11n.

12,8 TOPS avec la puce Axera AX630 : une avancée significative pour les utilisateurs

Cette caméra se décline avec des options de mémoire RAM de 1 Go ou 4 Go, ainsi qu’un flash eMMC de 32 Go. Un emplacement pour carte microSD est également inclus pour le stockage. L’affichage se fait via un écran tactile de 2,4 pouces. La qualité d’image est assurée par un capteur 8MP/4K à 30 ips, complété par des fonctionnalités audio avec deux microphones et un haut-parleur. La MaixCAM2 se prête parfaitement à l’utilisation dans des applications LLM et VLM locales. Pour les extensions, elle est dotée de deux connecteurs PMOD qui permettent d’ajouter des caméras thermiques et des capteurs de distance de temps de vol (ToF).

1/1,8” 4K et 40 applications IA : la puissance au service de la créativité

Le processeur Arm Cortex-A53 dual-core, fonctionnant à 1,2 GHz sous Ubuntu Linux, ainsi que le noyau RISC-V E907 32 bits, permettent une exécution efficace des tâches. L’unité de traitement neuronal (NPU) associée atteint jusqu’à 12,8 TOPS en INT4 et 3,2 TOPS en INT8, supportant des modèles de convolution et de transformateur, tels que YOLO, LLM et VLM, avec des performances impressionnantes de 113 FPS pour le YOLO11n à 640 × 640. Pour les capacités vidéo, le FAI gère le 4K à 30 ips, tandis que la VPU prend en charge l’encodage et le décodage des vidéos en H.264/H.265.

Avec une mémoire flash eMMC de 32 Go et un port pour carte MicroSD, la flexibilité de stockage est notable. Le système audio se complète d’un amplificateur PA et de microphones intégrés, assurant une capture audio de haute qualité. Le réseautage est optimisé grâce aux modules WiFi 6 et BLE 5.4, ainsi qu’à une interface Ethernet. En ce qui concerne les ports, un port USB 2.0 Type-C est présent, offrant des fonctionnalités étendues, ainsi qu’un IMU 6 axes intégré pour un suivi de mouvement précis.

Pour les débutants, Sipeed facilite l’expérience avec plus de 40 applications d’IA préinstallées, incluant Qwen3-VL-2B VLM et le modèle de vision IA Yolov11n. Les utilisateurs avancés peuvent développer leurs propres modèles grâce à l’environnement MaixPy Python et l’IDE MaixVision.

La modularité de la MaixCAM2 se manifeste par ses connecteurs PMOD, permettant l’ajout d’une caméra thermique avec des résolutions allant de 32×24 à 640×480 en utilisant la super résolution IA, ainsi qu’un capteur ToF offrant une résolution de 100×100.

Sipeed a mis en exergue les capacités du capteur 4K 1/1,8 pouces de la MaixCAM2 en le comparant au module de caméra Raspberry Pi 3 et divers autres dispositifs tels que des caméras d’action et des smartphones, notamment dans des conditions de faible éclairage.

Afin de mieux comprendre les capacités de la MaixCAM2 dans le cadre du modèle YOLO11n, des tests comparatifs ont été effectués avec d’autres plateformes comme le Raspberry Pi 5, le Rockchip RK3588 et le NVIDIA Jetson Orin Nano 4 Go, soulignant ainsi la performance de cette caméra.

Les résultats montrent que, bien que le MaxCAM2 ne soit pas en mesure d’égaler les performances d’un AMD 8845HS, il se distingue par son efficacité et sa rapidité, étant trois fois plus performant qu’un Raspberry Pi 5.

Ce modèle est le quatrième appareil à intégrer le SoC AX630/AX630C, après le module M5Stack LLM, le kit de calcul LLM630, et le KVM IP NanoKVM Pro 4K de Sipeed. C’est également la première caméra AI prête à l’emploi qui utilise cette architecture.

La présentation vidéo incluant des démonstrations des capacités de la caméra AI MaixCAM2 4K est disponible à la fin de cet article. Sipeed a récemment lancé une campagne Kickstarter avec un objectif de financement de 50 000 HKD (environ 6 400 US$). Les offres commencent à 69 $ pour la version avec 1 Go de RAM et un capteur 2K, 99 $ pour la version 4 Go/2K, et 119 $ pour le modèle 4 Go/4K présenté ici. Les frais de port sont de 40 HKD pour Hong Kong, et entre 15 et 25 $ US pour le reste du monde, avec un début des livraisons prévu à la fin du mois prochain, juste après la campagne de financement.