Le blog de l'entreprise Capteur de vision basé sur les événements haute vitesse SONY IMX646-AAMR-C 1/2,5 pouces

Shenzhen Mingjiada Electronics Co., Ltd. fournit le SonyIMX646-AAMR-C, un capteur d'image haute vitesse piloté par événement de 1/2,5 pouce avec environ 0,92 million de pixels effectifs.

Le SonyIMX646-AAMR-Cest un capteur de vision événementiel (EVS) empilé à haute vitesse de nouvelle génération développé par Sony Semiconductor en collaboration avec Prophesee, doté d'un format optique 1/2,5 pouce (diagonale de 7,1 mm). Grâce à son architecture de pixels innovante et à son mécanisme de détection d'événements, il s'affranchit complètement des limitations de fréquence d'images des capteurs d'imagerie traditionnels basés sur les images. Avec des avantages essentiels tels que l'acquisition d'événements asynchrones, une latence ultra-faible au niveau de la microseconde et une plage dynamique ultra-élevée, il est bien adapté aux exigences de perception dynamique de scènes à grande vitesse. Il constitue un composant visuel de base hautes performances pour l'automatisation industrielle, la robotique intelligente, la sécurité haut de gamme et les applications de mesure et de contrôle intelligents.

I. Positionnement principal et avantages architecturaux de l'IMX646-AAMR-C

L'IMX646-AAMR-C est un capteur haute définition piloté par événements conçu pour les applications de vision haut de gamme à grande vitesse. Contrairement aux capteurs CMOS traditionnels, qui fonctionnent sur une fréquence d'images fixe avec une exposition d'images séquentielle et une sortie globale, ce capteur utilise une architecture de détection d'événements asynchrone au niveau des pixels. Chaque pixel surveille indépendamment les changements de luminosité en temps réel, en produisant les coordonnées des pixels, les horodatages et les données de polarité de luminosité uniquement lorsqu'un changement soudain d'éclairage est détecté. Les zones statiques sans changement de luminosité ne génèrent pas de données redondantes, réalisant ainsi un mode de détection « acquisition à la demande, sortie efficace » au niveau matériel.

Sur le plan matériel, il utilise le processus mature de pixels empilés de Sony et présente une taille de pixel ultra-petite, leader du secteur, de 4,86 ​​μm. Cela garantit une résolution haute définition de 1 280 x 720 (environ 920 000 pixels effectifs) tout en réduisant considérablement l'empreinte physique du capteur, équilibrant ainsi la précision de l'image avec la nécessité d'une conception compacte de l'appareil. La puce intègre un circuit de conversion logarithmique I/V, une unité de détection de changement d'éclairement et un circuit d'arbitrage, permettant la reconnaissance d'événements, le filtrage des signaux et le conditionnement des données sans avoir recours à des puces auxiliaires externes. Cela améliore considérablement l'intégration et réduit la complexité du développement matériel pour les appareils finaux.

II.IMX646-AAMR-CSpécifications matérielles de base et performances exceptionnelles

Tirant parti de la conception exclusive des pixels et de l'optimisation des circuits, ce capteur atteint des performances de pointe dans trois dimensions principales : vitesse de réponse, plage dynamique et performances en faible luminosité. Tous les paramètres de base ont fait l’objet d’un étalonnage de qualité industrielle pour garantir leur adéquation aux environnements d’exploitation exigeants.

1. Latence ultra-faible et réponse à grande vitesse

LeIMX646-AAMR-Csurmonte les limitations de fréquence d'images des capteurs traditionnels pour réaliser une détection en temps réel purement événementielle. Dans des conditions d'éclairage standard de 1 000 lux, la latence de réponse globale est ≤ 800 μs, avec une latence maximale aussi faible que 300 μs. Cela permet de capturer avec précision les trajectoires instantanées de cibles en mouvement à grande vitesse à intervalles de quelques millisecondes, éliminant ainsi complètement le flou de mouvement et le décalage d'image associés à l'imagerie traditionnelle. Même dans des conditions de luminosité extrêmement faible (0,3 lux), la latence reste inférieure à 9 000 μs, équilibrant une réponse rapide et une adaptabilité en faible luminosité. Cela le rend parfaitement adapté à des scénarios tels que l’inspection de lignes de production à grande vitesse, l’évitement dynamique d’obstacles pour les drones et le suivi de mouvements à grande vitesse.

2. Imagerie à plage dynamique ultra-élevée

Équipé d'un circuit de pixels à réponse logarithmique intégré, leIMX646-AAMR-Catteint une plage dynamique supérieure à 110 dB, couvrant une plage d'éclairage exceptionnellement large de 30 mLux à 100 kLux. Il est capable de gérer des scénarios complexes impliquant une lumière directe forte, des zones ombragées à faible luminosité et des transitions rapides entre la lumière et l'obscurité. Dans des conditions de contre-jour, de surveillance extérieure à haute intensité et d'environnements industriels avec des conditions de lumière et d'obscurité alternées, il préserve efficacement les détails dans les zones claires et sombres, éliminant les problèmes de surexposition et de sous-exposition, avec une tolérance d'imagerie dépassant de loin celle des capteurs traditionnels basés sur l'image.

3. Imagerie stable et à faible bruit

LeIMX646-AAMR-CLe capteur offre une excellente suppression du bruit de fond. Sous un éclairage standard de 1 000 lux, la fréquence des événements en arrière-plan n’est que de 0,1 Hz ; dans des conditions de faible luminosité de 0,3 lx, la fréquence des événements de fond n'est pas supérieure à 5 Hz. La non-uniformité du seuil de contraste des pixels est ≤ 6 %, ce qui réduit efficacement la production d'événements de bruit parasite, allège la charge de calcul sur les algorithmes de filtrage en aval et garantit la précision et la stabilité de la perception dans les scènes dynamiques à grande vitesse.

4. Spécifications matérielles de base

LeIMX646-AAMR-Ca un format optique standard de 1/2,5 pouce, avec une résolution effective en pixels de 1 280 (H) × 720 (V), totalisant environ 0,92 million de pixels effectifs, et une taille de pixel de 4,86 ​​μm × 4,86 ​​μm ; Il utilise un boîtier LGA à 156 broches avec des dimensions externes de 13 mm × 13 mm, offrant un format compact adapté à l'intégration dans des appareils miniaturisés ; l'alimentation se compose de trois lignes distinctes : 3,0 V pour l'analogique, 1,1 V et 1,8 V pour le numérique, avec un excellent contrôle de la consommation électrique, ce qui la rend adaptée à un fonctionnement continu prolongé.

III. LeIMX646-AAMR-CLes fonctionnalités intelligentes étendues de

L'IMX646-AAMR-C intègre plusieurs fonctions propriétaires de traitement d'image et d'optimisation d'événements. Les paramètres peuvent être configurés de manière flexible via des registres pour répondre aux exigences de perception personnalisées dans différents scénarios, offrant ainsi une fonctionnalité et une extensibilité exceptionnelles.

- Réglage des paramètres multidimensionnels : prend en charge la personnalisation des seuils de contraste, du délai de réponse et du temps mort. Combiné avec un filtrage de réduction du bruit analogique, cela permet une optimisation précise de la sortie d'événement en fonction de l'éclairage de la scène et de la vitesse de mouvement, répondant ainsi aux exigences de détection de précision variable.

- Acquisition flexible de ROI : prend en charge trois types de fonctionnalités de ROI : définition de région arbitraire via la matrice, le mode fenêtre et le recadrage numérique - permettant le verrouillage des zones de détection cible et le masquage des régions d'image non pertinentes, réduisant ainsi davantage le volume de sortie de données et améliorant l'efficacité de la détection.

- Fonctions professionnelles de traitement des événements : les fonctions intégrées d'anti-scintillement, de filtrage des événements et de statistiques de taux d'événements filtrent automatiquement les événements non valides causés par le scintillement de l'éclairage et les interférences environnementales ; Prend en charge le masquage des pixels et l'inversion de polarité des événements pour s'adapter à diverses logiques de traitement algorithmique.

- Mécanisme de synchronisation multi-appareils : prend en charge le mode maître-esclave pour le fonctionnement synchronisé de plusieurs capteurs, permettant une synchronisation temporelle précise dans les systèmes de vision multi-caméras pour répondre aux exigences des applications haut de gamme telles que la reconstruction 3D, la télémétrie stéréo et la détection collaborative à grande échelle.

- Aide à la sensibilisation à l'environnement : un thermomètre et un luxmètre intégrés (doubles modes de détection pour l'éclairement absolu et relatif) permettent la collecte en temps réel des données de température de fonctionnement de l'appareil et de lumière ambiante, fournissant une prise en charge des données pour un ajustement adaptatif des paramètres d'imagerie et améliorant l'adaptabilité environnementale de l'appareil.

IV.IMX646-AAMR-CSpécifications de l'interface haute vitesse et de la sortie de données

Pour répondre aux exigences de transmission des données d'événements à grande vitesse, leIMX646-AAMR-Cest équipé d'une interface de transmission bimode à grande vitesse, prenant en charge une commutation de configuration flexible pour s'adapter aux terminaux ayant des exigences de bande passante variables. L'interface comprend deux modes de transmission : MIPI (commutable entre 1 canal et 2 canaux) et SLVS (commutable entre 2 canaux et 4 canaux). La bande passante de transmission à haut débit garantit la sortie sans latence de volumes massifs de données d'événements instantanés, éliminant ainsi les problèmes de congestion et de perte de données.

Il est également compatible avec EVT 2.1 et EVT 3.0, les deux formats de sortie d'événements courants. EVT 3.0 utilise un mode de compression d'encodage 16 bits, ce qui réduit considérablement la bande passante de transmission des données et les besoins de stockage. Cela allège efficacement la charge de calcul sur la puce hôte principale, améliorant la vitesse de réponse et la stabilité opérationnelle de l'ensemble du système de vision, et le rendant adapté au déploiement dans des appareils embarqués légers.

V. Scénarios d'application de base duIMX646-AAMR-C

Tirant parti de ses avantages complets de vitesse élevée, de faible latence, de plage dynamique élevée et de faible consommation d'énergie de calcul, ce capteur est parfaitement adapté à divers scénarios de détection de vision dynamique à grande vitesse, avec un large éventail de domaines d'application principaux :

- Fabrication industrielle intelligente : détection de défauts sur la chaîne d'assemblage à grande vitesse, mesure dimensionnelle dynamique de pièces de précision, suivi de la trajectoire de mouvement en temps réel des bras robotiques et surveillance des vibrations et des déplacements des équipements. Tirer parti d’une latence de l’ordre de la microseconde pour obtenir un contrôle de qualité et un contrôle de mouvement en temps réel de haute précision.

- Robotique intelligente : évitement dynamique d'obstacles, modélisation environnementale en temps réel et suivi humain pour les robots de service et les robots mobiles industriels. Permet une perception environnementale à grande vitesse sans nécessiter une puissance de calcul élevée, améliorant ainsi la sensibilité de réponse au mouvement du robot.

- Surveillance de sécurité haut de gamme : capture de cibles dynamiques de jour et de nuit en extérieur, suivi des piétons et des véhicules se déplaçant rapidement et surveillance dans des scénarios de rétroéclairage et de lumière de haute intensité. Avec une plage dynamique ultra-élevée et une faible latence, il résout des problèmes tels que le flou de mouvement lors des mouvements à grande vitesse et l'échec de l'imagerie dans les scènes à contraste élevé rencontrées par les systèmes de surveillance traditionnels.

- Recherche scientifique et mesures spécialisées : observation d'expériences scientifiques à grande vitesse, surveillance et contrôle dynamiques d'instruments de précision, évitement d'obstacles à basse altitude et à grande vitesse pour les drones et perception dynamique pour les jeux interactifs : tous des scénarios exigeant des performances et une précision rigoureuses en temps réel.

VI. Principaux avantages concurrentiels duIMX646-AAMR-C

Par rapport aux capteurs d'images traditionnels basés sur des images et aux capteurs similaires pilotés par événements, les principaux avantages du SonyIMX646-AAMR-Cse situent dans quatre domaines clés : premièrement, des performances en temps réel inégalées, avec une latence de l'ordre de la microseconde le libérant des contraintes de fréquence d'images pour capturer des détails dynamiques éphémères ; deuxièmement, une efficacité de données exceptionnelle, produisant uniquement des événements dynamiques valides tout en réduisant considérablement les données redondantes, réduisant ainsi les coûts de calcul et de bande passante de plus de 50 % ; Troisièmement, une forte adaptabilité environnementale : une plage dynamique ultra-large combinée à une conception à très faible bruit garantit l'adéquation aux conditions de fonctionnement complexes, notamment le jour et la nuit, les transitions entre la lumière et l'obscurité et les environnements avec un éclairage à la fois fort et faible ; quatrièmement, une intégration élevée et une facilité de mise en œuvre : une suite complète intégrée de circuits de traitement du signal et de fonctions réglables, associée à des interfaces standardisées à grande vitesse, raccourcit considérablement le cycle de R&D pour les produits des utilisateurs finaux et facilite la production de masse à grande échelle.

VII. Résumé duIMX646-AAMR-C

Le capteur de vision événementiel haute vitesse Sony IMX646-AAMR-C 1/2,5 pouces combine la technologie de traitement empilé CMOS de pointe de Sony avec la technologie de détection d'événements mature de Prophesee, comblant les lacunes des capteurs de vision traditionnels dans les scènes dynamiques à grande vitesse, les conditions d'éclairage complexes et les applications intégrées à faible puissance de calcul. Sa résolution haute définition, sa latence ultra-faible de l'ordre de la microseconde, sa plage dynamique ultra-élevée et son intégration légère en font le composant central préféré des systèmes de vision de nouvelle génération dans les domaines de l'automatisation industrielle, de la robotique intelligente et des applications de sécurité haut de gamme, conduisant à l'évolution intelligente de la vision industrielle de « l'imagerie basée sur les images » à la « perception basée sur les événements ».