Des scientifiques chinois développent la première puce de vision complémentaire "Tianmou Core"

Une équipe du Centre de recherche en calcul de type cerveau de l'Université Tsinghua a récemment développé la première puce de vision complémentaire de type cerveau au monde, "Tianmou Core", qui a été publiée en tant qu'article de couverture dans la revue académique internationale Nature le 30 mai.

Dans le monde ouvert, les systèmes intelligents doivent non seulement traiter d'énormes quantités de données, mais aussi faire face à des événements extrêmes tels que les dangers soudains dans les scènes de conduite, les changements de lumière drastiques à l'entrée du tunnel et les fortes interférences de flash la nuit, a déclaré Shi Luping, auteur correspondant de l'article et professeur au Département des instruments de précision de l'Université Tsinghua. Face à de telles scènes, les puces de perception visuelle traditionnelles présentent souvent une distorsion, une défaillance ou un retard important, ce qui limite la stabilité et la sécurité du système.

Un nouveau paradigme pour la perception visuelle

Afin de mieux résoudre les problèmes ci-dessus, une équipe du Centre de recherche en calcul de type cerveau de l'Université Tsinghua s'est concentrée sur la technologie des puces de perception visuelle de type cerveau et a proposé un nouveau paradigme de perception visuelle de type cerveau basé sur des primitives visuelles à double voie complémentaires. L'image montre "Tianmou Core". (Département des instruments de précision, Université Tsinghua)

"Ce paradigme s'inspire des principes de base du système visuel humain, décompose les informations visuelles du monde ouvert en représentations d'informations basées sur des primitives visuelles, et grâce à une combinaison organique de ces primitives, imite les caractéristiques du système visuel humain, formant deux avantages complémentaires et des voies de perception visuelle complètes de l'information." a déclaré Shi Luping.

Principales caractéristiques et applications

Basée sur ce nouveau paradigme, l'équipe a en outre développé la première puce de vision complémentaire de type cerveau au monde, "Tianmaicin", qui réalise une acquisition d'informations visuelles à grande vitesse, de haute précision et à plage dynamique élevée, au prix d'une bande passante et d'une consommation d'énergie extrêmement faibles, et peut efficacement faire face à divers scénarios extrêmes pour assurer la stabilité et la sécurité du système.

Dans le même temps, sur la base du "Tianmou core", l'équipe a également développé de manière indépendante des logiciels et des algorithmes haute performance, et a mené des vérifications de performance sur la plateforme de véhicule en environnement ouvert. Dans une variété de scénarios extrêmes, le système réalise un raisonnement perceptuel en temps réel avec une faible latence et des performances élevées, démontrant son potentiel d'application dans le domaine des systèmes intelligents sans pilote.

Zhao Rong, l'auteur correspondant de l'article et professeur au Département des instruments de précision de l'Université Tsinghua, a déclaré que Tianmou Core ouvre une nouvelle voie pour des applications importantes telles que la conduite autonome et l'intelligence incarnée.

Signification et perspectives d'avenir

Combinée à l'accumulation technologique de l'équipe dans l'application de la puce de calcul de type cerveau "day movement", de la chaîne d'outils logiciels de type cerveau et du robot de type cerveau, l'ajout de "Tianmouxin" permettra d'améliorer davantage l'écologie de l'intelligence de type cerveau et de promouvoir efficacement le développement de l'intelligence artificielle générale. Selon les rapports, c'est la deuxième fois que l'équipe apparaît en couverture de Nature après le calcul de type cerveau à fusion hétérogène "Day movement", marquant une percée fondamentale dans les deux directions du calcul de type cerveau et de la perception de type cerveau.