NVIDIA Research remporte le défi de la conduite autonome et le prix de l’innovation au CVPR

NVIDIA Research remporte le défi de la conduite autonome et le prix de l’innovation au CVPR

NVIDIA sera présenté la semaine prochaine comme le vainqueur du très disputé 3D Occupancy Prediction Challenge pour le développement de la conduite autonome lors de la Computer Vision and Pattern Recognition Conference (CVPR), à Vancouver, au Canada.

Le concours a reçu plus de 400 soumissions de près de 150 équipes réparties dans 10 régions.

La prédiction d’occupation 3D est le processus de prévision de l’état de chaque voxel dans une scène, c’est-à-dire chaque point de données sur une grille de vue à vol d’oiseau 3D. Les voxels peuvent être identifiés comme libres, occupés ou inconnus.

Essentielle au développement de systèmes d’auto-conduite sûrs et robustes, la prédiction de grille d’occupation 3D fournit des informations aux piles de planification et de contrôle des véhicules autonomes (AV) à l’aide de réseaux de neurones convolutifs et de modèles de transformateurs de pointe, qui sont activés par NVIDIA Plate-forme DRIVE.

« La solution gagnante de NVIDIA présente deux avancées audiovisuelles importantes », a déclaré Zhiding Yu, chercheur principal pour l’apprentissage et la perception chez NVIDIA. « Il démontre une conception de modèle à la pointe de la technologie qui offre une excellente perception à vol d’oiseau. Il montre également l’efficacité des modèles de fondation visuels avec jusqu’à 1 milliard de paramètres et une préformation à grande échelle dans la prédiction d’occupation 3D.

La perception de la conduite autonome a évolué au cours des dernières années, passant de la gestion de tâches 2D, telles que la détection d’objets ou d’espaces libres dans des images, à un raisonnement sur le monde en 3D avec plusieurs images en entrée.

Cela fournit désormais une représentation flexible et précise des objets dans des scènes de circulation complexes, ce qui est “essentiel pour atteindre les exigences de perception de la sécurité pour la conduite autonome”, selon Jose Alvarez, directeur de la recherche appliquée AV et scientifique distingué chez NVIDIA.

Yu présentera les travaux primés de l’équipe de recherche NVIDIA lors de l’atelier sur la conduite autonome de bout en bout de CVPR le dimanche 18 juin à 10 h 20 PT, ainsi qu’à l’atelier sur la conduite autonome centrée sur la vision le lundi 19 juin. , à 16h00 PT.

En plus de remporter la première place du défi, NVIDIA recevra lors de l’événement un prix de l’innovation, reconnaissant ses “nouvelles idées sur le développement de modules de transformation de vue”, avec “des performances considérablement améliorées” par rapport aux approches précédentes, selon l’atelier CVPR. Comité.

Lisez le rapport technique de NVIDIA sur la soumission.

Des véhicules plus sûrs grâce à la prédiction d’occupation 3D

Alors que la détection d’objets 3D traditionnelle – détection et représentation d’objets dans une scène, souvent à l’aide de cadres de délimitation 3D – est une tâche essentielle de la perception audiovisuelle, elle a ses limites. Par exemple, il manque d’expressivité, ce qui signifie que les cadres de délimitation peuvent ne pas représenter suffisamment d’informations du monde réel. Cela nécessite également de définir des taxonomies et des vérités de terrain pour tous les objets possibles, même ceux rarement vus dans le monde réel, tels que les dangers de la route qui peuvent être tombés d’un camion.

En revanche, la prédiction d’occupation 3D fournit des informations riches sur le monde à la pile de planification d’un véhicule autonome, ce qui est nécessaire pour une conduite autonome de bout en bout.

Les véhicules définis par logiciel peuvent être continuellement mis à niveau avec de nouveaux développements éprouvés et validés au fil du temps. Les mises à jour logicielles de pointe qui découlent d’initiatives de recherche, telles que celles reconnues au CVPR, permettent de nouvelles fonctionnalités et des capacités de conduite plus sûres.

La plate-forme NVIDIA DRIVE ouvre la voie à la production pour les constructeurs automobiles, en fournissant du matériel et des logiciels complets pour un développement audiovisuel sûr et sécurisé, de la voiture au centre de données.

En savoir plus sur le Challenge CVPR

Le défi de prédiction d’occupation 3D au CVPR a demandé aux participants de développer des algorithmes qui utilisaient uniquement l’entrée de la caméra lors de l’inférence. Les participants pourraient utiliser des ensembles de données et des modèles open source, facilitant l’exploration d’algorithmes basés sur les données et de modèles à grande échelle. Les organisateurs ont fourni un bac à sable de base pour les derniers algorithmes de pointe de prédiction d’occupation 3D dans des scénarios réels.

NVIDIA au CVPR

NVIDIA présente près de 30 articles et présentations au CVPR. Les experts qui discuteront de la conduite autonome incluent :

Consultez les autres conférences à l’ordre du jour et apprenez-en plus sur NVIDIA au CVPR, qui se déroule du 18 au 22 juin.

Image présentée avec l’aimable autorisation d’OccNet et d’Occ3D.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

*