En plus de l’utilisation de capteurs et caméras extérieurs, cette plateforme exploite les données issues de caméras situées à l’intérieur de l’habitacle et utilisées pour visualiser le comportement du conducteur, afin de prendre les bonnes décisions de conduite. Cela soit dans un mode 100% autonome, soit dans un mode d’assistance dans le cas où le conducteur garde la main.

A l’image d’un Google ou d’un Tesla, de plus en plus de grands groupes s’intéressent de très près au secteur de l’automobile alors qu’ils n’avaient à l’origine rien à voir avec ce type de débouchés. C’est par exemple le cas du spécialiste des processeurs et cartes graphiques pour PC et consoles de jeu, Nvidia, qui travaille depuis plusieurs années déjà sur des solutions dédiées à l’automobile, et en particulier aux systèmes d’assistance à la conduite et aux véhicules autonomes.

Dernière annonce en date pour Nvidia, le développement d’une plateforme basée sur de l’intelligence artificielle et baptisée AI Co-Pilot. Comprenant un ensemble de caméras et de capteurs extérieurs pour détecter l’environnement et le positionnement du véhicule mais également des caméras intérieures permettant de sonder le comportement du conducteur, cette plateforme repose sur une sorte de supercalculateur nommé Xavier et embarquant un processeur ARM 64 bits à 8 cœurs et un processeur graphique Volta capable de réaliser 30000 Tops. Xavier fait office de « cerveau » pour gérer tous ces capteurs, analyser les données récoltées et prendre des décisions de conduite qu’il traduit en action sur le véhicule ou en suggestion au conducteur si le véhicule n’est pas en mode 100% autonome. Dans ce dernier cas, on est davantage dans un mode copilote (d’où le nom du dispositif) et c’est d’ailleurs dans ce mode qu’il sera utilisé pour les premières applications.

Parmi les nouvelles fonctionnalités offertes par cette plateforme, citons la reconnaissance faciale, la détection de la direction du regard du conducteur pour le prévenir des obstacles ou dangers qu’il ne verrait pas, le deep learning pour converser avec le conducteur grâce à une reconnaissance de la langue, à une compréhension avancée du langage et même à une lecture sur les lèvres du conducteur.

Un partenariat a d’ores et déjà été conclu entre Nvidia et Audi pour l’introduction d’ici 2020 de ce dispositif dans certains modèles du constructeur allemand.