Lisez le système de surveillance des conducteurs de voitures intelligentes dans un article

Driver Monitoring System, en abrégé DMS, est l'abréviation de l'anglais Driver Monitor System, c'est-à-dire système de surveillance du conducteur. Il réalise principalement les fonctions d'identification du conducteur, de fatigue du conducteur et de détection des comportements dangereux.

Système Ford DMS

01 Avec le soutien de la réglementation, DMS est entré dans la voie rapide du développement

Parmi les conduites autonomes L2-L3 qui ont commencé la production de masse à ce stade, il n'existe en réalité que des conditions. Dans de nombreux cas, le conducteur est tenu de reprendre le véhicule à temps pour s'en débarrasser. Par conséquent, lorsque les conducteurs font trop confiance à la conduite autonome et abandonnent ou affaiblissent le contrôle du processus de conduite, certains accidents peuvent survenir. L'introduction d'un système de surveillance des pilotes DMS peut atténuer efficacement ce problème.

Système Magna DMS, tiré de la vidéo d'introduction de Magna

Par conséquent, ces dernières années, les politiques et réglementations de divers pays ont commencé à promouvoir l'introduction du DMS : à la fois l'UE et Chine Promulguer des lois et des réglementations. La Chine a pris l'initiative d'imposer des exigences obligatoires pour l'installation de systèmes DMS sur les modèles de véhicules commerciaux, telles que « Deux passagers et un danger », et des exigences en matière de montage sur les véhicules de tourisme sont également en cours de formulation. L'Union européenne a inclus le DMS comme élément clé et condition nécessaire pour l'obtention de la note de sécurité cinq étoiles Euro NCAP. Presque à partir de 2020, le taux de chargement des systèmes DMS a augmenté rapidement et l'industrie est entrée dans la voie du développement rapide.

Le 21 juillet, les « Spécifications de gestion pour les essais routiers et l'application de démonstration de véhicules intelligents connectés (essai) » publiées conjointement par le ministère de l'Industrie et des Technologies de l'information, le ministère de la Sécurité publique et le ministère des transports a souligné l'exigence que les véhicules connectés intelligents doivent avoir en ligne. La fonction de surveillance peut refléter la surveillance vidéo et vocale embarquée du conducteur et l'état de l'interaction homme-machine.

02 Vision Solution-DMS Technical Solution Introduction

Les fonctions principales du DMS sont principalement la surveillance de la fatigue, la surveillance des distractions et la surveillance des comportements dangereux. Les premières solutions DMS étaient principalement mises en œuvre via des technologies non biométriques, telles que des volants et des capteurs de direction pour surveiller tout mouvement irrégulier du volant, tout changement de voie ou tout changement de vitesse déraisonnable. Cependant, en raison de la complexité du système et d’une perception non intuitive, le taux d’adoption global a été très faible.

Les premiers DMS peuvent induire en erreur le jugement du système en raison d'une perception non intuitive. Source, Zhihu Constantine.DC

DMS à ce stade est principalement basé sur la reconnaissance faciale par caméra et la technologie de suivi oculaire. Il collecte des informations faciales sur le conducteur via la lumière infrarouge, etc., puis analyse l'état physique actuel de la personne grâce à des algorithmes. , lorsqu'il détecte que le conducteur est dans un état dangereux, il le rappelle en faisant clignoter un voyant rouge ou en faisant vibrer le volant. La partie matérielle de l'ensemble du système est composée de caméras + de solutions de contrôleur de domaine/véhicule de cockpit intégrées ; la partie logicielle implique principalement des algorithmes de vision IA ;

La plupart des systèmes de surveillance du conducteur actuels utilisés pour détecter la fatigue du conducteur utilisent une caméra à lumière visible 2D traditionnelle à moindre coût (avec LED infrarouge IR).

Introduction à la caméra DMS optoélectronique Crystal

Système DMS Idéal L9

En 2022, Lili L9 s'équipe du 3D de Melexis -Capteur ToF et appliquez-le au système DMS. Cette technologie de détection optique 3D utilisant la lumière proche infrarouge peut construire une « carte de profondeur » de la tête du conducteur. Grâce à la « carte de profondeur », les caractéristiques faciales uniques du conducteur peuvent être analysées avec précision et ses performances dépassent de loin celles de la technologie 2D. Outre Melexis, NXP, ams et Osram proposent également des solutions techniques similaires.

Intégration de la caméra

Cette caméra est principalement installée dans la position face au conducteur, y compris le rétroviseur intérieur/enregistreur de conduite, le volant, l'écran de commande du centre des instruments et le montant A, etc. Compte tenu de l’esthétique de l’intérieur dans son ensemble, l’intégration de caméras est également devenue un sujet de grande préoccupation.

Magna intègre la caméra dans le rétroviseur

Tianma sort un écran perforé pouvant intégrer une caméra DMS

Système DMS Extension des fonctions

Les fonctions de base du système de surveillance du conducteur sont la surveillance de la fatigue, la surveillance des distractions et la surveillance des comportements dangereux. Cependant, avec l'introduction de caméras 2D/3D et le développement d'algorithmes de reconnaissance faciale, le système DMS intègre également le développement de technologies de conduite autonome telles que l'ADAS, donnant naissance à des applications innovantes de scènes intelligentes IHM d'interaction homme-machine pour améliorer la haute performance. Conduite autonome de niveau supérieur. /Expérience de conduite à l'ère des voitures connectées intelligentes.

Système DMS du groupe Continental, source site officiel de Continental

En tant que capteur d'interaction homme-machine innovant, l'expansion de ces fonctions DMS vise principalement à obtenir des informations sur le conducteur , améliorant ainsi encore les nouvelles applications dans les futurs cockpits de voitures et réalisant des expériences personnalisées :

1. Reconnaissance de l'identité faciale

Lorsque l'utilisateur s'approche du capteur, aucune coordination des mouvements n'est requise pour compléter rapidement l'identification et l'identité en direct. vérification Reconnaissez, ouvrez de manière proactive la porte de la voiture pour l'utilisateur, ajustez la position du siège et connectez-vous rapidement au système de la voiture pour garantir le fonctionnement efficace du système de cockpit.

L'introduction de la reconnaissance faciale améliore non seulement l'expérience de confort de conduite, mais améliore également la sécurité du véhicule, comme les fonctions antivol.

2. Suivi oculaire

Utilise la technologie de suivi du champ de vision et de la posture de la tête de la caméra pour identifier la zone où le conducteur regarde (le pare-brise principal du conducteur, le pare-brise du passager, le rétroviseur gauche...). Cette fonction peut être liée au système d'affichage tête haute HUD populaire actuel, qui peut s'ajuster en temps réel et fournir au conducteur un affichage plus approprié.

Panasonic ar hud

3. la reconnaissance des gestes

La reconnaissance de la torsion, basée sur la technologie de reconnaissance des gestes visuels, est connecté au système automobile, offrant une nouvelle façon de intégration, via La caméra de voiture complète toutes les fonctions. Par exemple, après avoir effectué le geste correspondant, l'hôte effectuera des opérations telles que changer de chanson ou couper le son. La définition spécifique est définie par chaque OEM.

Le schéma d'interaction gestuelle est un nouveau schéma d'interaction en dehors du schéma de commande tactile traditionnel et est utilisé sur BMW depuis de nombreuses années. Cette caméra peut également avoir une certaine liaison avec le système DMS.

4. Reconnaissance d'expression, détection d'émotion

Grâce à des algorithmes d'IA innovants, les émotions actuelles du conducteur peuvent être identifiées et liées aux systèmes d'éclairage ambiant et de parfum. Cette application Toyota a été présentée au CES 2019. Le concept AceS de Toyota Boshoku

5, divertissement et interaction solution de production Il ouvre la espace interactif entre les rangées avant et arrière et utilise une variété de méthodes d'interaction naturelles du langage corporel telles que la vue, les gestes et les mouvements de la tête pour obtenir une interaction pratique entre plusieurs personnes et plusieurs endroits.

Source MINIEYE

6. sécurité automobile Sécurité.

Grâce à la caméra située sur le toit de la voiture et combinée aux données de détection du radar à ondes millimétriques, le système peut analyser de manière exhaustive les attributs du visage, les proportions des os humains et les informations sur la longueur, et peut déterminer avec précision les adultes. et les enfants. Lorsqu'un enfant est reconnu, le système déclenche activement la fonction de garde d'enfants, surveille en permanence le statut et le comportement de l'enfant et fournit des informations en temps réel aux parents au premier rang pour leur rappeler de prendre les mesures nécessaires.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!