Projet: Reconnaissance audio-visuelle pour robot mobile en milieu manufacturier
La sécurité est un enjeu crucial en robotique collaborative. Un robot doit percevoir son environnement avec précision afin de maximiser sa productivité sans nuire à la sécurité des travailleurs qui l’entourent. La reconnaissance visuelle est une modalité populaire, mais se limite souvent à un champ restreint et implique une charge de calculs importante. Le projet proposé consiste à combiner la vision à la reconnaissance sonore pour un robot collaboratif. Cette reconnaissance audio-visuelle sera possible en utilisant une matrice de microphones combinée à une caméra afin de tirer avantage de l’information spatiale de ces deux modalités. En plus de permettre une attention omnidirectionnelle qui va au-delà du champ visuel restreint de la caméra, cette approche permettra une reconnaissance plus robuste et une réduction de la charge de calculs. En effet, il sera possible de localiser la direction d’arrivée d’un événement sonore et d’orienter la caméra afin d’analyser uniquement la zone visuelle d’intérêt en lien avec l’événement. Grâce à cette nouvelle technologie, les robots collaboratifs seront en mesure de mieux monitorer la présence d’opérateurs et pourront interagir de manière sécuritaire.
Superviseur(s):
Partenaire(s)
