DES STIC ET DES HOMMES ORIGAMI 2 Observation du Regard et Interprétation du Geste pour une Analyse Marketing non Intrusive. CONTINT 2010 OBJECTIFS DU PROJET Dans le cadre des recherches en marketing comportemental, le projet ORIGAMI2 vise à élaborer des outils temps réel de modélisation et d’analyse des processus décisionnels d’achat dans une grande surface sans interaction avec le consommateur. L’approche proposée repose sur la capture et le suivi de la pose du visage et du geste par des procédés de vision par ordinateur, et l’analyse statistique des informations spatiotemporelles extraites en vue de leur structuration, catégorisation, indexation et interprétation. 2D/3D couvrant sa tête, ses épaules et ses bras. Son état est estimé et suivi par un filtre particulaire, adapté aux aspects non gaussiens et multimodaux de la problématique. Les trajectoires d'intérêt visuel et des membres des individus sont ensuite analysées par des algorithmes de classification afin d'identifier des éléments de comportement types. Les algorithmes actuels évalués sur des données académiques (base BUFT et données internes) présentent des premiers résultats conformes à nos attentes : l’estimation de pose de visage est effectuée avec une erreur moyenne inférieure à 5°, et le suivi des gestes avec une précision de suivi de l'ordre de quelques centimètres. Des améliorations en performance et en robustesse de suivi restent cependant à implémenter. CONCLUSION ET PERSPECTIVES MÉTHODOLOGIE ET RÉSULTATS L'estimation de la pose du visage est obtenue par le traitement de flux RGB fournis par des caméras intégrées aux linéaires. Une fois la pose initiale estimée au moyen d'amers du visage, les déplacements sont suivis par minimisation d'une fonction de coût par rapport à des données de référence générées au moyen du modèle Candide. L'estimation du geste exploite les flux RGB et les informations de profondeur retournées par des caméras 3D positionnées au-dessus des linéaires. La posture de l'utilisateur est représentée par un modèle hybride Un magasin d'expérimentation a été instrumenté en région parisienne. Des acquisitions de données scénarisées sur figurants ont été planifiées, pour une évaluation du dispositif complet en conditions réalistes. L’intégration et l’exécution « en temps réel » des traitements sur des calculateurs dédiés devraient permettre l’extraction de données comportementales réelles en parfait respect de l’anonymat des consommateurs. L’analyse de ces données à grande échelle permettra ainsi d’extraire des indicateurs marketing offrant une meilleure compréhension du comportement des individus et de leurs actes d’achat. CLIRIS BONGRAIN SA, TELECOM PARISTECH, IBISC, LUTIN, LSIS [email protected]