Palaiseau, France
Internship Explorer
Internship Explorer
Thales Research&Technology, notre centre de recherche dans les domaines matériels, et CortAIx Labs, notre centre de recherche en IA et digital ont pour mission de proposer des innovations de ruptures, de maintenir et d’accroitre l’avance technologique et d’en assurer la compétitivité pour le groupe.En rejoignant le centre de recherche en Intelligence Artificielle, le Laboratoire Vision, Autonomy and Robotics du département cortAIx Labs, vous contribuerez au développement d’une solution combinant des approches d’intelligence artificielle et de vision par ordinateur pour la compréhension et représentation de scène à partir de données hétérogènes. Les systèmes complexes actuels intégrant de l’IA exploitent des données hétérogènes provenant de sources multiples, pour la vidéo-surveillance ou la robotique collaborative. Pour des systèmes en interaction avec des opérateurs humains, le challenge sera de parvenir à traiter ces descriptions multi-modales d’une même scène, possiblement partielles et dégradées, par des algorithmes d’IA et à les fusionner, afin de fournir aux opérateurs une représentation globale de la situation qui soit cohérente et pertinente. Vous aurez à concevoir cette fusion à partir de différentes sources de données hétérogènes et potentiellement partielles ou dégradées. De plus vous devrez explorer les approches VLM pour une meilleure représentation de la scène, à partir de descriptions visuelles et textuelles dans un premier temps. Cette visualisation doit aussi prendre en compte des données spatio-temporelles via la localisation et les timestamps associés aux données, afin de garantir la cohérence de la reconstruction. Cette reconstruction peut ensuite faire l’objet de requêtes et de recherche d’informations multi-modales pour des applications telles que de l’analyse post-événement. Dans ce contexte vos missions seront les suivantes : Vous réaliserez l’état de l’art sur les applications possibles des VLMs pour la fusion de données hétérogènes. Vous aurez en charge le développement et l’évaluation des solutions identifiées dans l’état de l’art et leur intégration au sein d’une approche répondant au programme transverse. Vous proposerez une validation des approches retenues par la réalisation d’un démonstrateur technique.
