Stage IA - Data Scientist - Vision Language Models - Bac + 5 F/H

Les solutions développées et brevetées jusqu'à aujourd'hui par nos équipes se basent sur des combinaisons de modèles supervisés de vision par ordinateur, de traitement du langage, et de traitement d'images. Elles permettent d'extraire les caractéristiques des composants ou des représentations structurées des diagrammes. Ces solutions ont nécessité d'importantes quantités de données annotées et sont adaptés à chaque famille de documents. Par conséquent, leur généralisation, leur résilience aux cas particuliers, ainsi que leur adaptation à de nouvelles normes sont très difficiles et demandent un investissement important. Les schémas peuvent être bruités, vectoriels ou scannés ; les symboles techniques peuvent être très similaires entre les classes, et d'une grande diversité intra-classe selon les normes, les logiciels de conception ou les métiers ; les flux et légendes doivent être correctement interprétés.

L'équipe travaille désormais au remplacement des modèles au cœur de la solution par des modèles de vision-langage (VLM). Ces modèles unifiés ouvrent des perspectives inédites non seulement pour franchir les barrières des solutions actuelles mais également pour répondre à de nouveaux besoins. Les modèles comme GPT-4V, OWL-ViT, Kosmos-2, ou LLaVA ont montré des capacités impressionnantes sur des tâches multimodales. Des travaux récents sur des documents scientifiques, des plans d'architecture ou des interfaces utilisateur montrent que les VLM peuvent Interpréter des schémas complexes, répondre à des questions sur des documents visuels, ou encore générer des descriptions ou des représentations structurées (Mathew et al. 2021, Clark et al. 2021, Borchmann et al. 2024, Riedler et al. 2024). Or les VLMs ont été peu exposés aux schémas d'ingénierie industriels. Les premiers tests réalisés par l'équipe avec GPT4-V et Claude 3 sur des diagrammes électriques montrent que ces modèles échouent à localiser les symboles sans fine-tuning. Avec, ils atteignent les mêmes performances que les solutions actuelles sur cette tâche de vision. Or, le domaine évolue très rapidement avec des modèles toujours plus performants régulièrement publiés.

Le stage vise à explorer les capacités des VLMs les plus avancés en les confrontant aux défis spécifiques des schémas d'ingénierie. L'objectif est de proposer une approche unifiée d'extraction d'informations dans un domaine technique riche et structuré, où les documents visuels jouent un rôle central. Les tâches multimodale s telles que la description automatique et les questions-réponses visuelles seront investiguées. La construction d'une base de données d'embeddings à des fins de RAG sera également considéré. Une piste complémentaire consistera à construire une base de données d'embeddings pour des applications de RAG (Retrieval-Augmented Generation), permettant de combiner la recherche documentaire avec les capacités génératives des modèles. Enfin, le fine-tuning d'un modèle VLM vers une spécialisation "Electrical-VLM", adaptée aux documents techniques du secteur de l'énergie et de l'automatisation, pourra être envisagé en fin de stage, selon les résultats obtenus et les ressources disponibles.

Missions :

• Compléter l'état de l'art de l'équipe sur les modèles et techniques d'extraction d'informations sur des schémas industriels.
• Comparer les techniques les plus prometteuses de l'état de l'art sur des jeux de données sélectionnés.
• Trouver un réglage optimal et/ou proposer une amélioration des algorithmes.
• Présenter les résultats aux équipes au sein du AI Hub et aux Lines of Business propriétaires des données.
• Contribuer en fonction des résultats, à la rédaction d'un article scientifique pour une conférence internationale

Votre profil :

• Vous terminez un diplôme bac + 5 de type Master ou Ingénieur avec une spécialisation en IA / Machine Learning et recherchez un stage de fin d'études / PFE
• Maîtrise du développement Python et Pytorch
• Excellentes aptitides en matjématiques vous permettant de comprendre rapidement des approches publiées par d'autres chercheurs internationaux
• Curiosité, créativité, rigueur
• Anglais et français courant

Durée du stage : 6 mois

Localisation : Grenoble Intencity (38)

Date de démarrage souhaitée : au plus tard en février 2026

Ce stage pourra éventuellement être prolongé par une thèse, selon les résultats obtenus et les problématiques soulevées dans le cadre du projet.

Vous beneficierez de :

• Une gratification mensuelle
• Une prime de fin de stage à la discrétion du manager en fonction de votre évaluation tout au long de votre parcours
• Une participation aux frais de transport en commun à hauteur de 75%
• Jusqu'à 2 jours / semaine de télétravail pour les postes éligibles
• Une journée d'accueil
• un accès au restaurant d'entreprise
• des activités culturelles et sportives grâce au CSE

Nous savons que les compétences peuvent s'exprimer de multiples façons, y compris à travers vos expériences de vie. Même si vous ne remplissez pas tous les critères, nous vous encourageons vivement à postuler.

Vous cherchez à créer de l'IMPACT dans votre carrière?

Lorsque vous envisagez de rejoindre une nouvelle équipe, la culture d'entreprise est essentielle. Chez Schneider Electric, nos valeurs et nos comportements sont le fondement de la création d'une culture d'entreprise qui contribue à la réussite de l'entreprise. Nous pensons que nos valeurs IMPACT - Inclusion, Maîtrise, Raison d'Etre, Action, Curiosité, Travail d'équipe - commencent avec nous.

IMPACT est également une invitation à rejoindre une entreprise où vous pourrez contribuer à transformer l'ambition du développement durable en action, quelle que soit votre fonction dans l'entreprise. C'est un appel à associer votre carrière à l'ambition d'un monde plus résilient, plus efficace et plus durable.

Nous recherchons des IMPACT Makers, des personnes exceptionnelles qui transforment les ambitions de développement durable en actions à l'intersection de l'automatisation, de l'électrification et de la digitalisation. Nous célébrons les IMPACT Makers et pensons que chacun a le potentiel d'en être un.
Devenez un IMPACT Maker chez Schneider Electric - postulez dès aujourd'hui !

36 milliards d'euros de chiffre d'affaires global
+13% de croissance organique
150 000+ employés dans plus de 100 pays
#N° 1 du classement Global 100 des entreprises les plus durables au monde

Vous devez soumettre une demande en ligne pour que votre profil soit pris en considération pour un poste chez nous. Ce poste sera visible jusqu'à ce qu'il soit pourvu.

Schneider Electric aspire à être l'entreprise la plus inclusive et la plus solidaire au monde, en offrant des opportunités équitables à chacun, partout, et en veillant à ce que tous les employés se sentent valorisés et en sécurité pour donner le meilleur d'eux-mêmes. Nous pensons que nos différences nous rendent plus forts en tant qu'entreprise et en tant qu'individus. Nous nous engageons à promouvoir l'inclusion dans tout ce que nous faisons.

Chez Schneider Electric, nous respectons les normes les plus strictes en matière d'éthique et de conformité, et nous pensons que la confiance est une valeur fondamentale. Notre Charte de Confiance est notre Code de Conduite. Elle démontre notre engagement en matière d'éthique, de sécurité, de développement durable, de qualité et de cybersécurité. Elle sous-tend chaque aspect de notre activité ainsi que notre volonté de nous comporter de manière respectueuse et de bonne foi face à toutes nos parties prenantes. Découvrez notre charte de confiance ici

Schneider Electric est un employeur qui souscrit au principe de l'égalité des chances. Notre politique est de fournir des opportunités d'emploi et d'avancement égales dans les domaines du recrutement, de l'embauche, de la formation, de la mutation et de la promotion de toutes les personnes qualifiées, indépendamment de l'origine, de la religion, de la couleur, du sexe, du handicap, de l'ascendance, de l'âge, du statut militaire, de l'orientation sexuelle, de la situation matrimoniale ou de toute autre caractéristique ou comportement protégé par la loi.

Client-provided location(s): Grenoble, France, Puteaux, France

Job ID: Schneider_Electric-https://careers.se.com/jobs/99128?lang=fr-fr

Employment Type: OTHER

Posted: 2025-10-08T18:44:14