World Models for XR and Robotics
About InterDigital
InterDigital is a global research and development company focused primarily on wireless, video, artificial intelligence (“AI”), and related technologies. We design and develop foundational technologies that enable connected, immersive experiences in a broad range of communications and entertainment products and services. We license our innovations worldwide to companies providing such products and services, including makers of wireless communications devices, consumer electronics, IoT devices, cars and other motor vehicles, and providers of cloud-based services such as video streaming. As a leader in wireless technology, our engineers have designed and developed a wide range of innovations that are used in wireless products and networks, from the earliest digital cellular systems to 5G and today’s most advanced Wi-Fi technologies. We are also a leader in video processing and video encoding/decoding technology, with a significant AI research effort that intersects with both wireless and video technologies. Founded in 1972, InterDigital is listed on Nasdaq.
InterDigital is a registered trademark of InterDigital, Inc.
For more information, visit: www.interdigital.com.
Summary
World models learn an internal representation of an environment and predict how it changes in response to user or agent actions. This six-month internship will investigate their potential for XR (Extended Reality) and robotic interaction, combining a state-of-the-art review with one focused proof of concept (PoC).
The review will cover interactive visual world models, such as Tencent HY-World 1.5 / WorldPlay and Skywork Matrix-Game 3.0, alongside action-conditioned world models for robotics, such as NVIDIA Cosmos. These are starting points for the study, not a fixed shortlist. Visual plausibility and temporal consistency will be distinguished from accurate prediction of physical motion, contact and action outcomes.
For XR glasses or headsets, key questions include advantages of World models integration regarding responsiveness to user movement, spatial consistency compared to existing solutions. For robotics, the study will examine how world models predict the effects of actions and support their evaluation. An Universal Robots, either physical (e.g. UR3e arm) or simulated in Gazebo, will provide a possible experimental platform. An XR interface could display the observed workspace and predicted robot or object motion.
The internship has two phases. The first phase will select a suitable world model and define its integration into the existing Unity and Meta Quest demo (that also includes a virtual robot), while assessing a possible XR and robotics extension.
Phase 1 — State of the art and feasibility assessment. Review world models for both XR and robotics, including their representations, action inputs, prediction horizons, data requirements and evaluation methods. Compare the candidate models on inference latency, GPU and memory needs, availability of code and pretrained weights. Test shortlisted approaches on available hardware and assess integration with the existing Unity demo and Meta Quest headset. Conclude with a model comparison, an integration plan and a feasibility assessment for a possible XR and robotics PoC.
Phase 2 — Development and evaluation. First, integrate the selected world model into the existing Unity demo running with a Meta Quest headset. Adapt existing model code, connect XR tracking and interaction inputs, and display model outputs in Unity. Evaluate responsiveness, spatial and temporal consistency against the existing demo as a baseline. If time, feasibility and equipment availability permit, extend this integration into a PoC assessing the value of world models for a combined XR and robotics experiment, using a physical UR3e or a UR3e simulated in Gazebo (or other environment). For example, display predicted robot or object motion in XR and compare predictions with observed outcomes in a simple manipulation task.
You will work in collaboration with experts from InterDigital located in Rennes, France.
You will have access to AI Tools to assist you in your work.
Responsibilities
Qualifications
Keywords
World Models, Generative AI, XR, Unity, Meta Quest, Robotics, UR3e, Gazebo, Action Prediction, Interactive Systems, Modeling and Simulation, PyTorch
Expected Outcomes
Location: Rennes, France
Mentors : [Thierry FILOCHE, Bertrand LEROY, Stéphane ONNO]
InterDigital is an equal employment opportunity employer. InterDigital will not engage in or tolerate unlawful discrimination with regard to any employment decision, policy or practice based on a person’s sex, gender, pregnancy (including childbirth, breastfeeding and related medical conditions), age, race, color, religion, creed, national origin, ancestry, citizenship, military status, veteran status, mental or physical disability, medical condition, genetic information, sexual orientation, gender identity or expression, or any other factor protected by applicable federal, state or local law. This policy applies to all terms and conditions of employment, including, but not limited to, recruiting, hiring, compensation, benefits, training, assignments, evaluations, coaching, promotion, discipline, discharge and layoff.
World models pour la XR et la robotique
À propos d'InterDigital
InterDigital est une société internationale de recherche et développement spécialisée principalement dans les technologies sans fil, la vidéo, l'intelligence artificielle (« IA ») et les technologies associées. Nous concevons et développons des technologies fondamentales qui rendent possibles des expériences connectées et immersives dans un large éventail de produits et services de communication et de divertissement. Nous concédons des licences sur nos innovations dans le monde entier à des entreprises qui proposent ces produits et services, notamment des fabricants d'appareils de communication sans fil, d'électronique grand public, d'objets connectés (IoT), d'automobiles et d'autres véhicules à moteur, ainsi qu'à des fournisseurs de services cloud tels que la diffusion vidéo en streaming. Leader des technologies sans fil, InterDigital a vu ses ingénieurs concevoir et développer un large éventail d'innovations utilisées dans les produits et réseaux sans fil, des premiers systèmes cellulaires numériques jusqu'à la 5G et aux technologies Wi-Fi les plus avancées d'aujourd'hui. Nous sommes également un leader du traitement vidéo et des technologies de codage et de décodage vidéo, avec un important effort de recherche en IA à la croisée des technologies sans fil et vidéo. Fondée en 1972, InterDigital est cotée au Nasdaq.
InterDigital est une marque déposée d'InterDigital, Inc.
Pour en savoir plus, rendez-vous sur www.interdigital.com.
Résumé
Les world models sont des modèles d'IA qui apprennent une représentation interne d'un environnement et prédisent son évolution en réponse aux actions d'un utilisateur ou d'un agent. Ce stage de six mois étudiera leur potentiel pour la réalité étendue (XR) et l'interaction robotique, en associant un état de l'art à une preuve de concept (PoC) ciblée.
L'état de l'art portera sur les world models visuels interactifs, tels que Tencent HY-World 1.5 / WorldPlay et Skywork Matrix-Game 3.0, ainsi que sur les world models conditionnés par l'action destinés à la robotique, tels que NVIDIA Cosmos. Ces modèles constituent des points de départ pour l'étude, et non une liste arrêtée. La plausibilité visuelle et la cohérence temporelle seront distinguées de la prédiction exacte du mouvement physique, des contacts et des effets des actions.
Pour les lunettes ou casques XR, les questions clés portent notamment sur les avantages de l'intégration de world models en matière de réactivité aux mouvements de l'utilisateur et de cohérence spatiale, par rapport aux solutions existantes. Pour la robotique, l'étude examinera la manière dont les world models prédisent les effets des actions et contribuent à leur évaluation. Un robot Universal Robots, physique (par exemple un bras UR3e) ou simulé dans Gazebo, pourra servir de plateforme expérimentale. Une interface XR pourrait afficher l'espace de travail observé ainsi que le mouvement prédit du robot ou des objets.
Le stage se déroule en deux phases. La première phase consistera à sélectionner un world model adapté et à définir son intégration dans le démonstrateur Unity et Meta Quest existant (qui comprend également un robot virtuel), tout en évaluant une éventuelle extension XR et robotique.
Phase 1 : état de l'art et étude de faisabilité. Analyser les world models destinés à la XR comme à la robotique, notamment leurs représentations, leurs entrées d'action, leurs horizons de prédiction, leurs besoins en données et leurs méthodes d'évaluation. Comparer les modèles candidats en termes de latence d'inférence, de besoins en GPU et en mémoire, et de disponibilité du code et des poids pré-entraînés. Tester les approches présélectionnées sur le matériel disponible et évaluer leur intégration avec le démonstrateur Unity et le casque Meta Quest existants. Conclure par une comparaison des modèles, un plan d'intégration et une étude de faisabilité pour une éventuelle PoC XR et robotique.
Phase 2 : développement et évaluation. Intégrer d'abord le world model retenu dans le démonstrateur Unity existant, qui fonctionne avec un casque Meta Quest. Adapter le code existant du modèle, connecter les entrées de suivi et d'interaction XR, et afficher les sorties du modèle dans Unity. Évaluer la réactivité ainsi que la cohérence spatiale et temporelle, en prenant le démonstrateur existant comme référence. Si le temps, la faisabilité et la disponibilité des équipements le permettent, étendre cette intégration à une PoC évaluant l'intérêt des world models pour une expérience combinant XR et robotique, à l'aide d'un UR3e physique ou simulé dans Gazebo (ou dans un autre environnement). Par exemple, afficher en XR le mouvement prédit du robot ou des objets et comparer les prédictions aux résultats observés lors d'une tâche de manipulation simple.
Vous travaillerez en collaboration avec des experts d'InterDigital basés à Rennes, en France.
Vous aurez accès à des outils d'IA pour vous assister dans votre travail.
Missions
Profil recherché
Mots-clés
World Models, IA générative, XR, Unity, Meta Quest, robotique, UR3e, Gazebo, prédiction d'actions, systèmes interactifs, modélisation et simulation, PyTorch
Résultats attendus
Lieu : Rennes, France
Encadrement : [Thierry FILOCHE, Bertrand LEROY, Stéphane ONNO]
InterDigital est un employeur qui garantit l'égalité des chances en matière d'emploi. InterDigital ne pratique ni ne tolère aucune discrimination illicite dans ses décisions, politiques ou pratiques en matière d'emploi fondée sur le sexe, le genre, la grossesse (y compris l'accouchement, l'allaitement et les problèmes de santé qui y sont liés), l'âge, l'origine raciale, la couleur de peau, la religion, les convictions, l'origine nationale, l'ascendance, la nationalité, la situation militaire, le statut d'ancien combattant, le handicap mental ou physique, l'état de santé, les informations génétiques, l'orientation sexuelle, l'identité ou l'expression de genre, ou tout autre critère protégé par la législation fédérale, étatique ou locale applicable. Cette politique s'applique à l'ensemble des conditions d'emploi, notamment, sans que cette liste soit limitative, le recrutement, l'embauche, la rémunération, les avantages sociaux, la formation, les affectations, les évaluations, l'accompagnement, la promotion, les sanctions disciplinaires, le licenciement et les suppressions de postes.
Copyright © 2026 Grabjobs Pte.Ltd. All Rights Reserved.