Member of Technical Staff, Diffusion World Models & Robotics

CHI SIAMO Odyssey https://odyssey.ml è un laboratorio di IA all'avanguardia nei modelli di mondo generali: sistemi causali e multimodali che imparano a prevedere e interagire con il mondo su lunghi orizzonti. Questa tecnologia fondamentale promette di rivoluzionare la robotica, la scienza, l'assistenza sanitaria, l'istruzione, il gaming, la difesa e molto altro. I fondatori di Odyssey hanno precedentemente guidato l'applicazione più complessa dell'IA fisica: le auto a guida autonoma. Hanno ora riunito un team di ricerca di livello mondiale proveniente da DeepMind, Tesla, Waymo, Meta, Apple e Wayve, che hanno dato contributi significativi ai modelli linguistici (DeepMind Gemini), ai modelli video (DeepMind Veo), ai modelli di mondo (Wayve GAIA) e ai sistemi autonomi (Tesla FSD). Odyssey ha raccolto importanti capitali di rischio da GV, Amazon, AMD, EQT, NVIDIA, Natural Capital, In-Q-Tel, Elad Gil, Jeff Dean, Guillermo Rauch, Garry Tan, Kyle Vogt e ricercatori di OpenAI, DeepMind, MSL, Recursive e Thinking Machines. COSA CERCHIAMO Cerchiamo persone con un profondo interesse nel migliorare gli algoritmi di machine learning all'intersezione tra modelli di mondo diffusion e robotica. I modelli di mondo interattivi e condizionati all'azione sono un'area di ricerca all'avanguardia che non è ancora matura. Lavorerai sulla soglia di ciò che è possibile, utilizzando i modelli di mondo come simulatori, estrattori di caratteristiche e campi di addestramento per politiche robotiche reali e approcci di RL basati su modelli. La maggior parte dei nuovi esperimenti qui fallirà; il tuo obiettivo sarà imparare al massimo dagli esperimenti falliti per aumentare le possibilità di eventuale successo su hardware reale. COSA FARAI - Comprendere cosa rende efficaci i modelli di mondo interattivi. Come interagiscono i dati, le architetture diffusion, il condizionamento all'azione e le policy a valle. - Implementare algoritmi all'avanguardia di diffusion e robot-learning, e progettare loss, funzioni di ricompensa e fine-tuning basati su rinforzo / preferenze per l'interattività e le prestazioni della policy. - Gestire un'elevata cadenza di ablazioni su WM e policy, dall'architettura e feature taps ai mix di dati e schemi di condizionamento. - Costruire il ponte verso i robot reali: pipeline di dati, fine-tuning di WM e deployment di policy su Robots-aaS e sistemi dei partner di progettazione (da remoto e in presenza). - Sfruttare le ultime funzionalità delle moderne GPU per aumentare l'efficienza dell'addestramento e dell'inferenza. - Assumere la responsabilità dell'intero stack ML, inclusi i framework core su cui si affidano i ricercatori e gli ingegneri di prodotto di Odyssey. CHI SEI - Un PhD (o equivalente esperienza di ricerca) più 2+ anni di esperienza pertinente nella ricerca o nell'ingegneria, o 4+ anni di esperienza nell'ingegneria del software con 2+ anni di lavoro pertinente nel ML. - Significativa esperienza pratica con uno o più di: modelli diffusion, modelli di mondo, RL basata su modelli (ad esempio, linea Dreamer), o policy vision-language-action (VLA). - Comprovata capacità di gestire progetti end to end. - Non timoroso di toccare qualsiasi fase di una pipeline ML, dai dati al deployment su robot reali; l'esperienza sim-to-real è un forte plus. - Competenza con PyTorch (o TF/JAX). - Fortemente orientato agli esperimenti. - Flessibile nel lavorare in presenza a Zurich, London, o nella Bay Area. Al momento, la maggior parte del team lavora in presenza a Zurich.