Vision Engineer - Synthetic 3D Data (Mensch)
Neura Robotics GmbH
Metzingen, Germany
6 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
German, English Experience level
IntermediateJob location
Metzingen, Germany
Tech stack
Artificial Intelligence
C++
Nvidia CUDA
Digital Rendering
Continuous Integration
Python
TensorFlow
PyTorch
Deep Learning
Gaussian
Information Technology
Data Generation
Job description
Du wirst Teil unseres AI/Perception-Teams und gestaltest die synthetischen Welten mit, in denen unsere Roboter lernen, bevor sie in die reale Welt kommen. Du bist verantwortlich für den Aufbau skalierbarer Simulations- und Datengenerierungs-Pipelines sowie für die Entwicklung von World Action Models, die humanoiden und kollaborativen Robotern ermöglichen, komplexe Szenen zu verstehen, vorherzusagen und in ihnen zu handeln.
- Scene Simulation: Konzeption und Erstellung generierter 3D-Szenen aus Real-World-Aufnahmen zum Training und zur Validierung von Perception- und Policy-Modellen - von der Asset-Komposition und physikalisch korrekten Materialien bis zur dynamischen Population mit Menschen und Objekten.
- Domain Randomization: Entwicklung systematischer Randomisierungsstrategien (Beleuchtung, Texturen, Physik, Sensorrauschen, Kamerapositionen), um die Sim-to-Real-Lücke zu schließen und eine robuste Generalisierung auf reale Robotereinsätze sicherzustellen.
- 3D Inpainting & Scene Editing: Entwicklung von Methoden zum konsistenten Hinzufügen, Entfernen und Verändern von Objekten in 3D-Szenen und Point Clouds - für Data Augmentation, Occlusion Handling und Scene Manipulation zur Laufzeit.
- Simulation & Validierung: Einsatz moderner Simulationsumgebungen (z. B. Isaac Sim, Gazebo, Unreal/Unity) und Validierung an realen humanoiden und kollaborativen Robotern - stets mit Fokus auf Sicherheit und Robustheit.
- World Action Models: Design und Fine-Tuning generativer World Models, die Szenendynamik, Objektinteraktionen und die Konsequenzen von Roboteraktionen vorhersagen - als Grundlage für modellbasiertes Planning und Policy Learning.
- Interdisziplinäre Zusammenarbeit: Enge Zusammenarbeit mit den Teams AI, Perception, Control und Manipulation: Anforderungen definieren, Sensormodelle integrieren, Diagnosetools entwickeln, Dokumentation erstellen und CI/CD-Prozesse unterstützen.
Requirements
- Exzellenter Master- oder PhD-Abschluss in Computer Science, Physik, Robotik, Computer Graphics oder einem verwandten Feld
- 3+ Jahre relevante Erfahrung in mindestens einem der Kernbereiche: Scene Simulation/Compositing, Synthetic Data Generation, 3D Vision oder 3D Augmentation
- Starke Programmierkenntnisse in Python oder modernem C++; Erfahrung mit CUDA von Vorteil
- Praktische Erfahrung mit Deep-Learning-Frameworks (PyTorch, TensorFlow) und generativen Modellen (Diffusion Models, NeRFs, Gaussian Splatting, transformerbasierte World Models)
- Fundierte Kenntnisse in Computer Graphics, 3D-Geometrie und Simulation: Rendering-Pipelines, physikalische Simulation, Procedural Generation sowie Erfahrung mit Simulationsumgebungen wie Isaac Sim, Gazebo, Unreal oder Unity
- Erfahrung mit Synthetic Data Generation von Vorteil
- Erfahrung mit Sim-to-Real Transfer und Deployment auf Robotics-Hardware (z. B. NVIDIA Jetson) von Vorteil
- Ausgezeichnete Problemlösungsfähigkeiten sowie die Fähigkeit, sowohl selbstständig als auch im Team zu arbeiten
- Sehr gute Englischkenntnisse in Wort und Schrift