Senior Reinforcement Learning Engineer — ANYbotics

Description complète

Anybotics est une société technologique en croissance rapide qui se consacre à façonner l'avenir de la robotique mobile dans plusieurs industries. Rejoignez notre équipe hautement talentueuse et motivée de plus de 200 personnes et travaillez sur la technologie robot de pointe.

L'opportunité

Nous sommes à la recherche d'un ingénieur principal d'apprentissage du renforcement pour rejoindre notre équipe de renseignement de mouvement. Vous devez apporter une expertise profonde dans le renforcement de l'apprentissage et l'optimisation des politiques, basé sur l'expérience robotique du monde réel, et être excité à repousser les frontières des robots autonomes. Nous recherchons quelqu'un qui peut fournir des conseils en matière de RL et de contrôle basé sur l'apprentissage à l'échelle de l'équipe - façonner la façon dont nous formons, déployons et maintenons les politiques apprises sur les robots physiques opérant dans des environnements industriels exigeants. Au-delà de l'expertise RL, nous valorisons les ingénieurs qui sont fiers d'écrire un code propre et durable, de simplifier des systèmes complexes grâce à un design réfléchi et de défendre les interfaces sonores et l'architecture.

Chez Anybotics, nous développons des solutions logicielles sur mesure qui permettent à nos robots à pattes de réaliser des tâches d'inspection et de maintenance avec précision et cohérence. Ce rôle se situe à l'intersection de la recherche de pointe en RL et de la robotique de production, du transfert de politiques à la réalité et à l'ingénierie de récompense jusqu'au déploiement fiable sur le terrain de systèmes critiques pour les missions. Vous travaillerez tout au long du cycle de vie, du prototypage précoce au déploiement de la production critique de la mission.

Le marché et notre technologie

Anybotics transforme des installations industrielles dans le secteur de l'énergie, des procédés et des services publics en introduisant la robotique dans un large éventail d'applications nouvelles qui étaient jusqu'à présent hors de portée. Nos clients sont de grands opérateurs d'actifs et fournisseurs de services industriels pionniers dans l'utilisation de la technologie robotique pour l'inspection et l'entretien. Notre robot mobile Anymal utilise des jambes pour une mobilité extrême dans des environnements complexes, la détection à base de caméra et LIDAR pour une autonomie totale et l'évitement des obstacles, et l'IA pour des résultats d'inspection de haute qualité et cohérents. Nous développons de nombreux systèmes matériels personnalisés, dont l'ensemble de la plateforme robotique, des actionneurs, des capteurs, des charges utiles d'inspection, des systèmes de recharge et tout le matériel électrique Anybotics.

Votre impact

• Diriger la conception, la formation et le déploiement de politiques d'apprentissage du renforcement pour le mouvement des robots – combler l'écart entre la simulation et les performances réelles fiables
• Fournir des conseils techniques de haut niveau sur la RL et le contrôle fondé sur l'apprentissage dans l'ensemble de l'équipe, encadrer les ingénieurs et établir les meilleures pratiques pour l'élaboration des politiques.
• Propre et développer l'infrastructure de formation RL et le pipeline sim-to-real, assurant la reproductibilité, l'évolutivité et des cycles d'itération rapides
• Façonner la vision technique de l'outillage interne ML et de la gestion des expériences (p. ex., tableaux de bord de formation, pipelines d'évaluation automatisés), l'efficacité et la rigueur des processus d'apprentissage de l'équipe
• Collaborer étroitement avec les parties prenantes interfonctionnelles pour déterminer comment élargir l'enveloppe opérationnelle autonome du robot
• Trier les problèmes de terrain liés à la locomotion, reconnaître les modèles d'échec et améliorer rapidement la robustesse des politiques sur la base de données réelles de déploiement
• Écrire, déployer et maintenir des logiciels Python et C++ efficaces pour la pile apprentissage et locomotion

Votre profil

• Doctorat en robotique, en apprentissage automatique, en informatique ou dans un domaine connexe, avec un accent particulier sur le renforcement de l'apprentissage.
• Maîtrise d'une université technique de haut niveau (par exemple ETH Zurich, EPFL) en robotique, apprentissage automatique, informatique ou domaine connexe et 5+ ans d'expérience professionnelle
• Expérience éprouvée de l'expédition des modèles ML sur le terrain et maintien de ces solutions au fil du temps
• Mise à la terre solide dans les fondamentaux de contrôle robot et les systèmes autonomes, y compris: contrôle du mouvement, estimation de l'état, planification du chemin et actionnement
• Expérience avec des outils de simulation robotiques comme Gazebo ou Isaac Sim
• Forte compréhension des techniques de transfert, de randomisation des domaines, de formation des récompenses et de robustesse des politiques
• Maîtrise du Python et des cadres modernes ML (PyTorch); connaissance pratique du C++
• Forte connaissance des systèmes Linux et des cadres d'intergiciels pour intégrer des composants appris dans une pile logicielle plus grande
• L'état d'esprit pragmatique et axé sur la solution — équilibre confortable recherche exploration avec livraison de production
• Excellentes compétences en communication en anglais

Points bonus

• Expérience de la formation et du déploiement des politiques RL sur les robots physiques — pas seulement dans la simulation
• Développement d'architectures robotisées modulables et évolutives des systèmes de contrôle du mouvement
• Expérience des systèmes de navigation et du fonctionnement autonome des robots mobiles dans des environnements non structurés
• Intérêt pour les chaînes d'outils d'ingénierie des agents
• Expérience de la conception d'architecture logicielle de pointe et des meilleures pratiques d'ingénierie logicielle
• Une bonne compréhension des systèmes physiques, en particulier la dynamique multicorps, la physique électromécanique des moteurs, l'optimisation de l'énergie et la physique de contact, pour s'assurer que les politiques apprises respectent les limites matérielles et le transfert réussi de la simulation au monde réel

Nous vous offrons un environnement de travail très excitant et dynamique, l'opportunité de faire partie d'une entreprise en pleine croissance et d'une équipe ambitieuse qui est en mission de changer le marché de l'inspection industrielle, une chance de tirer parti de votre expérience et d'apporter vos propres idées, un salaire équitable du marché, un plan attrayant d'actionnariat salarié, et un emploi dans la ville de Zurich.

Politique de l'Agence : Nous ne sommes pas actuellement en partenariat avec des entreprises de recherche externes ou des agences de recrutement. Tous les profils ou curriculum vitae soumis à des employés d'Anybotics sans accord écrit préalable seront considérés comme des divulgations publiques et les biens d'Anybotics, ce qui n'implique aucune responsabilité ni aucun droit pour l'embauche ultérieure.

Questions sur cette offre