Apertus Ingegnere: Evaluations — ETH Zürich
- Località
- Zurich
- Contratto
- fixed-term
- Pubblicato
- 12 giorni fa
Panoramica
Apertus Engineer: Valutazioni
100%, Zurigo, a tempo determinato stampa Druppo
Stiamo cercando un ingegnere esperto per aderire allo sforzo di valutazione Apertus.
- Apertus Engineer: Valutazioni
- 100%, Zurigo, a tempo determinato stampa Druppo
- Un elevato grado di flessibilità: priorità, strumenti e attività quotidiane si spostano con programmi di formazione, release e un campo di fast-moving
- Questo ruolo richiede forte ingegneria Python, esperienza di valutazione LLM hands-on e la capacità di lavorare in collaborazione in un ambiente focalizzato sulla ricerca. Sfondo del progetto
- Forniamo modelli di fondazione aperti con centinaia di miliardi di parametri su migliaia di GPU su uno dei più grandi supercomputer AI-ready in Europa. Essenziale
Responsabilità principali
- Un elevato grado di flessibilità: priorità, strumenti e attività quotidiane si spostano con programmi di formazione, release e un campo di fast-moving
Requisiti principali
- Questo ruolo richiede forte ingegneria Python, esperienza di valutazione LLM hands-on e la capacità di lavorare in collaborazione in un ambiente focalizzato sulla ricerca. Sfondo del progetto
- Forniamo modelli di fondazione aperti con centinaia di miliardi di parametri su migliaia di GPU su uno dei più grandi supercomputer AI-ready in Europa. Essenziale
- MSc o PhD in Informatica, Scienza dei dati, intelligenza artificiale, apprendimento automatico, o un campo relativo. Eccezionale
- I candidati BSc con una forte esperienza di ingegneria saranno anche considerati
- Forte Python e competenze di ingegneria del software, tra cui la costruzione di esperienze dati robusti o pipeline di valutazione
- Esperienza con la valutazione LLM: imbracature consolidate (ad esempio lm-evaluation-harness) o strumenti di benchmark personalizzati
- Forte capacità di collaborazione e comunicazione e capacità di lavorare in team di ricerca e ingegneria
- È richiesta un'esperienza preliminare nei domini centrali di questo ruolo.
- Questo può essere un'esperienza basata su progetti o studi; l'esperienza di lavoro formale è preferita
- Esperienza di valutazione in esecuzione su scala su cluster GPU (Slurm o simili) e con motori di inferenza come vLLM o SGLang
- Familiarità con valutazione agentica e imbracature agentiche: uso utensili, esecuzione sandbox
Azienda e contesto
- Il team conta più di una dozzina di ingegneri a tempo pieno che lavorano insieme ai principali ricercatori di EPFL e ETH Zürich, ha rilasciato i modelli Apertus 1 e Apertus 1.5, e lavora con oltre trenta collaboratori accademici per offrire modelli AI completamente aperti (open source), formati responsibilmente, multilingue, multimodali per la ricerca e l'industria.
- Apertus è addestrato e sviluppato sulle Alpi, l'infrastruttura di supercomputing del Centro Nazionale Svizzero (CSCS).
- Il ruolo richiede qualcuno che è comodo lavorare in un ambiente HPC e collaborare con ricercatori e ingegneri delle infrastrutture.
- Integrare nuovi benchmark come il campo si evolve, lavorando con i nostri collaboratori accademici a bordo dei benchmark che creano, e convalidare che metriche e implementazioni di imbracatura sono affidabili Valutazione comparativa e di terze parti
- Valutare i servizi di terze parti e altri modelli aperti e chiusi contro la stessa suite di riferimento, producendo risultati direttamente comparabili e riproducibili
- Fornire risultati di valutazione, report e dashboard che supportano le decisioni di formazione (composizioni di dati, ablazioni) e decisioni di rilascio
- Lavorare a stretto contatto con gli ingegneri focalizzati sulla sicurezza, la distribuzione e le esigenze della comunità, e integrare le valutazioni che creano nella pipeline condivisa
Dettagli ulteriori
- 100%, Zurigo, a tempo determinato
- Il candidato ideale costruirà e gestirà il codebase di valutazione e le condotte che informano le nostre decisioni di formazione e rilascio, mantenendo i risultati coerenti tra formazione e servizio.
- Questo ruolo richiede forte ingegneria Python, esperienza di valutazione LLM hands-on e la capacità di lavorare in collaborazione in un ambiente focalizzato sulla ricerca. Sfondo del progetto
- Forniamo modelli di fondazione aperti con centinaia di miliardi di parametri su migliaia di GPU su uno dei più grandi supercomputer AI-ready in Europa. Descrizione del lavoro
- L'ingegnere possederà la base di codice di valutazione e le condotte che informano le decisioni di formazione e le uscite. Infrastrutture di valutazione
- Debug guasti di valutazione, regressioni e incongruenze attraverso backends Copertura del banco
- Integrare nuovi benchmark come il campo si evolve, lavorando con i nostri collaboratori accademici a bordo dei benchmark che creano, e convalidare che metriche e implementazioni di imbracatura sono affidabili Valutazione comparativa e di terze parti
- MSc o PhD in Informatica, Scienza dei dati, intelligenza artificiale, apprendimento automatico, o un campo relativo.
Note e contenuto originale
- Questo ruolo richiede forte ingegneria Python, esperienza di valutazione LLM hands-on e la capacità di lavorare in collaborazione in un ambiente focalizzato sulla ricerca.
- Sfondo del progetto
- Forniamo modelli di fondazione aperti con centinaia di miliardi di parametri su migliaia di GPU su uno dei più grandi supercomputer AI-ready in Europa.
- Descrizione del lavoro
- L'ingegnere possederà la base di codice di valutazione e le condotte che informano le decisioni di formazione e le uscite.
- Infrastrutture di valutazione
- Debug guasti di valutazione, regressioni e incongruenze attraverso backends
- Copertura del banco
- Integrare nuovi benchmark come il campo si evolve, lavorando con i nostri collaboratori accademici a bordo dei benchmark che creano, e convalidare che metriche e implementazioni di imbracatura sono affidabili
- Valutazione comparativa e di terze parti
Domande frequenti su questo annuncio
Che stipendio offre ETH Zürich per questa posizione?
ETH Zürich indica CHF 73'500 - 111'500 lordi annui per questo ruolo a Zurich. Questo è lo stipendio pubblicato nell'annuncio originale (o, quando il datore non specifica una cifra, una stima realistica per ruolo e settore) — il calcolatore di questo sito lo converte nel netto reale una volta applicate imposta da frontaliere e contributi sociali.
È un ruolo a tempo pieno, e che tipo di contratto offre ETH Zürich?
Questo annuncio è una posizione a contratto a tempo determinato. Il tipo di contratto mostrato qui arriva direttamente dall'annuncio originale del datore di lavoro; conferma sempre orario esatto, preavviso e durata del periodo di prova con ETH Zürich durante il colloquio, perché questi dettagli possono variare anche all'interno della stessa categoria contrattuale.
Serve un permesso da frontaliere per un ruolo nel canton Zurigo?
I residenti UE/AELS nella zona di frontiera del paese confinante con il canton Zurigo possono richiedere il Permesso G; il datore di lavoro svizzero lo presenta all'ufficio della migrazione di quel canton dopo la firma del contratto. Regole sulla zona di frontiera e tempi di lavorazione variano per paese confinante e canton — verifica i dettagli con l'ufficio della migrazione del canton Zurigo o con HR durante il colloquio.
Come mi candido a questa posizione presso ETH Zürich?
Usa il pulsante "Candidati ora" in questa pagina — rimanda direttamente all'annuncio originale di ETH Zürich su jobs.ethz.ch, quindi la tua candidatura arriva direttamente nel sistema di gestione candidature del datore di lavoro. Frontaliere Ticino non raccoglie né inoltra candidature in proprio.
