Senior Software Engineer — Valutazione dell’IA e benchmark
Costruisci i benchmark che mettono alla prova i modelli di IA più avanzati al mondo. 80–100 $/ora, completamente da remoto, cerchiamo esperti di Python.
- Tipo
- Contratto a ore
- Compenso
- 80–100 $ / ora
- Sede
- Da remoto (globale)
- Durata del contratto
- 3 mesi
- Impegno
- Preferibile disponibilità a tempo pieno
Il ruolo
E se il codice che scrivi potesse stabilire quanto è davvero intelligente la prossima generazione di IA? Cerchiamo ingegneri software esperti per progettare e realizzare i benchmark di programmazione e le pipeline di dati con cui vengono valutati i modelli di IA più avanzati: i sistemi che stabiliscono se un’IA sa davvero ragionare, fare debugging e scrivere software di qualità da produzione.
È un lavoro ad alto impatto e tecnicamente impegnativo, all’incrocio tra ingegneria del software e ricerca sull’IA. Lavorerai con codebase di grandi dimensioni, più linguaggi di programmazione e infrastrutture scalabili per creare sistemi di valutazione che spingono più in là i limiti di ciò che l’IA sa fare.
È un ruolo a contratto completamente da remoto. Se ti trovi a tuo agio in ambienti di ingegneria dal ritmo serrato e vuoi che il tuo lavoro influenzi direttamente l’evoluzione dell’IA, questo è il ruolo giusto.
- Tipo: Contratto a ore
- Compenso: 80–100 $ / ora
- Sede: Da remoto (globale)
- Durata del contratto: 3 mesi
- Impegno: Preferibile disponibilità a tempo pieno
Di cosa ti occuperai
- Progettare e implementare benchmark di programmazione per valutare i modelli di IA più avanzati su attività di programmazione reali
- Costruire e mantenere pipeline di dati scalabili per i processi di valutazione dell’IA
- Analizzare il codice generato dall’IA per verificarne correttezza, affidabilità ed errori nei casi limite
- Creare scenari di valutazione strutturati che mettano rigorosamente alla prova ragionamento, debugging e qualità del codice
- Lavorare con grandi repository di codice e ambienti multilinguaggio
- Collaborare a sistemi che migliorano il modo in cui i modelli di IA comprendono e generano software
- Fornire feedback tecnici dettagliati sulle prestazioni dei modelli e sugli schemi di errore
- Contribuire alla progettazione di framework di valutazione che definiscono gli standard del settore
Il tuo profilo
- Almeno 4 anni di esperienza professionale come ingegnere software: è un requisito imprescindibile
- Esperienza in un’azienda tecnologica in forte crescita o in un’organizzazione software di primo livello
- Conoscenza esperta di Python: scrivi codice Python pulito, performante e ben testato
- Esperienza pratica con repository di codice e con codebase grandi e complesse
- Esperienza comprovata nella progettazione e implementazione di benchmark di programmazione per LLM e di pipeline di dati
- Esperienza in ambienti di ingegneria ad alte prestazioni con prodotti o piattaforme su larga scala
- Ottima padronanza dei sistemi di controllo versione (Git) e dei flussi di sviluppo moderni
- Bilingue o madrelingua inglese, con ottime capacità di comunicazione scritta
- Autonomo, tecnicamente rigoroso e a tuo agio nel lavorare in modo indipendente
Cosa ti rende il candidato ideale
I candidati con queste qualifiche aggiuntive hanno le maggiori probabilità di successo:
- Profilo senior o lead con esperienza di responsabilità tecnica
- Laurea triennale o magistrale in Informatica, Machine Learning o ambito affine, oppure esperienza professionale equivalente
- Conoscenza di uno o più linguaggi aggiuntivi: JavaScript, Go, C++ o altri linguaggi pertinenti
- Esperienza con pipeline CI/CD e nella scrittura di unit test solidi (pytest, Mocha, JUnit)
- Esperienza in sicurezza informatica o contributi significativi all’open source
- Familiarità con metodologie di valutazione IA/ML o di benchmarking dei modelli
Perché unirti a noi
- Lavora a progetti d’avanguardia sulla valutazione dell’IA insieme a team di ricerca di livello mondiale
- Completamente da remoto: lavora da dove vuoi con una connessione internet affidabile
- I tuoi benchmark influenzano direttamente il modo in cui vengono misurati e migliorati i sistemi di IA più avanzati al mondo
- L’autonomia del freelance in un lavoro di ingegneria significativo e ad alto impatto
- Collabora con una comunità globale di ingegneri e ricercatori d’eccellenza
- Possibilità di estensione del contratto e di collaborazione continuativa con l’arrivo di nuove sfide di valutazione
Prepararsi al colloquio condotto dall’IA
I colloqui per questo ruolo sono condotti da un’IA: dopo la candidatura, quindi, parlerai probabilmente con un intervistatore IA anziché con un recruiter. Questo formato premia risposte chiare, concrete e con il giusto ritmo. Aspettati di parlare nel dettaglio dei benchmark o delle pipeline di dati che hai costruito, di come testi il codice Python e di come stabiliresti se un frammento di codice generato dall’IA è davvero corretto. Leggi con attenzione le istruzioni dell’invito e seguile durante il colloquio.
La preparazione migliore è esercitarsi ad alta voce prima. Con InterviewAce puoi fare colloqui di prova, allenarti a rispondere alle domande di approfondimento sui tuoi progetti e ricevere un feedback prima di quello vero. Queste guide ti spiegano come fare:
- Colloquio con un’IA? Cosa aspettarsi da un intervistatore IA (in inglese)Come funzionano i colloqui di preselezione condotti dall’IA e come esprimersi con chiarezza.
- Colloquio tecnico: preparazione per sviluppatoriUn piano strutturato per le prove di coding, system design e comportamentali.
- Strumenti di IA per esercitarsi ai colloqui di lavoroEsercitati ad alta voce con un intervistatore IA che fa domande di approfondimento.
- Colloquio da remoto: consigli per le videochiamatePostazione, luci, audio e ritmo per i colloqui fatti da casa.
- I 5 errori più comuni nei colloqui tecniciLe abitudini che fanno inciampare ottimi ingegneri, e come evitarle.
- Domande comportamentali con il metodo STARTrasforma i tuoi progetti in racconti concreti e incisivi.
- Come funzionano i modelli linguisticiUn ripasso sui sistemi che valuteresti.
Strumenti gratuiti per la tua candidatura
Prima di candidarti, assicurati che il tuo CV racconti la storia giusta. I nostri strumenti gratuiti per la carriera non richiedono registrazione:
- Creatore di CV gratuitoRifinisci il CV puntando su Python, benchmark e lavoro con l’IA prima di candidarti.
- Generatore di lettere di presentazione gratuitoScrivi una lettera mirata sui sistemi che hai costruito.
- Calcolatore di stipendio gratuitoConfronta una tariffa oraria da freelance con un’offerta da dipendente.
Pronto a candidarti?
Pensi di essere la persona giusta per Senior Software Engineer — Valutazione dell’IA e benchmark? Clicca qui sotto per avviare la candidatura.
Candidati per questa posizione →Cerchiamo anche: Senior Software Engineer — Coding agentico. Guarda tutte le posizioni aperte oppure scopri dove si è parlato di InterviewAce.