Artificial Intelligence Trainer

Competenze

Competenze tecniche

• Esperienza in annotazione e classificazione di dati non strutturati
• Valutazione RLHF e comparative ranking
• Redazione di prompt tecnici e istruzioni strutturate
• Utilizzo di piattaforme come Label Studio, Scale AI, Surge AI
• Analisi statistica della qualità dei dati con Python o Excel
• Comprensione dei principi base di NLP e machine learning
• Gestione di ontologie e tassonomie di classificazione

Competenze interpersonali

• Attenzione al dettaglio su volumi elevati di lavoro ripetitivo
• Capacità di formulare giudizi calibrati in condizioni di ambiguità
• Comunicazione scritta precisa e strutturata
• Adattabilità rapida a linee guida in continua evoluzione
• Pensiero critico applicato alla valutazione di contenuti complessi

Compiti

• Annotare testi, immagini o audio seguendo linee guida dettagliate su piattaforme specializzate, garantendo un tasso di accuratezza superiore al 95%
• Valutare le risposte generate da modelli LLM, applicando criteri di utilità, correttezza e sicurezza definiti nei rubric interni
• Scrivere prompt di addestramento originali, coprendo scenari edge-case identificati durante sessioni di analisi degli errori
• Correggere e riscrivere output del modello per produrre esempi di riferimento ad alta qualità destinati al fine-tuning
• Documentare le ambiguità interpretative nelle linee guida e proporre aggiornamenti alla knowledge base del team
• Misurare la coerenza inter-annotatore tramite Cohen's kappa su campioni settimanali di 500+ item
• Calibrare i propri giudizi attraverso sessioni di calibrazione collettiva con revisori senior ogni due settimane
• Identificare pattern ricorrenti di errore nei dataset e redigere report strutturati per gli ingegneri ML
• Gestire flussi di lavoro paralleli su più progetti simultanei, rispettando le scadenze con un margine di ritardo inferiore al 5%
• Tradurre o adattare contenuti multilingue mantenendo la coerenza semantica tra varianti linguistiche

Ambienti di lavoro

Gli ambienti di lavoro possono variare:

Possibili evoluzioni

• Evoluzione verso responsabile della qualità dei dati per ML
• Diventare un Prompt Engineer senior
• Assumere il ruolo di responsabile di progetto AI
• Ricercatore in NLP applicato
• Coordinatore di team di annotazione

Profilo ricercato