Francesco Cutugno segnala l’avvio della campagna EVALITA 2026, un’iniziativa dell’AILC (Associazione Italiana di Linguistica Computazionale).
Come nelle edizioni precedenti, EVALITA 2026 sarà organizzata attorno a un numero selezionato di task, che offriranno ai partecipanti l’opportunità di discutere ed esplorare sia aree emergenti sia tradizionali del Natural Language Processing e del trattamento del parlato. La partecipazione è incoraggiata sia per i team che lavorano in ambito accademico sia per quelli in organizzazioni industriali.
Si accetta anche la ri-annotazione o l’espansione di dataset da anni precedenti e da sfide precedenti con nuovi livelli di annotazione, nonché testi tratti da corpora disponibili pubblicamente. Tuttavia, le annotazioni dei dati di test devono essere nuove e inedite, poiché i partecipanti non devono avere accesso alle annotazioni dei dati di test prima della conclusione della campagna EVALITA.
Sono fortemente incoraggiati:
- task che pongano sfide non banali e stimolino la creazione di sistemi innovativi;
- task incentrati sulla multimodalità;
- task caratterizzati da diversi livelli di complessità;
- la possibilità di fornire baseline competitive (ad esempio, LLM di piccole dimensioni in setup zero-shot), che i partecipanti dovrebbero migliorare, in modo da incoraggiare la progettazione di soluzioni avanzate;
- task orientati all’applicazione, cioè task che abbiano un’applicazione finale ben definita per l’utente;
- task multilingui;
- task industriali, cioè con dati reali forniti da aziende.
Gli organizzatori dei task accettati dovranno occuparsi della pianificazione delle attività e della redazione di un articolo descrittivo del task.
Le proposte andranno trasmesse in formato PDF all’indirizzo evalitacampaign@gmail.com con oggetto “EVALITA 2026 TASK Proposal” entro la scadenza, fissata al 21 luglio 2025.
Per qualsiasi domanda o suggerimento, è possibile contattare i chair di EVALITA 2026 all’indirizzo evalitacampaign@gmail.com.
Tutte le informazioni sulla campagna EVALITA 2026 sono disponibili qui.