L’esperienza del nucleo di valutazione del Conservatorio di Musica ‘Arrigo Boito’ di Parma

1. L’esperienza del nucleo di valutazione del Conservatorio di Musica ‘Arrigo Boito’ di Parma Fabrizio Fanticini

2. Fabrizio Fanticini Prima dell’istituzione del Nucleo di Valutazione Già dal 2005 è stata data informazione al Collegio dei docenti del Conservatorio di Parma dell’esigenza di verificare la qualità del servizio all’interno dell’istituto.

3. Fabrizio Fanticini Reazioni • Iniziale forte timore da parte di molti docenti di veder profanato il proprio microcosmo con conseguente perdita degli equilibri consolidati. • Successivamente, nonostante ripetute spiegazioni anche individuali, al timore si sostituisce, accanto ad una non trascurabile curiosità, la sfiducia sulla reale incidenza di tale ricerca sia da parte di docenti, che di studenti e personale a.t.a. • Solo dopo mesi dalla prima informazione e con il primo operare del nucleo di valutazione, cresce la fiducia e la collaborazione (che comunque non è mai stata assente); questo processo si incrementa con il procedere dei lavori del nucleo e credo potrà divenire ottimale solo con un esito concretamente positivo della prima rilevazione.

4. Fabrizio Fanticini Istituzione del Nucleo di Valutazione Il Nucleo di Valutazione viene istituito nel marzo 2007 ed è composto da: Presidente, dott. Franco Torelli, professore di statistica presso le Università di Modena e Reggio Emilia e presso l’Università Cattolica di Milano; dott.ssa Federica Balluchi, professore associato e docente di controllo di gestione presso l’Università di Parma; maestro Fabrizio Fanticini, docente di Armonia, Contrappunto, Fuga e Composizione presso il Conservatorio di Musica di Parma.

5. Fabrizio Fanticini Specificità dei componenti del Nucleo • Prof. Torelli, esperto di statistica; • Prof.ssa Balluchi, esperta di controllo di gestione; • M. Fanticini, conoscitore della realtà del conservatorio.

6. Fabrizio Fanticini Prima fase operativa Ai due componenti esterni vengono fornite informazioni relative alla realtà e alle specificità dello studio nel conservatorio. Si ritiene utile verbalizzare ogni momento dei lavori per lasciare una traccia trasparente del modo di operare del Nucleo; a tal fine la direzione fornisce una segretaria verbalizzante. Si evidenzia immediatamente l’utilità, tra una riunione e l’altra, di operare tenendosi in costante contatto a stretto giro di e-mail.

7. Fabrizio Fanticini Problemi rilevati: • L’articolazione degli studi nel conservatorio tra vecchio e nuovo ordinamento, risulta di ardua appropriazione per un osservatore esterno; • Lo stesso termine assume a volte significati contrastanti se riferito all’università o al conservatorio creando incomprensioni. (ad esempio il termine relativo al conservatorio vecchio ordinamento “corso complementare obbligatorio”, nel linguaggio universitario risulta una contraddizione in termini) • Difficoltà di comprendere lo scollegamento tra il conservatorio vecchio ordinamento e gli altri ordini scolastici, anche relativamente all’età dell’utenza. ( ad esempio, come sia possibile che studenti abbiano conseguito un diploma di conservatorio, pur con tutte le limitazioni di legge, frequentando ancora una media superiore o addirittura senza averla mai iniziata)

8. Fabrizio Fanticini Definizione dei soggetti dell’indagine Oltre ai docenti e al personale a.t.a. è da definire la tipologia di studenti a cui rivolgersi. Pur sapendo che l’esperienza del vecchio ordinamento è in esaurimento, dato che il diploma di conservatorio è equipollente al diploma accademico di primo livello, si è deciso di interpellare anche gli studenti dei corsi superiori di conservatorio; perciò le categorie di studenti interessati all’indagine saranno: • Studenti dei corsi superiori del conservatorio; • Studenti del triennio di I livello; • Studenti del biennio di II livello.

9. Fabrizio Fanticini Cosa rilevare Oggetto dell’analisi saranno sia la ricerca dei problemi da risolvere per migliorare il servizio, che gli elementi di soddisfazione affinché questi possano essere incrementati.

10. Fabrizio Fanticini Seconda Fase Pur nell’operare collegiale viene definita la divisione di responsabilità e compiti operativi tra i tre componendi il Nucleo secondo le specificità individuali.

11. Fabrizio Fanticini Temi da sviluppare • Formulazione delle domande dei tre questionari • Garanzia dell’anonimato • Modalità della rilevazione e della raccolta dei dati • Creazione del rapporto finale • Determinazione di un calendario delle scadenze delle operazioni

12. Fabrizio Fanticini Formulazione delle domande dei tre questionari a. Come conoscitore della realtà del conservatorio, illustro agli altri componenti i punti che ritengo di maggiore interesse per una indagine, seguendo le indicazioni raccolte durante il convegno svoltosi a L’Aquila nel 2005. (ad esempio la correttezza del carico di lavoro richiesto per ottenere i risultati prefissi relativamente ai crediti assegnati; obiettivi prefissi e risultati realmente raggiungibili; ecc.) b. Successivamente si realizzano tre focus groups, rispettivamente con un campione di docenti, di studenti e di personale A.T.A. ( in questo modo si sono voluti portare in luce i problemi specifici al singolo conservatorio) • Il professor Torelli redige un rapporto riassuntivo di quanto emerso per ciascuno dei tre focus groups. • Dalla modulazione tra ciò che è emerso da questi rapporti riassuntivi e la riflessione interna al Nucleo rispetto agli aspetti “oggettivi” su cui rivolgere l’indagine, si individuano le domande da inserire nei questionari. • Della formulazione delle domande si incarica il prof. Torelli in qualità di esperto statistico. (la forma e a volte anche solo la sintassi possono condizionare una risposta falsando il risultato, perciò abbiamo affidato tale compito all’esperto di statistica)

13. Fabrizio Fanticini Garanzia dell’anonimato Relativamente agli studenti questo è il problema più rilevante. • Per far si che l’indagine porti a risultati utili non è possibile limitarla alla globalità delle Scuole, ma è necessario particolareggiarla maggiormente. • Dato che in una Scuola può esserci anche solo uno studente interessato all’indagine, non è possibile giungere a questo livello di analisi senza compromettere totalmente l’anonimato.

14. Fabrizio Fanticini Soluzione adottata: Si è deciso di limitare l’analisi dei dati al livello di Dipartimento. Sebbene non sia la soluzione ottimale, il numero di studenti interpellati garantisce l’anonimato del singolo e, nello stesso tempo ciò che emerge dai questionari potrà essere collocato nella realtà conosciuta all’interno degli ambiti non eccessivamente ampi del Dipartimento, che quindi sarà in grado di particolareggiare l’eventuale problema e segnalarlo al Consiglio Accademico.

15. Fabrizio Fanticini Nell’eventualità che un aspetto sollevato non risulti di chiara lettura è prevista la possibilità di effettuare successive rilevazioni maggiormente particolareggiate su un campione di soggetti, ridotto di numero quanto selettivamente individuato

16. Fabrizio Fanticini Modalità della rilevazione e della raccolta dei dati Affinché i dati della rilevazione portino ad un risultato utile, è necessario una grande partecipazione all’indagine. Per garantire ciò instaurando una consuetudine, in questa prima istanza, si è deciso l’obbligatorietà della compilazione del questionario sia da parte dei docenti che degli studenti e del personale a.t.a.

17. Fabrizio Fanticini Problemi da affrontare • Evitare che una stessa persona compili più volte un questionario • Impedire risposte incomprensibili o incoerenti • Indurre alla compilazione completa dei questionari • Favorire al massimo la facilità di compilazione attraverso la concisione e l’agilità del mezzo

18. Fabrizio Fanticini Soluzioni adottate • Informatizzazione totale di questionari e analisi dei dati. • Compilazione a mezzo internet, consentendo così di rispondere al questionario in qualsiasi luogo attraverso un qualsiasi computer collegato alla rete. • L’accesso ai questionari avviene attraverso una password individuale fornita dalla segreteria didattica. • Come avviene per l’annuale rendicontazione finale dell’LLP, è possibile modificare più volte il questionario fino a che non si seleziona l’invio; a quel punto la password scade e non è più possibile alcuna modifica. • Le risposte alle domande contenute nel questionario si possono selezionare scegliendole tra quelle proposte in un menu a discesa • Tra le risposte proposte compare sempre anche “N. R.” (non risponde) • Non è possibile inviare il questionario senza aver selezionato una delle risposte suggerite in tutte le domande

19. Fabrizio Fanticini Solo al termine dei questionari viene prevista la possibilità di inserire proprie considerazioni, rilievi o osservazioni, in un campo apposito.

20. Fabrizio Fanticini Terza Fase • Realizzazione di questionari cartacei e “collaudo” degli stessi con un campione delle tre categorie interessate alla rilevazione. • Valutazione delle difficoltà e delle incomprensioni rilevate durante il “collaudo” e correzioni relative • Realizzazione della versione definitiva dei questionari

21. Fabrizio Fanticini • Progettazione di un sito web apposito e realizzazione informatica dei questionari. (A questo proposito la direzione del conservatorio ha affiancato al nucleo di valutazione il dott. Giacomo Scaramuzza, informatico ma anche diplomato in composizione presso il nostro conservatorio, che si è dimostrato figura indispensabile alla corretta realizzazione del progetto. • “Collaudo” ad opera dei componenti il Nucleo.

22. Fabrizio Fanticini Fase Quarta • La compilazione dei questionari è iniziata oggi e si concluderà il 15 febbraio 2008. • Per i meno avvezzi all’uso del computer il conservatorio ha previsto presso i punti internet messi a disposizione all’interno dell’istituto, personale in grado di affiancare il compilatore.

23. A tutti i soggetti della rilevazione la segreteria fornisce, con username e password un foglio di istruzioni per la compilazione del questionario Fabrizio Fanticini

24. Fabrizio Fanticini Fase quinta Dalla data del 15 febbraio 2008 inizierà l’analisi dei dati pervenuti. Questo porterà alla realizzazione del Rapporto 2006/07 che verrà consegnato al Consiglio Accademico entro il primo giugno 2008

25. Fabrizio Fanticini Il Rapporto 2006/07 • Contemporaneamente ai lavori delle fasi precedenti si è iniziata la realizzazione degli indici degli argomenti e delle parti già disponibili del Rapporto 2006/07. • La professoressa Balluchi con le sue competenze si è assunta la responsabilità di coordinarne la realizzazione.

26. Fabrizio Fanticini

27. Fabrizio Fanticini L’indice provvisorio del Rapporto 2007

28. Fabrizio Fanticini Naturalmente si tratta di un indice che potrà subire modifiche soprattutto nei punti dall’1 al 6 dove al momento i dati sono disponibili solo parzialmente o non ancora disponibili. Nondimeno si voluto realizzare un indice di argomenti che sia di giuda per le future rilevazioni e che vada perfezionandosi con esse.

29. Fabrizio Fanticini I questionari Mi limito a mostrare alcune immagini della realizzazione grafica dei nostri questionari, dato che le domande contenute sono il risultato delle fasi di lavoro appena illustrate e quindi specifiche alle caratteristiche del Conservatorio di Parma; in questo senso di scarsissima utilità, se non fuorvianti per gli altri istituti.

30. Fabrizio Fanticini Il login

31. Fabrizio Fanticini Pagina di benvenuto

32. Fabrizio Fanticini Le pagine dei questionari

33. Fabrizio Fanticini • Al termine di ogni pagina è possibile salvare le risposte, ma se non si è risposto a qualche domanda si viene avvertiti

34. Fabrizio Fanticini Le tipologie di risposte suggeritenei menu a discesa Nel caso si debba specificare la quantità che determina l’insoddisfazione relativa alla domanda precedente:

35. Fabrizio Fanticini Ad esempio:

36. Fabrizio Fanticini È possibile sfogliare le varie pagine, eventualmente correggendo le risposte salvate, “cliccando” sul menu alla sinistra del questionario.

37. Fabrizio Fanticini Al termine della compilazione delle varie pagine è possibile controllare quanto inserito nell’intero questionario cliccando su “Controlla”

38. Fabrizio Fanticini Al termine della pagina di riassunto, prima dell’invio, è possibile inserire un proprio commento o rilievo in un campo apposito

39. Fabrizio Fanticini Fabrizio Fanticini Nucleo di Valutazione Conservatorio di Musica ‘Arrigo Boito’ Parma e-mail: nucleo.valutazione@conservatorio.pr.it