L’avaluació de la innovació educativa: una necessitat i un far per a la transformació

/0 Comments/in /by

Xavier Aragay
Laia Lluch

L’avaluació es converteix en el motor de la millora i el contrast permanent de les nostres iniciatives d’innovació i canvi, informant-nos sobre els avanços a reforçar i els canvis necessaris. El procés d’avaluació s’assembla a un viatge pel mar, ple de reptes i oportunitats de creixement. En resum, l’avaluació esdevé la clau per al progrés, el canvi i la transformació de tota institució educativa.

 

Imagina que has estat navegant en aigües desconegudes durant anys, introduint innovacions transformadores en la teva institució educativa. Ara, sents la necessitat d’emprendre una avaluació externa per comprendre l’impacte generat i escoltar les veus dels protagonistes: l’alumnat, el professorat i les famílies. És el moment d’il·luminar el camí recorregut i albirar el rumb futur.

 

L’avaluació s’erigeix així com la pedra angular per aconseguir una transformació sostenible i duradora en el temps. Seguint un cicle de reflexió, acció, avaluació i ampliació, podem impulsar un procés de canvi profund. Similar a un far que enlluerna en la foscor, l’avaluació ens permet identificar punts forts i àrees de millora en el disseny original, a mesura que es materialitza a l’aula.

 

Apostar per les avaluacions de les innovacions educatives a la institució permet obtenir retroalimentació per a la presa de decisions, identificar bones pràctiques, fomentar la participació de la comunitat educativa i optimitzar els recursos disponibles, entre molts altres beneficis més.

 

L’equip de reimagine.education ha creat la metodologia del camí de la transformació educativa d’una institució denominada RIEDUSIS. Una peça essencial d’aquesta metodologia és l’avaluació. Hem definit dos tipus d’avaluació que s’entrellacen en el seu propòsit. D’una banda, l’avaluació de procés, que és aconsellable realitzar dins del primer any d’implementació d’una innovació, actua com a una brúixola, contrastant el disseny inicial amb la seva implementació efectiva. Ens permet visualitzar desviacions i consolidar els aspectes destacats, assegurant que la direcció o el rumb traçat estigui alineat amb les nostres metes.

 

D’altra banda, l’avaluació d’impacte, que s’assembla a una exploració de les profunditats marines. Proposem realitzar-la almenys dos anys després de la implementació de la innovació o prototip a l’aula, i busca mesurar el veritable efecte o impacte aconseguit en l’alumnat d’acord amb el perfil de sortida definit anteriorment com a objectiu. Aquí, examinem si les nostres hipòtesis inicials s’han complert i si els nostres dissenys han generat l’impacte desitjat. A partir d’aquests descobriments, podem ajustar les nostres veles i orientar els nostres esforços cap a les àrees que necessiten canvis i millores.

 

En cada ona d’avaluacions, una nova marea cultural arrela en la institució educativa. Més que transformar només els fonaments físics o les metodologies d’aula, busquem una veritable evolució i canvi en la mirada de les persones i en la cultura de l’organització. Com el mar esculpeix la costa amb paciència i constància, l’avaluació contínua modela el centre educatiu cap a una institució que aprèn, millora i avança en el temps.

 

Amb tot aquest viatge, observem que l’avaluació de qualsevol innovació educativa s’alça com un far de coneixement enmig d’un vast oceà. A través de les seves llums, podem consolidar el que s’ha realitzat i traçar noves rutes cap a una educació més significativa, profunda i transformadora. Veiem, doncs, la importància de l’avaluació, ja que a més d’informar-nos sobre l’impacte de les nostres accions, ens impulsa a abraçar el canvi, a ser una organització que aprèn i evoluciona constantment. Així, navegarem cap a un futur educatiu més prometedor, guiat per la saviesa que emana de l’avaluació contínua i reflexiva.

 

En els últims anys, l’equip de reimagine.education ha realitzat més de 20 avaluacions d’innovacions educatives implementades en tots els nivells de les institucions educatives (escolars i universitàries) en més de deu països diferents d’Europa i Amèrica, acumulant una gran experiència en aquest camp. T’animes a realitzar amb nosaltres l’avaluació de la teva innovació?

Primera preavaluació d’impacte a l’Arizmendi Ikastola

/0 Comments/in /by
Alba Ayneto & Xavier Aragay

Fa uns quants mesos, et vam explicar en aquest mateix espai per què i com avaluar les iniciatives i els prototips de transformació i canvi que duen a terme les escoles i universitats per assegurar els processos de transformació educativa en el marc de la metodologia RIEDUSIS. En aquesta ocasió, et volem explicar una experiència concreta de preavaluació d’impacte d’una de les escoles que acompanyem en el procés de transformació: Arizmendi Ikastola.

Arizmendi Ikastola és l’ikastola (escola cooperativa del País Basc on s’imparteix l’ensenyament en eusquera) més gran d’Euskadi, creada el 2003 per integració d’ikastoles preexistents, i que ofereix totes les etapes educatives, des d’infantil fins a formació professional o batxillerat. Amb un caràcter innovador ben marcat, desenvolupen la seva proposta educativa en el marc de la pedagogia de la confiança, i utilitzen la metodologia RIEDUSIS per vehicular el seu procés de transformació i canvi.

Des de l’any 2017, a Reimagine Education hem tingut l’oportunitat d’acompanyar-los en el procés de transformació, que es consolidarà amb la implementació d’una experiència avançada de canvi anomenada BATU. Aquest prototip agrupa els cursos de 5è i 6è de primària i 1r i 2n d’ESO, i actualment està en procés de desenvolupament, producció i experimentació. En aquest marc, s’ha desenvolupat una preavaluació d’impacte en dues de les seves experiències anteriors d’innovació i canvi, dissenyades i implementades durant les etapes d’infantil i batxillerat, amb dos objectius:

  • Avançar en la pràctica del mesurament de l’impacte de cara a dur a terme la primera onada d’avaluació d’impacte a BATU, d’acord amb la metodologia RIEDUSIS.
  • Obtenir informació que permeti continuar avançant en la implementació i la consolidació de les experiències d’innovació i canvi d’infantil i batxillerat.

Per dissenyar i executar l’avaluació centrada en els trets del model de persona que ha definit l’ikastola, s’ha comptat amb la participació d’un grup de recerca de la Universitat Ramon Llull, dos grups de recerca de la Universitat de Mondragón i l’equip de Reimagine Education. A més, mitjançant la col·laboració de la Federació d’Ikastoles, s’ha disposat de la col·laboració de tres ikastoles, que han actuat com a centres de contrast. Així, finalment, al desplegament d’aquesta preavaluació hi han participat més de 300 alumnes d’infantil i batxillerat, 40 docents i 130 famílies.

Els trets avaluats a l’Arizmendi Ikastola han estat:

  • INFANTIL: Cooperativa-autogestionària, euskaldun, amb solidesa interior i creativa.
  • BATXILLERAT: Transformadora, analítica-crítica, cooperativa-autogestionària i euskaldun.

L’experiència de preavaluació d’impacte de les dues iniciatives innovadores de l’ikastola (infantil i batxillerat), que dirigeix i coordina l’equip de Reimagine Education, ha estat molt interessant, i els resultats, en línia dels objectius que es buscaven. Així, d’acord amb els objectius plantejats, s’han obtingut aprenentatges i instruments rellevants per a la propera avaluació d’impacte del prototip BATU, així com indicacions i recomanacions per continuar avançant en el desenvolupament i la consolidació de les experiències avaluades.

Com pots veure, a poc a poc, anem avançant en noves maneres d’avaluar les iniciatives de transformació educativa i aproximant-nos a tenir noves eines de guia per a la millora i el canvi. Continuarem parlant d’avaluacions i preavaluacions d’impacte en propers posts.

Estrenem un curs excepcional

/0 Comments/in , /by

Estrenem un altre mes de setembre i amb ell, un nou curs escolar en molts calendaris, que enguany, ha tingut, està tenint i tindrà unes circumstàncies excepcionals arreu del món, i on la incertesa serà un dels elements més presents.

L’equip de consultcoaches de Reimagine Education Lab estem convençuts que, més enllà de les dificultats de tota mena que se’ns presenten, aquest és un moment clau de l’educació, i una oportunitat molt gran per avançar, més enllà de totes les accions i innovacions que ja hem fet, cap a una profunda transformació de l’escola i la universitat.

Per la nostra part ja estem preparats i treballant amb moltes institucions, posant a la vostra disposició la nostra metodologia de transformació profunda (RIEDUSIS), i la nostra ajuda i acompanyament. I per fer-vos arribar la nostra energia i il·lusió, volem explicar-vos les dues iniciatives més engrescadores que tenim entre mans: el LABoratori educatiu i les avaluacions d’impacte.

LABoratori educatiu

El LABoratori educatiu és un projecte per créixer junts, amb tots aquells de vosaltres que vulgueu participar: La llavor ve del LAB de Reimagine Education Lab, que ens evoca la nostra vocació d’experimentació, anàlisi i construcció col·lectiva i creació permanent dins del procés de transformació profunda de les institucions educatives.

Vam engegar el projecte arran de la campanya #EsHoraDeTransformar que vam llançar al mes d’abril d’enguany, on vam realitzar 5 webinars gratuïts sobre educació i crisi del coronavirus (pots veure’n les gravacions en aquest enllaç). Després dels webinars, estem demanant que ens feu arribar experiències personals, d’equip o institucionals que us haguem inspirat mitjançant idees, metodologies, eines o propostes dels nostres post o webinars. Vàries persones i institucions ja ens han fet arribar les seves experiències i en breu començarem a treballar plegats i publicar-les en aquest blog. Mentrestant, tots aquells de vosaltres que us hi vulgueu sumar, sereu molt benvinguts: per participar-hi, només heu de clicar aquest enllaç.

Crida a experts en avaluació

En aquests moments, a Reimagine Education Lab afrontem el repte d’avaluar, en diferents escoles i universitats, l’impacte respecte el model de persona que volem educar que la implementació dels diferents prototips té en l’alumnat. Per això busquem persones o equips, grups d’experts (consultores) o grups d‘investigació d’universitats, fundacions i/o instituts d’investigació, que vulguin entrar en contacte amb nosaltres i posar la seva experiència al servei d’aquesta oportunitat per dur a terme junts el procés d’avaluació d’impacte en l’alumnat de diverses institucions.

Aquesta crida pot ser una extraordinària oportunitat de col·laboració, d’investigació i d’intercanvi de coneixement, i es pot concretar, segons cada cas, aportant l’experiència i les eines creades i desenvolupades més idònies per capturar informació dels impactes definits (qüestionaris o escales validades, etc.), o bé els suports i canals per fer-ne un desplegament efectiu (aplicacions de mòbils, software específic, etc.).

Si t’interessa, trobaràs tots els detalls de la proposta i com presentar-t’hi en aquest enllaç. Si tens qualsevol dubte o comentari ens pots escriure a: evaluacionimpacto@riedulab.net.

Crida a grups experts per fer avaluacions d’impacte

/0 Comments/in , /by

A Reimagine Education Lab, la consultora educativa dirigida per Xavier Aragay, busquem experts que vulguin dur terme un procés conjunt d’avaluació d’impacte en l’alumnat de diverses institucions. A continuació us desgranem la nostra proposta.

Reimaginem l’educació en el món

A Reimagine Education Lab acompanyem institucions educatives, ja sigui escoles, xarxes d’escoles o universitats a desenvolupar un procés de transformació profunda i integral per mitjà d’una metodologia pròpia, original i contrastada. La nostra metodologia s’inspira en els models lògics procedents de les intervencions socials, els models de qualitat o d’avaluació de les polítiques públiques; i va més enllà d’un canvi tècnic, ja que implica un canvi de mirada que afecta tota la institució i tots els àmbits: metodològic, organitzatiu, d’espais, personal, cultural…

És un procés llarg que té en compte des del perfil de persona que s’ha d’educar (concretat en impactes) i l’elaboració d’un marc general per reformular el procés d’ensenyar i aprendre (teoria per al canvi), fins a  la creació d’una experiència avançada de canvi o prototip que permeti a les institucions educatives de transformar-se i aprendre fent. L’avaluació, tant de procés com d’impacte, hi juga un paper imprescindible, tant pel que fa al procés de millora com, sobretot, en el camí de consolidació dels prototips de transformació i la seva progressiva ampliació a la resta de la institució.

Et proposem avaluar junts

En aquests moments, a Reimagine Education Lab afrontem el repte d’avaluar en diferents escoles i universitats l’impacte que la implementació dels diferents prototips té en l’alumnat. Per això busquem persones o equips, grups d’experts (consultories) o grups d‘investigació d’universitats, fundacions i/o instituts d’investigació que vulguin entrar en contacte i posar la seva experiència al servei d’aquesta oportunitat per dur a terme junts el procés d’avaluació d’impacte en l’alumnat de diverses institucions.

Aquesta col·laboració pot ser una extraordinària oportunitat de col·laboració, d’investigació i d’intercanvi de coneixement, i es pot concretar, segons cada cas, aportant l’experiència i les eines creades i desenvolupades més idònies per capturar informació dels impactes definits (qüestionaris o escales validades, etc.), o bé els suports i canals per fer-ne un desplegament efectiu (aplicacions de mòbils, software específic, etc.).

Si t’interessa, trobaràs tots els detalls de la proposta i com presentar-t’hi en aquest enllaç. Si tens qualsevol dubte o comentari ens pots escriure a: evaluacionimpacto@riedulab.net.

Un interessant servei de suport a les escoles per a la millora de l’educació

/0 Comments/in , /by

Fa unes quantes setmanes vaig tenir l’oportunitat de fer una conferència a la facultat d’Educació i Psicologia de la Universitat Catòlica de Portugal que té la seu a Porto.

No coneixia aquesta universitat ni aquesta facultat, però més enllà dels graus i màsters que ofereixen, entre els quals destaco pel seu interès específic, el postgrau en avaluació d’escoles i projectes de millora, em va sorprendre gratament la relació capil·lar amb les escoles i institucions educatives del seu entorn. I això, no solament es va expressar el dia de la meva conferencia en una sala plena de mestres i professors àvids de conèixer experiències i propostes de canvi profund, element ja per si sol interessant sinó, sobretot, per l’existència del SAME, Serviço de Apoio à Melhoria da Educaçâo.

El SAME és una estructura de la facultat, creada l’any 2008, que té per objecte proporcionar assessorament científic i pedagògic a les escoles i grups educatius en els camps de l’organització, la pedagogia, l’avaluació i la formació, amb la finalitat de millorar les condicions dels processos i resultats educatius, tant acadèmics com socials i personals, dels alumnes. Aquest servei també du a terme estudis de diagnòstic i avaluació educativa.

La missió del SAME és la de capacitar les escoles i els grups per dur a terme pràctiques educatives més coherents i sustentades, i per a la concepció, realització i avaluació de pràctiques innovadores i de millora en l’àmbit organitzatiu i pedagògic. Al mateix temps, es pretén produir un nou coneixement resultant de l’articulació de la teoria amb la pràctica i la realitat.

El SAME s’organitza en equips flexibles i reconfigurables segons els projectes, i aquests equips poden estar integrats per docents de la facultat, doctorands i professors i investigadors convidats.

La reflexió i metareflexió sobre les pràctiques educatives dels equips docents i l’avaluació dels resultats que obtenen, l’impuls de la revisió i la gestió integrada dels currículums prepara la creació d’àrees interdisciplinars als centres, l’agrupació flexible dels alumnes i els professors en equips de treball integrats que van més enllà de la monodocència, la implementació de dinàmiques educatives més actives a l’aula, són uns quants exemples de les bones pràctiques i realitzacions del SAME a les escoles.

Conèixer i tenir una experiència directa i propera d’un nou tipus de relació entre les escoles i els centres educatius i la universitat ha estat molt interessant i desafiador. és evident que totes dues institucions, estructures, processos i resultats guanyen molt si treballen juntes, i que es genera un coneixement integrat nou i fecund. Tant de bo que altres facultats d’educació avancin per aquest camí i intensifiquin la relació i el servei amb les escoles del seu entorn.

Innovació educativa i avaluació d’impacte: dos elements que han d’avançar junts

/0 Comments/in , /by

Quan fa dos anys i mig, després de gairebé cinc anys de preparar el terreny, en el marc de L’HORITZÓ 2020 de la xarxa d’escoles de Jesuïtes Educació, vàrem posar en marxa la innovació disruptiva de l’experiència pilot de la NEI (Nova Etapa Intermèdia), ens vàrem comprometre públicament a fer una avaluació externa de l’impacte produït en els alumnes pels canvis educatius. I això es el que hem presentat avui, després d’un treball intens d’un parell d’anys.

L’element clau és que en el mateix moment en què dissenyàvem la innovació de la NEI vàrem posar en marxa els mecanismes per avaluar-la. Així, doncs, en primer lloc, en acabar el primer curs de la NEI, vàrem dur a terme, amb mitjans interns, l’avaluació del procés. En aquest cas es tractava d’observar i avaluar si el disseny que havíem fet sobre el paper es s’havia trasllada’t a la realitat de l’aula. D’aquesta avaluació, se’n va fer el corresponent informe, que incorporava tot un seguit d’observacions i recomanacions de millora per a l’equip directiu de la NEI. Aquestes millores es van implementar amb el corresponent pla de millora.

Posteriorment, després d’haver acabat el segon curs de la NEI, vàrem posar en marxa la primera ona d’avaluació (caldrà fer-ne més) de l’impacte produït en els alumnes, i avui hem explicat quins han estat els resultats, i aquest es l’informe final que posem a disposició de tots els educadors i investigadors interessats. També hem publicat el quadern número 9 de la col·lecció Transformant l’Educació, com a divulgació més àmplia d’aquesta avaluació d’impacte. Aquesta avaluació ha estat duta a terme per grups de recerca externs (Barcelona, Chicago i Buenos Aires) segons una metodologia específica, ha estat dirigida per mi mateix, i l’ha coordinat el node d’innovació de la xarxa (anomenat CETEI), que és també qui ha fet l’informe final.

Els resultats més interessants que s’han derivat d’aquesta primera ona d’avaluació han estat els corresponents a la millora del clima de l’aula (que té una importància cabdal per a la millora de l’aprenentatge i l’educació) amb una clara millora de la creativitat dels alumnes i el seu canvi del marc mental pel que fa al treball en equip i a la seva manera d’aprendre (més clarament col·laborativa). Alhora, es constata que el descentrament del rol del professor ha atribuït poder a l’alumne i ha aportat un augment de l’autonomia així com un vincle més estret dels alumnes amb els docents i també entre ells. I se sap que si millora el vincle, segur que milloren l’educació i l’aprenentatge. I tot això mantenint els bons resultats acadèmics que aquests alumnes tenien abans d’haver iniciat la innovació.

Per dur a terme aquesta avaluació hem dissenyat un model lògic que ens ha donat una metodologia global per al disseny, la planificació, l’observació i l’avaluació de les innovacions introduïdes d’acord amb el model de persona que ens proposàvem educar. A més, la implantació progressiva de les innovacions a les diferents escoles de la xarxa ens ha permès fer un estudi quasi experimental i comptar amb un grup d’intervenció i un altre de comparació, fet que dóna més robustesa i fiabilitat als resultats i que el situa, en conjunt, com una important novetat en el panorama educatiu tant en l’àmbit nacional com en l’internacional.

És evident que la sistemàtica de l’avaluació d’impacte no ha fet més que començar i que aquesta primera ona d’avaluació té unes limitacions importants (entre elles, el fet que els alumnes només han realitzat dos cursos dels quatre que preveu la NEI), però les opinions recollides en el procés d’avaluació d’alumnes, famílies i docents confirmen també una valoració positiva pel que fa al creixement personal i al projecte vital dels membres de la comunitat educativa. Òbviament, també es recullen tot un seguit d’alertes i de recomanacions per a l’equip directiu de la NEI (molt útils per al procés de calibratge i millora de la innovació) i trenta recomanacions més vinculades a les properes ones d’avaluació (fiabilitat dels registres, millora de les eines emprades i futura potencialitat de noves eines).

No n’hi ha prou amb sensacions, intuïcions i opinions quan posem en marxa innovacions en el procés d’ensenyament i d’aprenentatge a les nostres escoles. Cal, amb base científica, qualificar, quantificar i contrastar els progressos, sobretot pel que fa al model de persona que volem educar i al seu impacte (o no) sobre els alumnes. Aquesta ha de ser la nostra fortalesa, perquè l’avaluació ha de ser el verdader motor de la millora i transformació educativa, i l’eina fonamental per reimaginar la nostra educació.

Xavier Aragay i Tusell
Director de l’avaluació de l’experiència pilot de la NEI