{"id":4792,"date":"2020-12-14T12:11:13","date_gmt":"2020-12-14T12:11:13","guid":{"rendered":"https:\/\/dev3.atelieru.ro\/tfr\/\/?p=10648"},"modified":"2022-09-09T15:03:44","modified_gmt":"2022-09-09T15:03:44","slug":"agnes-tolescu-evaluarea-de-impact-in-educatie-sau-cum-ne-uitam-la-rezultatele-elevilor-dincolo-de-performanta-academica","status":"publish","type":"post","link":"https:\/\/teachforromania.org\/en\/agnes-tolescu-evaluarea-de-impact-in-educatie-sau-cum-ne-uitam-la-rezultatele-elevilor-dincolo-de-performanta-academica\/","title":{"rendered":"Agnes \u021aolescu: evaluarea de impact \u00een educa\u021bie sau cum ne uit\u0103m la rezultatele elevilor dincolo de performan\u021ba academic\u0103"},"content":{"rendered":"\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Cu o experien\u021b\u0103 profesional\u0103 \u00een analiza de date, strategie \u0219i management de proiect, Agnes este specialistul nostru pe m\u0103surarea impactului \u0219i zilele acestea ne-a povestit care este rolul departamentului de Impact din organiza\u021bie \u0219i c\u00e2t de ancorat\u0103 este activitatea ei \u00een Teoria Problemei \u0219i Teoria Schimb\u0103rii, un instrument folosit de organiza\u021biile din re\u021beaua Teach for All.<\/p>

\u00cembun\u0103t\u0103\u021birea competen\u021belor de litera\u021bie \u00een citire \u0219i dezvoltarea unui set de abilit\u0103\u021bi socio-emo\u021bionale relevante pentru \u00eenv\u0103\u021bare \u0219i integrarea \u00een societate sunt direc\u021biile de impact pe care le viz\u0103m la elevi. Premisa noastr\u0103 este c\u0103 progresul pe aceste dou\u0103 direc\u021bii, \u00eempreun\u0103 cu crearea unei rela\u021bii profesor-elev pozitive \u0219i a unui mediu de \u00eenv\u0103\u021bare sigur \u0219i \u00eencurajator, vor cre\u0219te incluziunea \u0219i vor reduce absenteismul, abandonul \u0219colar \u0219i comportamentele de bullying.<\/p>

Agnes a povestit cum pandemia a schimbat modul de m\u0103surare a impactului la elevi, dar \u0219i cum a reu\u0219it, datorit\u0103 partenerului nostru strategic \u2013 UiPath Foundation, s\u0103 colaboreze cu exper\u021bi UiPath care au creat o solu\u021bie de automatizare pentru gestionarea mai eficient\u0103 a datelor colectate \u00een cadrul evalu\u0103rilor de impact.<\/p>

\"\"
Foto: Luiza B\u0103l\u0103ceanu @Academia Copiilor 2019<\/figcaption><\/figure>

Descrie-ne pu\u021bin care este rolul t\u0103u \u00een cadrul organiza\u021biei \u0219i ce presupune acesta.<\/strong><\/p>

Rolul meu este de a m\u0103 asigura c\u0103 alegem \u0219i folosim cele mai potrivite metode \u0219i instrumente de evaluare a impactului pe care \u00eel gener\u0103m, at\u00e2t prin programul nostru de formare \u0219i sus\u021binere a profesorilor timp de 2 ani la clas\u0103, c\u00e2t \u0219i prin sus\u021binerea comunit\u0103\u021bii noastre de alumni.<\/p>

Cum lucrezi pe zona asta? \u0218i care e scopul acesteia?<\/strong><\/p>

Activitatea mea este puternic ancorat\u0103 \u00een Teoria Problemei \u0219i Teoria Schimb\u0103rii, instrument pe care l-am folosit pentru definirea strategiei de impact. Acest instrument este recomandat \u0219i frecvent folosit \u00een organiza\u021biile din re\u021beaua Teach for All. Mai exact, am f\u0103cut o analiz\u0103 ampl\u0103 a inechit\u0103\u021bii \u00een educa\u021bie, folosindu-ne at\u00e2t de ultimele statistici disponibile, c\u00e2t \u0219i de o cercetare calitativ\u0103 proprie, \u00een urma c\u0103reia am identificat \u0219i documentat care sunt acele cauze care perpetueaz\u0103 inechitatea educa\u021bional\u0103, cu prec\u0103dere \u00een mediile vulnerabile. Dup\u0103 ce am stabilit care ar fi viziunea noastr\u0103 conform c\u0103reia vrem s\u0103 oferim Op\u021biuni de via\u021b\u0103 prin educa\u021bie de calitate pentru fiecare copil din Rom\u00e2nia, <\/em>am \u00eenceput s\u0103 definim care sunt acele ac\u021biuni, rezultate \u0219i schimb\u0103ri care trebuie s\u0103 aib\u0103 loc pentru a ajunge de la problem\u0103 la schimbare – la viziune. Scopul ariei de impact este at\u00e2t s\u0103 verifice c\u0103 aceste rezultate \u0219i schimb\u0103ri pe care ni le-am propus \u00eentr-adev\u0103r au loc, dar \u0219i s\u0103 le descrie \u0219i cuantifice.<\/p>

Direc\u021biile de impact pe care le viz\u0103m la elevi sunt \u00eembun\u0103t\u0103\u021birea competen\u021belor de litera\u021bie \u00een citire<\/em> \u0219i dezvoltarea unui set de abilit\u0103\u021bi socio-emo\u021bionale relevante pentru \u00eenv\u0103\u021bare<\/em> \u0219i pentru integrarea \u00een societate mai t\u00e2rziu ca adul\u021bi. Mai exact, formarea a ceea ce numim frecvent ast\u0103zi \u201eabilit\u0103\u021bi de via\u021b\u0103\u201d. Premisa noastr\u0103 este c\u0103 progresul pe aceste dou\u0103 direc\u021bii, \u00eempreun\u0103 cu crearea unei rela\u021bii profesor-elev pozitive \u0219i a unui mediu de \u00eenv\u0103\u021bare sigur \u0219i \u00eencurajator, vor cre\u0219te incluziunea \u0219i vor reduce absenteismul, abandonul \u0219colar \u0219i comportamentele de bullying.<\/p>

Pentru a ajunge la aceste rezultate la elevi, trebuie s\u0103 ne asigur\u0103m \u0219i c\u0103 profesorii no\u0219tri au nivelul de competen\u021be, motiva\u021bia \u0219i mindsetul potrivit pentru a genera aceste schimb\u0103ri, at\u00e2t \u00een timpul programului, c\u00e2t \u0219i \u00een calitate de alumni.<\/p>

Primul pas \u00een evaluarea acestor direc\u021bii este crearea unui cadru de monitorizare \u0219i evaluare \u0219i stabilirea celor mai potrivite metode, instrumente, momente \u0219i grupuri \u021bint\u0103 pentru fiecare dintre ele.<\/p>

\"\"<\/p>

Care au fost rezultatele pe care le-ai putea \u00eemp\u0103rt\u0103\u0219i \u00een acest moment?<\/strong><\/p>

O s\u0103 m\u0103 concentrez pe dou\u0103 rezultate pe partea de abilit\u0103\u021bi socio-emo\u021bionale, unul ce prive\u0219te metodologia iar cel\u0103lalt ce prive\u0219te evaluarea propriu-zis\u0103.<\/p>

A durat aproape doi ani de zile pentru a avea un proces bine conturat pentru evaluarea abilit\u0103\u021bilor socio-emo\u021bionale \u0219i, chiar \u0219i \u00een ziua de azi, \u00eenc\u0103 mai este loc de stabilizare \u0219i rafinare. Dup\u0103 mult\u0103 explorare \u0219i testare, am \u00een\u021beles c\u00e2t de important\u0103 este contextualizarea metodelor \u0219i instrumentelor pe care le folosim. Acest lucru nu este deloc u\u0219or de realizat \u00een Rom\u00e2nia, unde nu exist\u0103 multe sau deloc instrumente dezvoltate local pentru astfel de abilit\u0103\u021bi \u0219i competen\u021be care s\u0103 fie folosite \u00een contextul interven\u021biilor educa\u021bionale.<\/p>

Dup\u0103 o analiz\u0103 intern\u0103 a observa\u021biilor comportamentale f\u0103cute de profesorii \u0219i alumnii no\u0219tri la clas\u0103 \u0219i pe baza unei revizuiri a literaturii \u0219tiin\u021bifice de actualitate, am reu\u0219it s\u0103 select\u0103m un set de abilit\u0103\u021bi socio-emo\u021bionale care \u00eei pot ajuta pe elevii din mediile vulnerabile at\u00e2t \u00een procesul educa\u021bional, c\u00e2t \u0219i mai t\u00e2rziu, pentru a se integra cu succes \u00een societate. Acest set cuprinde abilit\u0103\u021bi precum: determinarea, autoreglarea, con\u0219tientizarea social\u0103 \u0219i autoeficacitatea. Iar instrumentul care s-a pliat cel mai bine pe nevoile de evaluare identificate a fost cel de la Panorama Education, o platform\u0103 care ajut\u0103 \u0219colile s\u0103 \u00ee\u0219i ancoreze activitatea \u00een date de calitate ob\u021binute prin instrumente bazate pe cercetare riguroas\u0103, \u00een cazul acesta pe modelel CASEL \u0219i CORE.<\/p>

Dar identificarea instrumentului potrivit a fost doar un prim pas, pentru c\u0103 nu am considerat simpla traducere suficient\u0103. Am demarat un proces de adaptare la contextul comunit\u0103\u021bilor \u00een care activ\u0103m, \u00een cadrul c\u0103ruia am revizuit instrumentul \u00een grupuri de lucru cu profesori \u0219i alumni, prin interviuri cu elevi \u0219i consult\u0103ri cu psihologi educa\u021bionali \u0219i cu exper\u021bi \u00een cercetare. Au rezultat o fi\u0219\u0103 de observare la primar \u0219i o scal\u0103 de autoraportare la gimnaziu, care se aplic\u0103 la \u00eenceputul \u0219i la finalul programului de 2 ani. Mai departe, acestea au trecut prin dou\u0103 etape de pilotare, \u00eent\u00e2i \u00eentr-un grup restr\u00e2ns de aproximativ 80 elevi \u0219i, apoi, \u00eentr-un grup extins de aproximativ 500 de elevi. Analiza statistic\u0103 din cadrul celor dou\u0103 faze de pilotare au confirmat validitatea instrumentului.<\/p>

Astfel, \u00eenc\u0103 de la \u00eenceputul anului \u0219colar 2019-2020, instrumentul a fost gata s\u0103 ne ajute s\u0103 confirm\u0103m progresul elevilor \u00een ceea ce prive\u0219te acest set de abilit\u0103\u021bi socio-emo\u021bionale, \u00eens\u0103 pandemia ne-a obligat s\u0103 am\u00e2n\u0103m acest demers.<\/p>

Pentru a nu pierde totu\u0219i un an \u0219colar \u00een care s\u0103 nu \u00eenv\u0103\u021b\u0103m ceva nou despre impactul programului, ne-am reorientat spre realizarea a trei focus grupuri cu \u00eenv\u0103\u021b\u0103tori, dirigin\u021bi \u0219i profesori non-dirigin\u021bi, iar \u00een acest sens am contractat serviciile agen\u021biei de cercetare Cult Research. Principalele concluzii care au reie\u0219it din acest demers au fost precum urmeaz\u0103:<\/p>

Determinarea<\/em>: participan\u021bii \u00een program au observat cum elevi care ini\u021bial aveau niveluri autonomie \u0219i motiva\u021bie reduse \u0219i nevoie de control extern, la finalul anului reu\u0219eau s\u0103 duc\u0103 la bun sf\u00e2r\u0219it anumite sarcini f\u0103r\u0103 ajutor \u0219i s\u0103 adreseze punctual \u00eentreb\u0103ri.<\/p>

Autoreglarea<\/em>: de\u0219i la \u00eenceputul anului \u00een clas\u0103 era un nivel ridicat de zgomot, iar majoritatea elevilor nu reu\u0219eau s\u0103 \u00ee\u0219i p\u0103streze concentrarea pe o activitate \u0219i deturnau frecvent orele, la final de an participan\u021bii \u00een program au raportat schimb\u0103ri precum reducerea nivelului de zgomot, exprimarea emo\u021biilor \u00een forme mai s\u0103n\u0103toase, reducerea impulsivit\u0103\u021bii.<\/p>

Con\u0219tientizarea social\u0103<\/em>: la clase preponderent lipsite de coeziune \u0219i \u00een care bullyingul \u0219i \u00eenvinov\u0103\u021birea celorlal\u021bi erau frecvente, participan\u021bii \u00een program au observat cre\u0219terea abilit\u0103\u021bilor de lucru \u00een echip\u0103 \u0219i cooperare, cre\u0219terea empatiei, a abilit\u0103\u021bilor de interac\u021biune cu persoane din afara grupului, a abilit\u0103\u021bilor de leadership, toate acestea rezult\u00e2nd \u00een cre\u0219terea coeziunii \u0219i \u00een reducerea diferen\u021belor dintre categorii sociale (pe baz\u0103 de etnie, condi\u021bii materiale, etc.).<\/p>

Autoeficacitate<\/em>: participan\u021bii \u00een program au observat cum elevi care ini\u021bial nu aveau \u00eencredere \u00een ei sau ceilal\u021bi, care erau timora\u021bi \u0219i aveau dificult\u0103\u021bi \u00een a-\u0219i exprima opiniile \u0219i \u00een a le sus\u021bine, la finalul anului au reu\u0219it s\u0103 \u00ee\u0219i exprime \u0219i s\u0103-\u0219i sus\u021bin\u0103 mai des punctul de vedere, au fost mai pu\u021bin timora\u021bi \u00een fa\u021ba figurilor de autoritate \u0219i au ar\u0103tat o capacitate crescut\u0103 de a prelua ini\u021biativa.<\/p>

Comportamente agresive: <\/em>\u00een ceea ce prive\u0219te agresivitatea fizic\u0103, verbal\u0103 \u0219i emo\u021bional\u0103, participan\u021bii \u00een program au observat o reducere a acestor episoadelor la elevi \u00eempreun\u0103 nu cre\u0219terea capacit\u0103\u021bii de a-\u0219i controla furia \u0219i de a colabora cu elevi cu care obi\u0219nuiau s\u0103 intre \u00een conflict.<\/p>

Urm\u0103torul pas important va fi s\u0103 cuantific\u0103m evolu\u021bia folosind instrumentele descrise \u0219i s\u0103 verific\u0103m c\u00e2t din aceast\u0103 evolu\u021bie surprins\u0103 prin evaluare calitativ\u0103 este parte din dezvoltarea normal\u0103 a copilului \u0219i c\u00e2t se datoreaz\u0103 influen\u021bei interven\u021biei Teach for Romania.<\/p>

Cum lucrezi cu Uipath Foundation \u0219i care sunt pa\u0219ii urm\u0103tori?<\/strong><\/p>

Dezvoltarea proceselor de evaluare de impact \u0219i ob\u021binerea rezultatelor men\u021bionate nu ar fi fost posibile f\u0103r\u0103 sus\u021binerea din partea UiPath Foundation din martie 2019 p\u00e2n\u0103 \u00een prezent, care a ar\u0103tat \u00eenc\u0103 de la \u00eenceput deschidere \u0219i dorin\u021b\u0103 \u00een a sprijini o astfel de activitate ale c\u0103rei rezultate se v\u0103d mai greu, dar care este crucial\u0103 pentru asigurarea unei interven\u021bii educa\u021bionale sustenabile, menit\u0103 s\u0103 produc\u0103 un impact semnificativ acolo unde este cea mai mare nevoie. Pe l\u00e2ng\u0103 sprijinul primit pentru sus\u021binerea activit\u0103\u021bilor, am avut \u0219i prilejul de a colabora cu exper\u021bi UiPath \u00een automatizare de procese, care au creat pentru noi o solu\u021bie robotic\u0103 de gestionare mai eficient\u0103 a datelor colectate \u00een cadrul evalu\u0103rilor de impact.<\/p>

\u00a0<\/p>

\u00cen ceea ce prive\u0219te pa\u0219ii urm\u0103tori, evaluarea competen\u021belor de litera\u021bie \u00een citire<\/em> este un proces care ia na\u0219tere chiar \u00een aceast\u0103 perioad\u0103. Ne-am dat seama c\u0103 nu avem resursele \u0219i cuno\u0219tin\u021bele necesare pentru a aborda singuri aceast\u0103 tem\u0103 complex\u0103 \u0219i, dup\u0103 mult\u0103 explorare, am avut prilejul s\u0103 form\u0103m o echip\u0103 de lucru cu exper\u021bi din alte 6 organiza\u021bii din sfera educa\u021biei: platforma de testare Brio, Asocia\u021bia OvidiuRo, Asocia\u0163ia Lectura \u015fi Scrierea pentru Dezvoltarea G\u00e2ndirii Critice Rom\u00e2nia, Funda\u021bia Noi Orizonturi, Asocia\u021bia InfinitEdu \u0219i Asocia\u021bia pentru Valori \u00een Educa\u021bie. Am definit \u00eempreun\u0103 un ghid de construire de teste standardizate de litera\u021bie \u00een citire ancorat \u00een cadrul de evaluare PISA \u0219i am coagulat o echip\u0103 de profesori voluntari, pe care i-am preg\u0103tit \u0219i sus\u021binut \u00een generarea testelor pe baza ghidului. Eforturile au rezultat \u00eentr-o banc\u0103 de aproximativ 2000 de itemi de litera\u021bie \u00een citire pentru clasele I-VIII, care m\u0103soar\u0103 capacitatea de \u00een\u021belegere a textului citit, mai specific de localizare a unor informa\u021bii \u00een text, de st\u0103p\u00e2nire a sensului unor cuvinte sau expresii din text, precum \u0219i de realizare a unor conexiuni \u00eentre ideile expuse.<\/p>

La momentul actual instrumentul se afl\u0103 \u00een stadiul de analiz\u0103 \u0219i calibrare, ca urmare a pilot\u0103rii. Instrumentul final este estimat s\u0103 fie gata \u00een ianuarie \u0219i va fi deschis pe platforma Brio pentru orice \u0219coal\u0103 din Rom\u00e2nia. Pentru evaluarea programului nostru, acesta este folosit la \u00eenceputul \u0219i finalul fiec\u0103rui an \u0219colar \u00een vederea evalu\u0103rii progresului elevilor.<\/p>

Alte planuri: anul acesta \u0219colar ne-am propus s\u0103 verific\u0103m \u0219i s\u0103 cuantific\u0103m progresul \u00een ceea ce prive\u0219te abilit\u0103\u021bile socio-emo\u021bionale \u0219i competen\u021bele de litera\u021bie, folosind instrumentele pe care le-am descris. \u00cen paralel, facem eforturi pentru digitalizarea \u0219i automatizarea continu\u0103 a acestor procese, arie \u00een care expertiza comunit\u0103\u021bii din jurul UiPath Foundation ne este de extrem de mult ajutor. Un alt demers important este preg\u0103tirea unui studiu cvasiexperimental cu grup de control, pe care sper\u0103m s\u0103 \u00eel demar\u0103m anul urm\u0103tor. \u00centre timp, continu\u0103m \u0219i evaluarea punctual\u0103 sau recurent\u0103 a altor rezultate pe care ni le-am propus \u00een cadrul Teoriei Schimb\u0103rii, precum evaluarea mediului de \u00eenv\u0103\u021bare \u0219i a rela\u021biei profesor-elev, monitorizarea fenomenului de absenteism \u0219i abandon \u0219colar, evaluarea dezvolt\u0103rii de competen\u021be la profesori \u0219i monitorizarea implic\u0103rii \u0219i a impactului alumnilor \u00een educa\u021bie.<\/p>

Aboneaz\u0103-te\u00a0la newsletterul nostru\u00a0aici<\/strong><\/a>\u00a0<\/strong>pentru a afla ce mai facem \u00een Teach for Romania.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t<\/div>\n\t\t","protected":false},"excerpt":{"rendered":"

Cu o experien\u021b\u0103 profesional\u0103 \u00een analiza de date, strategie \u0219i management de proiect, Agnes este specialistul nostru pe m\u0103surarea impactului \u0219i zilele acestea ne-a povestit care este rolul departamentului de Impact din organiza\u021bie \u0219i c\u00e2t de ancorat\u0103 este activitatea ei \u00een Teoria Problemei \u0219i Teoria Schimb\u0103rii, un instrument folosit de organiza\u021biile din re\u021beaua Teach for […]<\/p>\n","protected":false},"author":2,"featured_media":8824,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"footnotes":""},"categories":[21],"tags":[1296,1297,982,1196],"class_list":["post-4792","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-implicare-in-educatie","tag-abilitati-socio-emotionale","tag-agnes-tolescu","tag-teach-for-romania","tag-uipath-foundation"],"acf":[],"_links":{"self":[{"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/posts\/4792","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/comments?post=4792"}],"version-history":[{"count":6,"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/posts\/4792\/revisions"}],"predecessor-version":[{"id":10868,"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/posts\/4792\/revisions\/10868"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/media\/8824"}],"wp:attachment":[{"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/media?parent=4792"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/categories?post=4792"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/teachforromania.org\/en\/wp-json\/wp\/v2\/tags?post=4792"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}