Romania Sociala logo
Menu

Este nevoie de revederea și îmbunătățirea procedurii de evaluarea a cercetării sociologice?

autor:   5 May 2021  

Am în față procedura Ministerului educației și cercetării de evaluare a cercetătorilor științifici români. Evident, evaluarea cercetătorilor individuali implică și o viziune a ce ar trebui să fie sociologia românească.

Realizez că este momentul să reflectăm puțin pe ”procedura” evaluării ca act administrativ.   

Trei principii ale dinamicii oricărei proceduri:

  1. Nu există proceduri perfecte. Orice procedură are puncte tari, dar și puncte slabe.
  2. Nicio procedură nu este definitivă. Ea are viața ei. La un moment dat, inevitabil, este înlocuită cu o alta.
  3. Noua procedură încearcă să soluționeze problemele cu care se confruntă procedura anterioară. Se acumulează critici și insatisfacție cu punctele slabe ale procedurii practicate și se caută o nouă procedură care să rezolv aceste probleme.  

O procedură nu este doar un instrument de evaluare, ci ea orientează întreaga activitate de cercetare. Deci ATENȚIE la cum procedura actuală de evaluare orientează activitatea cercetătorilor. 

Sociologia este o știință a ”universalului”, adică a oricărei vieți sociale, de oriunde și de oricând. Dar sociologia ”universalului” este cam 10% din producția sa. Gusti a formulat un adevăr universal: sociologia este știința națiunii, a ”locului comunității” în care sociologul trăiește. 90% din sociologia românească este o știință a societății românești. Dacă vrem să înțelegem sociologia românească, trebuie să vedem cum răspunde ea la ce are nevoie societatea românească. 

Procedura de evaluare înainte de 2008. Comisia se întrunea și discuta dosarele. Se folosea un set de criterii minime, destul de laxe: conferențiar o carte, profesor două cărți; se lua în considerare și studiile publicate în reviste și volume colective, fără a se preciza un număr minim de publicații. Dincolo de un minim de publicații, decisivă era evaluarea colegială calitativă. Țin minte că au fost respingeri sau amânări, chiar dacă criteriile cantitative minime erau îndeplinite, luându-se în considerare evaluări calitative. Amânarea era cea mai frecventă procedură: se dădea un semnal că propunerile cantitative sunt insuficiente. 

Procedura de atunci avea probleme: ponderea prea mare a evaluării subiective. Dar avea și avantaje: ponderea importantă a evaluării calitative, bazată pe cunoașterea activității candidaților. 

În 1990 am fost invitat la Comisia americană de evaluare în domeniul sociologie. Membrii comisiei lucrau ”cu normă întreagă” doar pentru evaluare, pentru o perioadă de 2 ani, dacă țin minte. Am fost impresionat. Într-o zi se discutau doar câteva lucrări. Evaluarea calitativă primea o atenție deosebită. Nu știu dacă acest sistem de atunci funcționează și în prezent. Oricum, într-o țară ca România, o asemenea procedură nu putea fi adoptată. 

În timp a devenit tot mai evident că procedura Ministerului de evaluare trebuia schimbată. 

Procedura de evaluare adoptată după 2008. Au trecut deci 22 de ani. S-a acumulat multă experiență. Este normal să formulăm concluzii și să învățăm din experiența acumulată.  

Noua concepție a evaluării. 

Se adoptă o listă de criterii minime. Fiecare criteriu are un punctaj. 

Din lista de 23 crierii, este obligatoriu îndeplinirea a cinci criterii:

  1. Publicarea unor articole în reviste cotate ISI. În sociologie, doar o revistă română este cotată ISI.  
  2. Publicarea unui minim de articole în alte reviste, dar recunoscute.
  3. Publicare unei cărți pentru conferențiar; 2 cărți pentru profesor. 
  4. Un număr minim de citări: profesor – 10, conferențiar – 5.
  5. Obținerea unui punctaj global minim.     

Punctele tari ale sistemului: un număr mare de criterii punctate, pe baza cărora se face un calcul complex. S-a presupus că se elimină subiectivismul. Fără să fim siguri, pare să fi existat și cazuri de promovări care nu au îndeplinit cu rigurozitate criteriile. 

Punctele care au stârnit critice:

* Riscul „dictaturii birocrației”. Ministerul, desigur la propunerea Comisei, adoptă o procedură care nu a fost însă supusă unei discuții publice. Se adaugă și vizibilitatea scăzută a compoziției și a funcționării Comisiei. Vizibilitatea este o condiție a asumării responsabilității.

* O problemă a profilului listei de criterii. Criteriile utilizate sunt adecvate mai mult pentru sistemul universitar, în care publicațiile sunt de regulă individuale. Cadrele didactice universitare se concentrează pe cursurile predate și activitatea lor de cercetare tinde să fie individuală, pe teme speciale. Publicarea de studii în reviste reprezintă forma tipică a finalizării cercetării universitare. O asemenea centrare a produs o ignorare a marilor lucrări de sinteză, bazate de regulă pe mari cercetări sociologice empirice realizate de largi echipe. De fapt ele nu sunt ignorate, ci trate ca valoare la nivelul studiilor individuale centrate pe teme particulare. 

Cercetarea în institutele Academiei se centrează tocmai pe probleme cu un grad ridicat de complexitate ale științei și ale societății românești. Aceste lucrări se finalizează în lucrări de amploare și Rapoarte sociale care sintetizează starea societății românești. Desigur, și studii individuale în reviste. 

Să menționez câteva exemple din activitatea Institutului de Cercetare a Calității Vieții (ICCV). De la începutul activității sale, Institutul a avut ca obiectiv diagnoza dinamicii calității vieții în perioada tranziției (10 evaluări pe eșantioane reprezentative naționale); o serie de lucrări sintetice care explorează profilul politicilor sociale în perioada tranziției; problemele critice ale societății românești în această perioadă – o carte sintetică asupra sărăciei în România, bazată pe un eșantion național reprezentativ, două cărți pe tema condițiilor social-economice ale populației de romi și ele pe eșantioane naționale (primele lucrări în lume de acest gen); studii pe situația copiilor în perioada tranziției; tema economiei sociale; identificarea profilului societății românești în perioada tranziției; teoria și metodologia schimbării sociale proiectată, temă vitală pentru societatea românească aflată într-o perioadă dificilă de ieșire din criza tranziției. Sau Istoria sociologiei românești care a utilizat o  bază ”completă” de publicații românești de sociologie din 1900-2015: 25 000 de titluri. 

* Problema cine face evaluarea rezultatelor cercetării. Comisia nu face în fapt evaluări. Evaluarea a devenit ”contabilicească”. Ea înregistrează îndeplinirea sau nu a criteriilor. Paradoxal, evaluările publicațiilor nu o face deci Comisia, ci redacțiile care publică lucrările. Problema critică a sistemului actual este că redacțiile nu fac publice evaluarea unei lucrări sau alteia, ci doar decizia de a le publica. Evaluarea lucrărilor este înlocuită cu evaluarea globală a revistelor sau editurilor. 

Este curios că în procedura existentă nu sunt incluși și h-Indicatorii fiecărui cercetător, calculați de Agențiile specializate. 

În acest context, cea mai dificilă este problema ISI. S-a considerat că publicarea în reviste ISI este un test sigur al calității studiilor. S-a introdus regula strictă de a nu se promova profesional fără publicații ISI. Evaluarea ISI nu este în realitate destul de clară și stârnește tot mai multe critici. Mulți tineri cercetări, cu contribuții științifice de valoare, cu mare perspectivă științifică, se împiedică de publicațiile ISI. Problema cea mai importantă nu este de calitate a lucrărilor propuse, ci a criteriilor și procedurilor de selecție ISI.

Este deschisă o întrebare: pentru publicare în străinătate, evaluarea calității studiului este singurul criteriu al alegerii ? Sau se utilizează în fapt și un al doilea criteriu: ce se consideră a fi de interes pentru un public internațional ? Dacă sociologia este o știință atât universală, cât și a contextului, atunci studiile de interes pentru un context sau altul, de exemplu de interes pentru societatea românească, este de interes mai scăzut pentru un public internațional. În acest caz, revistele ISI tind să nu selecteze studiile care pot fi de valoare de interes contextual. Implicit se promovează o imagine colectivă negativă: studiile de interes contextual, în cazul nostru de interes pentru societatea românească, sunt de valoare secundară.

Rămâne deci deschisă o întrebare epistemologică: dacă criteriul ISI poate funcționa fără probleme în științele universalului, în științele predominant orientate pe analiza contextelor, acest criteriu trebuie utilizat desigur, dar cu o anumită rezervă. Oricum el nu poate fi utilizat drept criteriu fundamental de excluziune: dacă nu ai un număr de ISI, ești de calitate inferioară. Pot fi asociate cu un punctaj mai mare (actualmente se utilizează chiar înmulțirea cu 2 sau cu 3 valoarea unui studiu publicat în România), dar nu utilizat ca un criteriu obligatoriu de excludere. 

Punerea ca prioritate absolută a cercetării sociologice românești a studiilor publicate în reviste din alte țări (celebrele ISI) produce o distorsionare a vocației sociologiei. Ea este, în expresia paradigmatică a lui Dimitrie Gusti, sociologia națiunii, a comunității în care sociologul trăiește. Și în fapt, cea mai mare parte a sociologiei mondiale are ca obiect societățile în care sociologii trăiesc. Sociologia actuală este o pluralitate de ”sociologii ale națiunilor”. Pe de altă parte, sociologiile sunt o parte importantă a conștiinței de sine a comunităților. Este firesc ca un obiectiv al sociologiei românești este să susțină publicațiile pe teme ale societății românești: cărți, reviste, rapoarte sociale. Temele societății românești pot fi desigur publicat oriunde, în revistele din România, dar și în străinătate. 

* Ignorarea altor produse sociologice importante. Este cazul programului lansat, de la înființarea sa în 1990, de Institutul de Cercetare a Calității Vieții. Rapoartele sociale ale ICCV sunt evaluări sintetice, de 20-50 pagini, ale problemelor sintetice sociale și sociologice. Un exemplu: în 2020, ICCV au elaborat și difuzat 5 Rapoarte sociale cu privire la impactul social al CORONVIRUS. Rapoartele sociale nu figurează în lista de criterii.

Un alt caz. ICCV a lansat un nou tip de revistă on-line, România Socială, care conține articole scurte tip eseu pe problemele științei și societății românești de mare interes public. În acești 5 ani, revista a publicat peste 500 articole, citite de pese 30 000 de ”cititori”. Se readuce astfel în atenția publică o zonă aproape uitată: alături de cărți și studii de tip revistă științifică și articolele-eseu pe marile probleme ale sociologiei și ale societății românești. Experimentul s-a dovedit a fi un succes neașteptat. Articolele publicate aici sunt citite  multe dintre ele de peste o mie de cititori, unele chiar de peste zece mii. Deci, de ce să nu încurajăm și articolele-eseu ca produse sociologice de valoare ?

Sunt și alte tipuri de produse sociologice care ar trebui promovate prin valorizare, punctare deci. ICCV și-a stabilita ca obiectiv nu numai crearea de lucrări de sinteză, bazate pe solide date empirice, dar, complementar, și de a crea și pune la dispoziția celorlalți cercetători a unor importante baze de date. Citez doar câteva: sistemul de indicatori ai României în perioada tranziției, baza de date a dinamicii calității vieții, baza de indicatori referitori la starea de sărăcie, indicatori referitoare la dinamica venitului, a cheltuielilor sociale publice, a  stării social-economice a populației de romi. Nici asemenea ”produse” științifice nu sunt luate în considerare în Lista de criterii ale Ministerului.   

Să nu ignorăm, și deci să punctăm, și alte produse ale unui institut al Academiei: alături de bazele de date produse, ICCV are o politică specială de difuzare a producției sociologice. În condițiile dificultăților în creștere a bibliotecilor clasice, ICCV a lansat în 2016 Biblioteca Virtuală de Sociologie (BVS). Un exemplu de mare succes. După doar câțiva ani, în 2018, BVS conținea deja 821 cărți și 5 584 vizitatori site, 60 085 materiale deschise. 

Participările la realizarea acestor programe reprezintă și ele contribuții importante la dezvoltarea sociologiei românești. Dacă vrem să facem o evaluare corectă a sociologiei românești, este urgent nevoie de o lărgire a ariei producției sociologice. Altfel, ignorăm efortul a zecilor de sociologi care investesc un efort prețios alături de studii în reviste și cărți. 

Și cel mai important, noul sistem de criterii de evaluare, pe care Ministerul îl programează, trebuie să fie produsul unui proces democratic al comunității științifice.   



Facebook

DEZBATERE DE CARTE – Cătălin ZAMFIR, România în criză, București, Editura Academiei Române, București, 2023.

DEZBATERE DE CARTE Cătălin ZAMFIR, România în criză, București, Editura Academiei Române, București, 2023. Universitatea ,,Alexandru Ioan Cuza” din Iași Facultatea de Filosofie și Științe Social-Politice Departamentul de Sociologie, Asistență Socială și Resurse Umane 31 octombrie 2024 Dezbatere România în crizăDownload

Detectarea egoismului propriu și a egoismului altora

Este posibil ca, în anumite situații, comportamentul egoisit să fie bun și în alte situații să fie rău. Abraham Maslow Ne-am obișnuit să catalogăm egoismul ca fiind o caracteristică de personalitate negativă iar opusul său, altruismul, ca o virtute. În realitate, lucrurile nu stau chiar așa. În acord cu rezultatele cercetărilor moderne din ...

Nostalgia, o emoție dulce-amăruie

Nostalgia consolidează relațiile sociale. Tim Wildschut Ne este dor de cineva drag ce nu mai este printre noi, ne este dor de părinții care s-au stins, de prietenii care nu mai sunt, de iubita sau iubitul care ne-a părăsit, sau de anii tinereții, de un eveniment fericit din trecut. Psihologii numesc o ...

Interviu cu Tudorel-Constantin Rusu, autorul volumului „Ethos, Pathos și Logos. Resurse ale oratoriei clasice în discursul pastoral”

Centrul de Orientare, Asociere și Consiliere în Cariera de Cercetător (COACH-USV) din cadrul Universității „Ștefan cel Mare” din Suceava este unul din cele opt centre de orientare în cariera de cercetător înființate la nivelul celor opt Regiuni de Dezvoltare ale României și susținute prin programul PNRR. Acesta deservește Regiunea de ...

Alegeri haotice : noiembrie 2024. Nevroze și anomalii colective

Între normalitate și patologie  Și dacă am încerca să brodăm o serie de lecturi posibile despre turul întâi din campania electorală/noiembrie 2024 ? Ne-am gândit la o lectură comunicațională, în care să interpelăm interacțiuni și iritante în comunicare, în contextul de campanie electorală.  Și începem cu contextul. El a fost taxat de analiști ...

PE MARGINEA UNUI COMENTARIU DIN 1973 DESPRE „SOCIOLOGUL DE ÎNTREPRINDERE”. O DISCUȚIE CU ADRIAN DINU RACHIERU.

D-le Rachieru, probabil că puțini dintre cei care vă urmăresc preocupările din prezent știu că în urmă cu 50 de ani erați „sociolog de întreprindere”. Cum v-ați simțit în această postură, ca primă experiență profesională după terminarea studiilor? - Da, trecut-au cinci decenii și mai bine! Da fapt, din 1971, când, ...

Discuție cu un sociolog al științei din România anilor ` 80, profesorul american  Vasile Pirău[1]

1.       Dragă Vasile Pirău, ce făceai în 1987 ? Cum evolua pe atunci cariera ta ? Era apropierea unui filosof (prin formație) de sociologie, una de conjunctură sau avea radăcini intelectuale mai adânci ?  Când mă gândesc la anii dinainte de 1990 (anul când am plecat la studii in SUA), mi ...

Trump, campion în comunicare

Trump. Scurtă lectură psihologică: O profeție auto-împlinită  Donald Trump este o celebritate. El stârnește senzație și când se însoară și când divorțează. El stârnește atenție și când face o mare afacere, și când face un mare faliment. S-a născut într-o familie bogată; tatăl său a fost  milionar, Dar el fiul a ...