Sunteți pe pagina 1din 3

valuer les comptences des adultes : un domaine en construction

Fabrice Murat, division Emploi, Insee

Lenqute Information et Vie quotidienne (IVQ) porte sur un domaine encore assez mal connu, lvaluation des comptences dadultes dans le cadre dune enqute domicile. Les enqutes statistiques menes par lInsee sur lillettrisme avaient jusqu rcemment une base dclarative : la personne enqute indiquait si elle prouvait des difficults lire des journaux, remplir un chque, etc. Lusage de tests pour vrifier ces dclarations subjectives est vite apparu ncessaire. Dans le cas de lenqute IVQ, ces tests ont t construits par des quipes de recherche spcialises, en tenant compte de la spcificit du public et des conditions denqute : pour obtenir limplication de la personne interroge, les supports des exercices sont varis, peu scolaires, mais au contraire plutt proches des documents de la vie quotidienne (un programme TV, un CD de musique) ; le niveau de difficult des exercices est adapt au niveau de comptences de la personne, grce une procdure dorientation aprs les premires questions (graphique 1). Ainsi, on ne dcourage pas une personne en difficult par un exercice trop complexe ; on vite aussi de faire douter les plus comptents de lintrt du test, en leur posant des questions trop simples. Graphique 1 : Ladaptation des preuves en 2004
Exercices complexes

Pas de difficult dans les domaines fondamentaux de lcrit

Bonne russite

Russite

Exercice dorientation

Russite moyenne

Exercice intermdiaire

Russite

chec chec

Exercices simples

chec

En difficult dans les domaines fondamentaux de lcrit

Lecture : un exercice dorientation donne une premire ide des comptences de la personne face lcrit. La suite de lpreuve dpend de ses rsultats : si la personne russit trs bien ce premier exercice, elle passera des exercices complexes. Si elle est dj en en forte difficult, elle passera des exercices plus simples. En cas de performances moyennes, un exercice intermdiaire prcise le diagnostic pour dcider si les exercices simples ou les exercices complexes sont prfrables.

Cependant, lexistence de cette procdure dorientation rend plus difficile la comparaison entre les personnes. Il est trompeur dopposer deux catgories : ceux qui passent les exercices simples et ceux qui passent les exercices complexes, alors que les deux groupes se situent dans la continuit lun de lautre et rassemblent

chacun des personnes dun niveau trs divers. De plus, cette procdure accrot la sensibilit des rsultats aux erreurs de mesure : on risque dorienter une personne sans difficult vers les exercices simples, parce que, peu motive, elle aura fait trop de fautes dtourderie sur les premires questions ; inversement les exercices complexes peuvent tre proposs une personne ne matrisant pas tout fait les domaines fondamentaux de lcrit mais qui aura eu de la chance lexercice dorientation. Compte tenu du temps limit de lenqute, il est difficile de corriger ces incohrences. Ce problme se pose de fait essentiellement pour les personnes autour des seuils minimaux de comptences retenus : la russite ou lchec une ou deux questions peut les faire basculer vers les exercices simples ou les exercices complexes. Aussi, un exercice intermdiaire a t construit en 2004 pour les personnes nobtenant que des rsultats moyens lexercice dorientation. Il permet de dterminer plus prcisment quelle orientation est prfrable. La comparaison entre lenqute test IVQ mene en 2002 et celle de 2004 illustre les difficults de ce type dopration. Dans lenqute mthodologique de 2002, 12 % des personnes ont t identifies comme en difficult contre 20 % dans celle de 2004, avec le mme critre. Cet cart ne renvoie bien sr pas une volution sur une priode aussi courte, pour des populations trs semblables (les 18-65 ans de 2002 sont proches des 18-65 ans de 2004). Premire diffrence, les deux enqutes se distinguent par leur degr de prcision : celle de 2002 ne comportait que 2 000 enquts (contre 10 000 en 2004) et ne concernait que 10 rgions. Cependant, la principale diffrence tient la cration, en 2004, de lexercice intermdiaire pour amliorer un dfaut de prcision repr dans lenqute prcdente. En effet, lors de cette premire enqute, lorientation vers les preuves complexes aprs les questions dorientation tait parfois contestable : des personnes peinaient normment sur ces exercices (graphique 2). La possibilit avait t donne aux enquteurs de rorienter les personnes vers les exercices simples si les difficults taient trop fortes. Ils ont utilis cette possibilit pour 3 % des personnes et dans deux tiers des cas, les rsultats sur les exercices simples indiquaient effectivement des difficults, gnralement peu profondes mais non nulles, dans les domaines fondamentaux de lcrit. Cependant, une incertitude subsistait pour certaines personnes en assez grande difficult sur les exercices complexes mais que les enquteurs navaient pas jug bon de rorienter. Ces personnes avaient donc t isoles, de faon un peu arbitraire (moins dun tiers de bonnes rponses), dans une catgorie intermdiaire, qui comprenait aussi les personnes orientes vers les exercices simples et les ayant parfaitement russis. Ce groupe reprsentait 5 % de la population, dont le niveau de comptence apparaissait beaucoup trop mal mesur. Pour attnuer cette imprcision, le module intermdiaire a t propos une proportion importante des personnes qui en 2002 auraient pass les exercices complexes mais nont obtenu que des rsultats moyens lexercice dorientation (un cinquime des enquts). La moiti dentre elles ont parfaitement russi lexercice intermdiaire et passent ensuite les exercices complexes, tandis que lautre moiti apparaissent en difficult dans les domaines fondamentaux de lcrit. On repre donc une proportion un peu plus forte de personnes en difficult quen 2002. Le gain de prcision concerne surtout les personnes en difficult partielle. En effet, les personnes passant par les exercices simples aprs le module intermdiaire prsentent rarement des lacunes trs fortes : 18 % dentre elles sont en grave difficult, contre 51 % des personnes orientes directement vers les exercices simples. Aussi la diffrence, avec lenqute de 2002 est-elle surtout nette pour les personnes prouvant les difficults les moins profondes. Ainsi, daprs lenqute IVQ 2004, 7 % des personnes sont en grave difficult, 5 % en difficult assez forte, 7 % en difficult partielle. Selon lenqute IVQ 2002 (les chiffres sont prendre avec prcaution, car portant sur des effectifs peu levs et un nombre restreint de rgions), 7 % sont en grave difficult, 3 % en difficult assez forte, 2 % en difficult partielle. Lenqute de 2004 est donc convergente avec celle de 2002 pour lidentification des situations les plus proccupantes, mais elle comble aussi limprcision pour les personnes en difficult partielle (celles qui commettent trois ou quatre erreurs sur une dizaine de questions au sujet dun texte simple). Enfin, si ces estimations du nombre de personnes en difficult sont sensiblement suprieures aux chiffres publis dans les annes quatre-vingt-dix partir des enqutes dclaratives, elles sont par contre, malgr la

diffrence de protocole, assez proches des rsultats observs lors des journes dappel de prparation la dfense (JAPD) : la dernire Note dvaluation du ministre de lducation nationale indique pour les jeunes Franais de 17 ans, 4 % de jeunes en difficult svre auxquels sajoutent 7 % ayant de trs faibles capacits en lecture. Sur le champ, assez proche, des personnes scolarises en France, ges de 18 25 ans, lenqute IVQ 2004 donne 5 % de personnes en difficult grave ou assez forte et 7 % en difficult partielle.

Graphique 2 : Ladaptation des preuves en 2002


Exercices complexes

Pas de difficult dans les domaines fondamentaux de lcrit

Russite bonne ou moyenne

chec

Exercice dorientation

Rorientation

Catgorie intermdiaire

chec

Russite

Exercices simples

chec

En difficult dans les domaines fondamentaux de lcrit

Lecture : la diffrence dIVQ 2004, dans IVQ 2002, il nexistait pas de module intermdiaire : les personnes obtenant des rsultats moyens lexercice dorientation taient orientes vers les exercices complexes. Cependant, la possibilit avait t laisse lenquteur de rorienter les personnes si elles prouvaient trop de difficult sur ces exercices. Dans ce cas, la passation des exercices simples permettait de tester lexistence de difficult dans les domaines fondamentaux. Pour deux tiers des rorientations, les performances taient effectivement assez faibles et les personnes taient classes comme en difficult. Sinon, elles entraient dans une catgorie intermdiaire, comme les personnes orientes directement vers les exercices simples et les russissant. On y trouvait galement les personnes ayant obtenu des rsultats faibles sur les exercices complexes.

S-ar putea să vă placă și