Commission européenne pour l'efficacité de la justice
Analyse et traitement des données statistiques
Le rapport d'évaluation des systèmes judiciaires des 47 pays membres du Conseil de l'Europe repose sur une grille d'évaluation conçue de manière à assurer le maximum d'homogénéité et comparabilité entre les données au niveau européen. 170 questions de la grille: quantitatives, qualitatives, questions matrices, questions ouvertes – constituent une base de données très riche en information et donnant lieu à une multitude d'analyses.
La collecte des données s'est effectué à travers une grille électronique développée par la CEPEJ. De coté des pays Membres, un correspondant national chargé de la coordination des réponses est resté l'interlocuteur principal durant tout le processus d'évaluation. De coté de la CEPEJ un expert scientifique a été nommé afin de prendre en charge le contrôle de la cohérence des données et l'analyse et traitement statistique. Il a assuré les contacts avec les correspondants nationaux, suivi et mise à jour continue de la base de donnée. La grande majorité des correspondants nationaux ont été sollicité d'apporter les informations supplémentaires ou éclaircissements par rapport aux réponses fournies. Toute modification de la réponse a été approuvée par le correspondant national et enregistré par l'expert.
Avant d'entreprendre une analyse statistique, un grand travail de contrôle des données a été fait. Cette étape indispensable et faisant partie de chaque étude par enquête a permit d'éliminer toutes sortes d'erreurs: matériels, erreurs de frappe, réponses manquantes par omission, les situations non applicables, les fausses interprétations des questions. Chaque réponse dans le questionnaire électronique et pour chaque pays a était vérifiée. De plus, le travail de comparaison avec les réponses du cycle d'évaluation 2004-2006 a été fait. La comparaison a servi d'identifier des situations de changement ou modification de certaines procédures, lois, structures et de s'assurer de leur exactitude. Les explications supplémentaires ont pu être demandées afin de mettre plus en évidence ces changements.
A ce stade du processus d'évaluation le volet consacré à l'évolution dans le temps n'a pas pu être exploité de manière exhaustive. La comparaison avec les données 2004-2006 a permit de signaler des variations mais en principe a servi d'assurer la qualité de données en vue de créer des séries temporelles homogènes et qui puissent faire ultérieurement l'objet d'analyses longitudinales. Cette comparaison étant très importante puisque révélant les situations, variations ou modifications que le correspondant national ne pouvait pas isoler ou saisir. A travers des multiples échanges avec les correspondants nationaux des problèmes méthodologiques ont pu être résolus et les grandes variations concernant les données chiffrées ont pu être expliquées.
Le travail de vérification de la cohérence de données, certes nécessaire mais retardant l'analyse statistique et production des tableaux et graphiques. La stabilité de données est définitivement atteint qu'en juillet ce qui laisse peu de temps pour effectuer les analyses plus complexes. Ce troisième rapport présente les systèmes judiciaires prioritairement à travers des multiples taux, ratios et tableaux et graphiques regroupant les réponses. En raison du caractère des données fortement individualisées une approche plutôt descriptive a été adopté. Quelques tentatives d'analyses factorielles ont été fait donnant lieu à la création des clusters (groupes de pays) montrant des majeures similitudes ou différences. Des nouveaux indicateurs tels que « disposition time » ont été conçus et intégrées dans le rapport.
Au final, grâce aux efforts conjoints de tous les correspondants nationaux et équipe d'experts au sein de la CEPEJ toutes les questions ont été exploitées et présentées.
Marta Zimolag
Statisticienne