Études de cas sur l'évaluation multicritère

Les résultats

Analyse et interprétation des résultats

Cette étape de travail consiste à prendre connaissance des sorties du modèle et à analyser les résultats obtenus pour évaluer en quelles mesures les systèmes de culture étudiés permettent de répondre globalement aux objectifs du projet d‘évaluation. Plusieurs sorties graphiques peuvent alors être utilisées pour analyser les résultats obtenus (histogrammes, graphiques à deux dimensions, radars, graphiques synoptiques...).

Le premier niveau de l'analyse peut consister à observer dans un premier temps le classement des systèmes de culture selon leur note de contribution au développement durable. Comme indiqué précédemment, les résultats ont été simulés en mobilisant deux jeux de pondérations :

  • le jeu de pondération proposé par défaut (pondérations équilibrées)

  • le jeu de pondération proposé par un conseiller agricole impliqué dans le projet

Interprétation :

A la première lecture de ces deux graphiques, on peut constater que la modification des poids pour intégrer les préférences d'un conseiller dans le paramétrage impacte le résultat et le classement des systèmes de culture. Cette première observation illustre l'influence des préférences d'un acteur ou d'un groupe d'acteurs sur les performances d'un système de production.

Néanmoins quel que soit le jeu de pondérations retenu dans cette étude, les systèmes de culture proches des principes de l'agriculture de conservation (placés à droite des deux graphiques : SD cv 2 et SD cv 3) obtiennent de bons résultats. Inversement, les systèmes de culture plus conventionnels reposant sur un labour fréquent et/ou une plus faible optimisation des couverts (Lcv,TCS1, TCS2, SD) obtiennent de moins bons résultats.

Si les systèmes de culture évalués dans ce cas d'étude ne sont pas suffisamment nombreux pour porter un jugement général et définitif sur les performances des systèmes en agriculture de conservation, ces premiers résultats suggèrent néanmoins :

  • que l'application des principes de l'agriculture de conservation semblent être une voie prometteuse pour améliorer la contribution au développement des systèmes de culture,

  • que les performances globales de ces systèmes sont améliorées lorsque les systèmes de production combinent simultanément les trois principes de l'agriculture de conservation (travail du sol minimum, couverture permanente du sol et diversité des couverts).

  • que les systèmes de culture proches de l'agriculture de conservation maintiennent un bon niveau de performances même en faisant varier les préférences des acteurs dans le paramétrage (en modifiant les poids). Ces systèmes semblent par conséquent assez robustes aux préférences des acteurs.

Il est ensuite recommander d'analyser de manière un peu plus fine les résultats obtenus par les systèmes en analysant leurs performances sur les trois dimensions de la durabilité. La figure ci-contre montre les résultats obtenus à partir des pondérations proposées par défaut. On peut remarquer ici que les systèmes de culture plus conventionnels (ayant recours à une fréquence de labour plus élevée et/ou valorisant peu la complémentarité des couverts) obtiennent de plus mauvais résultats sur la dimension environnementale (cf. Lcv et TCS1)

Il est ensuite fortement conseillé d'analyser les performances des systèmes de culture un par un en effectuant un diagnostic plus fin des performances obtenues en ayant recours à des graphiques "synoptiques" (cf. figure ci-après). Ce type de graphique permet alors :

  • de comprendre comment une note finale d'évaluation est obtenue en remontant l'arbre du critère racine aux feuilles de l'arbre en passant par le résultat des critères agrégés.

  • de repérer quelles sont les forces et les faiblesses d'un système de culture. Ce type de graphique permet alors d'envisager des pistes d'amélioration à partir des faiblesses identifiées.

  • d'identifier d'éventuels effets antagonistes (exemple : une mauvaise maîtrise des adventices dans la dimension économique se traduit par une bonne abondance floristique dans la dimension environnementale)

Ensuite, il est souvent aussi très utile de comparer les résultats obtenus par les systèmes de culture en considérant quelques critères basiques emblématiques en lien avec l'objectif de départ. Ici, l'analyse des poids affectés par les porteurs d'enjeux est susceptible d'aider l'utilisateur au choix des critères basiques à présenter. Dans cette étude, nous pourrions présenter ici par exemple, les résultats du critère Rentabilité et Maîtrise du statut organique.

Fondamental

MASC offre la possibilité d'agréger « pas à pas » tous les critères d'évaluation jusqu'au critère synthétique de la Contribution au développement durable. Ce résultat permet de comparer et de classer les systèmes de culture entre eux. Cependant, la comparaison des systèmes de culture et l'interprétation des résultats ne doit pas se réduire à ce seul critère d'évaluation. MASC peut être utilisé avec profit comme un « tableau de bord », en analysant les performances des systèmes de culture sur l'ensemble des critères (basiques et agrégés) à différents niveaux de l'arbre.

Outils
Etapes+-