Des outils pour une évaluation de la qualité externe de la connaissance

A la différence de l'évaluation de la qualité interne de la connaissance qui traite de l'incertitude associée à la production de la connaissance, l'évaluation de la qualité externe de la connaissance porte sur l'incertitude relative à l'interprétation et à l'utilisation de la connaissance. Cela signifie qu'une diversité des justifications et de tests d'adéquation peut être invoquée pour répondre aux demandes de prise en compte de l'incertitude pour la gestion des risques complexes. Cette démarche s'appuie des critères scientifiques traditionnels de qualité tels que la concordance, la fiabilité, la capacité à expliquer des phénomènes observés, et l'intérêt pour orienter la recherche. Mais elles incluent également des considérations culturelles ou sociales.
Aussi, les jugements concernant la pertinence et l'adéquation des demandes de connaissance ne concernent pas seulement la qualité scientifique de la connaissance, de l'information ou de l'opinion, évalués par des seuls critères scientifiques, mais également les rôles joués par (ou sollicités pour) différentes types de connaissance dans des contextes divers, culturels, sociaux et politiques. Différents types d'outils peuvent être mobilisés pour développer une qualité externe de la connaissance.
 

L’évaluation de la connaissance dans le processus de décision

Le cadre de l’assurance de la qualité (CAQ) fournit des éléments sur la qualité, la légitimité et la fiabilité des différentes dimensions des processus décisionnels évoquées plus haut. Ce cadre est basé sur le travail réalisé par Funtowicz and Ravetz (1990) sur le système NUSAP. Il suit le même principe que la catégorie Pedigree présentée dans le thème NUSAP et élargit ce dernier de manière à permettre une évaluation de la qualité, non seulement de l’information quantitative mais aussi celle d’autres types et sources d’information et de l’incertitude associée aux autres éléments du processus décisionnel.
Exemple

Exemple d’outil d’aide pour l’assurance qualité : le QAAT.

 

La question de la pertinence des indicateurs

La qualité interne et externe amène à l’identification du besoin de système de catalogue qui organise et rend disponible une grande diversité d’information en rapport avec, d’un côté, des sources variées et de l’autre, des contextes d’usage. Nous présentons ici, un exemple de ce besoin, le système de méta information en ligne développé par l’équipe Kerbabel™ du C3ED en France, appelé la Foire “Kerbabel™ aux Indicateurs (FKI). Le FKI est conçu, avec cinq sections, comme un ‘forum’ permettant aux utilisateurs de construire des indicateurs candidats pour une décision ou un problème de gouvernance, et un dialogue permanent entre les producteurs et les utilisateurs de l’information.
Exemple

Exemple d’outil développé par le C3ED : La Foire Kerbabel™ aux Indicateurs.

 
Définition

Le pédigrée est exprimé au moyen d'un ensemble de critères pour caractériser le processus de production de l’information scientifique. L'évaluation du pédigrée implique le jugement qualitatif de scientifiques et d’experts.