Notre méthode

Les guides de Parauling expliquent ce que dit la recherche scientifique sur la façon dont les enfants apprennent des mots. Pour l'instant, ils sont en catalan, en espagnol et en anglais. Cette page explique comment nous les écrivons : ce que nous lisons, comment nous décidons du degré de certitude de chaque point et comment nous vérifions que chaque phrase dit la même chose que l'article dont elle vient.

En bref

• Nous lisons d'abord les synthèses de recherche, puis les études avec des enfants. Toujours le texte complet, pas seulement le résumé.
• Chaque affirmation vient avec deux réponses : à quel point elle est établie en général, et combien d'études il y a avec des enfants qui apprennent une langue.
• Chaque phrase qui affirme quelque chose est vérifiée à nouveau, avec le texte d'origine, par un agent d'intelligence artificielle qui ne l'a pas écrite. À la fin de chaque guide, vous trouverez les sources, avec un lien vers chaque article.

Ce que nous lisons

Une étude est une expérience : par exemple, un groupe d'enfants apprend des mots d'une façon, un autre groupe les apprend d'une autre, et quelques jours plus tard les chercheurs vérifient combien chaque groupe en retient. Une synthèse est un article qui rassemble toutes les études faites sur une même question et compare leurs résultats. Une seule étude peut donner un résultat par hasard ; une synthèse dit ce qui se passe quand la question a été examinée de nombreuses fois.

C'est pour ça que nous commençons par les synthèses et par les travaux que tout le monde cite dans le domaine, et que nous dessinons une carte : ce qui est considéré comme établi, ce qui est débattu et ce qui n'a pas été étudié. C'est seulement ensuite que nous passons aux études avec des enfants, et nous les lisons dans le cadre de cette carte. L'ordre compte : si on commence par la poignée d'études sur les enfants, « peu étudié avec des enfants » peut se lire comme « personne ne sait si ça marche », et ce n'est pas la même chose.

Nous regardons aussi deux autres choses : ce que recommandent les organismes d'éducation (et d'où ils le tirent), et les affirmations qui circulent en ligne sur le sujet, que nous remontons jusqu'à la source qu'elles citent. C'est de là que vient la section « Ce qu'on dit et qui n'est pas tout à fait juste » de nos guides.

Comment nous indiquons le degré de certitude de chaque point

Chaque affirmation répond à deux questions, et les deux sont nécessaires.

À quel point est-ce établi, en général ? Toutes études confondues, à tous les âges. Dans les guides, l'encadré sous chaque titre vous le dit :

Et avec des enfants qui apprennent une langue ? Beaucoup d'études, quelques-unes, peu ou aucune, et si elles disent la même chose que la recherche en général. Quand il y en a peu, nous disons combien : « trois études, de deux équipes ». Quand il n'y a qu'une étude, nous disons combien d'enfants y ont participé et quel âge ils avaient.

Les deux sont nécessaires parce que souvent elles ne coïncident pas. Une chose peut être bien établie chez les adultes et avoir très peu d'études avec des enfants ; ça ne veut pas dire qu'elle ne marche pas avec les enfants, ça veut dire qu'on l'a à peine étudiée avec eux. Et quand les études avec des enfants disent autre chose que celles avec des adultes, nous le disons aussi.

Nous n'écrivons jamais « scientifiquement prouvé ». Quand une chose n'est pas connue, nous le disons, et nous disons sur quoi porte le doute : si ça marche, à quel point, ou pour qui.

Comment nous choisissons nos sources

• Deux synthèses qui partagent des auteurs, ou une bonne partie de leurs études, comptent pour une. Deux confirmations de la même équipe ne sont pas deux confirmations indépendantes.
• Nous ne choisissons pas les revues selon leur facteur d'impact (un chiffre qui compte combien de fois leurs articles sont cités) : choisir selon ce chiffre laisserait de côté des revues de référence et ferait passer des revues douteuses. Nous vérifions si la revue figure sur les listes qui évaluent la qualité des revues (comme les listes nationales de la Finlande, de la Norvège et du Danemark) et qui la publie.
• Certaines revues publient presque tout, après une relecture rapide et de qualité inégale. Nous ne les écartons pas, mais un article de l'une de ces revues n'appuie jamais seul une affirmation, et si c'est la seule source, la phrase le dit.
• Nous vérifions qu'aucun article que nous citons n'a été retiré ou corrigé d'une façon qui change ses résultats.

Comment nous vérifions chaque phrase

• Chaque synthèse et chaque étude avec des enfants est lue séparément par deux agents d'intelligence artificielle (des programmes qui font chacun une tâche précise), sans que l'un voie ce qu'a fait l'autre, et ils en notent les données avec une citation mot pour mot et le numéro de page. Là où ils ne sont pas d'accord, un troisième retourne à l'article et tranche.
• Chaque phrase qui affirme quelque chose est reliée à sa source, avec la citation mot pour mot de l'article et le numéro de page.
• Un autre agent, qui n'a pas écrit la phrase, la vérifie avec le texte de l'article. Il ne voit pas quel degré de certitude nous lui avons donné : seulement la phrase et l'article, et sa tâche est de chercher des erreurs. S'il trouve que la phrase en dit plus que l'article, ou un chiffre qui n'y est pas, nous retournons à l'article, nous réécrivons la phrase et nous la vérifions à nouveau.
• Un agent différent, qui n'a rien vu de notre travail, lit tout le texte et dit ce qu'il en comprend : s'il en ressort en pensant qu'une chose est plus établie qu'elle ne l'est, ou moins, le texte est réécrit, même si chaque phrase est vraie.

Les guides qui rassemblent des recommandations

Certains guides, comme celui sur le temps d'écran, ne résument pas des études : ils rassemblent ce que recommandent les organismes de pédiatrie et de santé. Pour ces guides, la méthode est différente.

• Nous lisons les documents originaux de chaque organisme, en entier chaque fois que c'est possible, et non ce qu'en disent les médias.
• Nous choisissons des organismes publics et des sociétés savantes, et de chacun la recommandation en vigueur. Si un même organisme a des documents qui ne disent pas la même chose, nous le disons.
• Nous ne disons pas le degré de certitude de chaque recommandation, parce que ce n'est pas notre affirmation : nous disons qui le dit, en quels termes et quand. Si l'organisme dit quelles données l'appuient, nous le disons aussi.
• Chaque citation est vérifiée par un programme avec le document original, mot pour mot, et un autre agent, qui n'a pas écrit le texte, vérifie chaque paragraphe avec les citations.
• En tête de chaque guide figure la date à laquelle nous avons consulté les recommandations, et nous les revoyons tous les six mois, parce que les organismes les changent.

Qui le fait

Je m'appelle Marina Mele. Je décide quels sujets nous examinons, quelles questions nous posons et ce qui entre dans chaque guide, et je lis chaque page ou chaque guide avant sa publication. Je viens de la recherche, dans un autre domaine : j'ai un doctorat en physique quantique.

Nous faisons ce travail avec une méthode écrite en quatorze étapes, et avec des agents d'intelligence artificielle qui trouvent les articles, les lisent, en extraient les données et vérifient les phrases, chacun avec une tâche bien délimitée. C'est la méthode qui garde chaque phrase reliée à une citation et à une page de l'article dont elle vient.

Ce que nous ne sommes pas : nous ne sommes pas un groupe de recherche, nous ne menons pas nos propres études avec des enfants, et les guides ne sont pas relus par d'autres scientifiques comme l'est un article avant sa publication. Ce sont des résumés de la recherche publiée, faits avec soin, et chacun peut les vérifier.

Quand une nouvelle étude paraît, ou si vous trouvez une erreur

Chaque guide indique sa date de publication et, quand il change, la date de la dernière mise à jour et ce qui a changé. Quand une nouvelle étude paraît, nous revoyons les phrases qui en dépendent et nous les changeons si besoin. Si une conclusion change (par exemple, si une chose que nous décrivions comme bien établie devient débattue), le guide explique le changement ; nous n'effaçons pas l'ancienne phrase en silence.

Si vous trouvez une erreur, écrivez-nous à support@parauling.com : nous la vérifierons avec l'article et, si besoin, nous la corrigerons et nous le dirons.