L'impact de la formulation des questions sur les réponses des enfants
Une étude révèle comment la formulation des questions influence la compréhension des enfants et l'évaluation de leurs compétences.
― 7 min lire
Table des matières
Dans le domaine de la mesure des émotions et des comportements, les chercheurs créent souvent des enquêtes pour comprendre comment les enfants réagissent à différentes situations. La façon dont une question est formulée peut influencer les réponses des enfants. Par exemple, une question qui demande quelque chose de positif peut entraîner une réaction différente d'une question qui demande quelque chose de négatif. Cette étude examine comment la manière dont les questions sont formulées - de façon positive ou négative - affecte leur capacité à trier les différents niveaux de compréhension ou de compétences chez les enfants.
Contexte
Les enquêtes sont des outils essentiels utilisés par les éducateurs et les psychologues pour mesurer l'apprentissage social et émotionnel (SEL) chez les enfants. Le SEL comprend des compétences comme la Régulation Émotionnelle, la compétence sociale et les comportements d'apprentissage. Les chercheurs veulent s'assurer que ces enquêtes sont efficaces et peuvent fournir des données précises sur les capacités émotionnelles et sociales d'un enfant.
Une question courante dans la conception des enquêtes est de savoir pourquoi certaines questions fonctionnent mieux que d'autres. Certaines questions peuvent être plus faciles à répondre pour les enfants, tandis que d'autres peuvent être plus difficiles ou aider à différencier plus efficacement les capacités ou les sentiments des enfants. Les chercheurs ont développé divers modèles pour comprendre comment différents aspects d'une question d'enquête influencent les réponses. Cependant, il y a eu moins d'attention portée sur le fonctionnement de la discrimination des items, c'est-à-dire la capacité d'une question à distinguer différents niveaux de compréhension parmi les répondants.
Le Problème de la Formulation
Lors de la création d'enquêtes, surtout pour les jeunes enfants, la façon dont une question est formulée est cruciale. Les questions peuvent être formulées de manière positive, comme "Peux-tu attendre ton tour ?" ou négativement, comme "Est-ce que tu interromps souvent les autres ?" La formulation peut changer la manière dont les enfants interprètent la question et choisissent leurs réponses. Cette étude se concentre sur la question de savoir si les questions formulées négativement sont moins efficaces pour distinguer différents niveaux de compétences chez les enfants par rapport aux questions formulées positivement.
Méthodologie
Pour explorer cette question, les chercheurs ont examiné quatre enquêtes différentes sur le SEL destinées aux enfants d'âge préscolaire. Ils voulaient voir si la façon dont les questions étaient formulées affectait leur capacité à distinguer les enfants ayant différents niveaux de compétences émotionnelles et sociales. Les chercheurs ont recueilli des données auprès de 1 000 enfants d'âge préscolaire pour analyser comment la formulation influençait les réponses.
Aperçu des Enquêtes
Les enquêtes comprenaient plusieurs mesures du SEL, évaluant les compétences des enfants dans des domaines tels que :
- Régulation émotionnelle : À quel point un enfant peut gérer ses émotions.
- Compétence sociale : Comment un enfant interagit socialement avec ses pairs.
- Comportements d'apprentissage : À quel point un enfant est engagé dans les activités d'apprentissage.
- Compétences sociales : À quel point un enfant peut communiquer et établir des relations.
Chaque enquête posait des questions qui étaient soit formulées positivement soit négativement. Par exemple, une question formulée positivement pourrait demander si un enfant "peut rester calme", tandis qu'une question formulée négativement pourrait demander s'il "perd souvent le contrôle".
Analyse des Réponses
Pour analyser les réponses aux enquêtes, les chercheurs ont utilisé des modèles statistiques qui aident à identifier comment différents types de questions se comportent. Ils ont spécifiquement examiné si les items formulés négativement entraînaient une discrimination plus faible par rapport aux items formulés positivement. Si une question formulée négativement ne parvient pas à bien différencier les compétences des enfants, cela pourrait conduire à des conclusions trompeuses sur les capacités d'un enfant.
Les chercheurs ont réalisé une analyse pour voir si les questions formulées négativement produisaient systématiquement des scores plus bas en termes de discrimination des items à travers les quatre enquêtes différentes. L'idée était de déterminer l'impact général de la formulation des questions sur l'efficacité de l'enquête.
Résultats
Les chercheurs ont constaté que dans deux des quatre enquêtes, les items formulés négativement étaient nettement moins efficaces pour distinguer les niveaux de compétences émotionnelles et sociales chez les enfants. Par exemple, les résultats ont indiqué que dans certaines enquêtes, les enfants obtenaient des scores plus élevés sur les questions formulées négativement que sur celles formulées positivement. Cette découverte signifie que les questions formulées négativement n'aidaient pas à différencier les capacités des enfants aussi bien que celles formulées positivement.
De plus, une analyse spécifique utilisant une méthode appelée régression de discontinuité a fourni des preuves que le passage d'une série de questions formulées positivement à des questions formulées négativement entraînait une chute significative de la capacité des questions à différencier les compétences des enfants.
Implications
Ces résultats ont des implications importantes pour la conception des enquêtes dans les évaluations du SEL. Si les items formulés négativement sont moins efficaces, cela suggère que les chercheurs et les éducateurs devraient faire attention à l'utilisation de telles questions. Utiliser trop de questions formulées négativement pourrait conduire à des évaluations inexactes des capacités des enfants.
Les enquêtes ne sont aussi bonnes que les questions qu'elles posent. Si certains types de questions ne fonctionnent pas bien, surtout pour distinguer les niveaux variés de compétence, cela pourrait affecter la façon dont les éducateurs comprennent et soutiennent le développement émotionnel et social des enfants.
Recommandations pour de Futures Enquêtes
Sur la base de ces résultats, les chercheurs suggèrent plusieurs recommandations pour concevoir de futures enquêtes visant à évaluer l'apprentissage social et émotionnel des enfants :
Prioriser les Questions Formulées Positivement : Mettre l'accent sur l'utilisation de questions formulées positivement lorsque cela est possible, car elles ont tendance à mieux discriminer les différents niveaux de compétence.
Limiter les Questions Formulées Négativement : Utiliser des questions formulées négativement avec parcimonie pour éviter la confusion et la mauvaise interprétation chez les jeunes répondants.
Tester Différentes Formulations : Expérimenter avec différentes manières de formuler des questions pour trouver la formulation la plus efficace pour les jeunes enfants.
Collecter des Retours : Après les enquêtes, recueillir des retours des répondants pourrait fournir un aperçu des questions qui étaient confuses ou difficiles à répondre.
Tests Pilotes : Réaliser des études pilotes plus petites avant de déployer des enquêtes plus larges pour voir quelles questions fonctionnent mieux en termes de discrimination.
Conclusion
Comprendre comment la formulation des questions impacte les réponses aux enquêtes est vital dans l'évaluation de l'apprentissage social et émotionnel des jeunes enfants. Cette étude met en lumière les différences critiques dans la façon dont les enfants réagissent aux questions formulées positivement et négativement, soulignant la nécessité d'une conception d'enquête soignée pour garantir des mesures précises. En se concentrant sur l'efficacité du choix des mots des questions, les chercheurs et les éducateurs peuvent mieux soutenir le développement émotionnel et social des enfants à travers des évaluations plus efficaces.
Les résultats soulignent l'importance de poursuivre les recherches sur la façon dont différents facteurs influencent les réponses des enfants aux enquêtes. Les futures études peuvent s'appuyer sur ces insights pour affiner les outils d'évaluation, s'assurant qu'ils fournissent les informations les plus précises et utiles pour comprendre le développement des enfants.
Titre: Polytomous Explanatory Item Response Models for Item Discrimination: Assessing Negative-Framing Effects in Social-Emotional Learning Surveys
Résumé: Modeling item parameters as a function of item characteristics has a long history but has generally focused on models for item location. Explanatory item response models for item discrimination are available but rarely used. In this study, we extend existing approaches for modeling item discrimination from dichotomous to polytomous item responses. We illustrate our proposed approach with an application to four social-emotional learning surveys of preschool children to investigate how item discrimination depends on whether an item is positively or negatively framed. Negative framing predicts significantly lower item discrimination on two of the four surveys, and a plausibly causal estimate from a regression discontinuity analysis shows that negative framing reduces discrimination by about 30\% on one survey. We conclude with a discussion of potential applications of explanatory models for item discrimination.
Auteurs: Joshua B. Gilbert, Lijin Zhang, Esther Ulitzsch, Benjamin W. Domingue
Dernière mise à jour: 2024-06-07 00:00:00
Langue: English
Source URL: https://arxiv.org/abs/2406.05304
Source PDF: https://arxiv.org/pdf/2406.05304
Licence: https://creativecommons.org/licenses/by-nc-sa/4.0/
Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.
Merci à arxiv pour l'utilisation de son interopérabilité en libre accès.