
Sébastien BélandUniversité de Montréal | UdeM
Sébastien Béland
PhD
About
93
Publications
29,995
Reads
How we measure 'reads'
A 'read' is counted each time someone views a publication summary (such as the title, abstract, and list of authors), clicks on a figure, or views or downloads the full-text. Learn more
667
Citations
Publications
Publications (93)
Differential item functioning (DIF) is an important issue of interest in psychometrics and educational measurement. Several methods have been proposed in recent decades for identifying items that function differently between two or more groups of examinees. Starting from a framework for classifying DIF detection methods and from a comparative overv...
This paper focuses on two likelihood-based indices of person fit, the index lz (Drasgow, Levine & Williams, 1985) and the Snijders’ modified index lz* (Snijders, 2001). The first one is commonly used in practical assessment of person fit, although its asymptotic standard normal distribution is not valid when true abilities are replaced by sample ab...
This paper presents an introduction into Bayesian evaluation of informative
hypotheses, that is, hypotheses representing explicit expectations about multiple
group means (Hoijtink, 2011; Hoijtink, Klugkist & Boelen, 2008). The authors begin by
discussing some limits of exploratory methods before presenting a non-technical
overview of the Bayesian a...
The Infit mean square W and the Outfit mean square U are commonly used person fit indexes under Rasch measurement. However, they suffer from two major weaknesses. First, their asymptotic distribution is usually derived by assuming that the true ability levels are known. Second, such distributions are even not clearly stated for indexes U and W. Bot...
Recent work on reliability coefficients has largely focused on continuous items, including critiques of Cronbach’s alpha. Although two new model-based reliability coefficients have been proposed for dichotomous items (Dimitrov, 2003a,b; Green & Yang, 2009a), these approaches have yet to be compared to each other or other popular estimates of reliab...
This study challenges three common methodological beliefs and practices. The first question examines whether ordinal reliability estimators are more accurate than continuous estimators for unidimensional data with uncorrelated errors. Continuous estimators (e.g., coefficient alpha) can be applied to both continuous and ordinal data, while ordinal e...
Background
Adults with sickle cell disease (SCD) are at higher risk of cognitive disorder compared to the general population. The American Society of Hematology recommends cognitive screening; however, optimal surveillance strategies have not been established. The Rowland Universal Dementia Assessment Scale (RUDAS) is a short questionnaire that was...
https://mje.mcgill.ca/article/view/10063 The objective of this article is to determine if the work of full-time professors in Canada varies depending on the type of universities in which they are employed. A nonparametric comparison of multivariate samples based on data from the Academic Profession in the Knowledge Society (APIKS) survey was used t...
Le vendredi 9 juin 2023 s’est tenu le 12e colloque annuel Méthodes quantitatives en sciences humaines à l’Université TÉLUQ, Montréal. Sept conférenciers ont présenté leurs résultats de recherche. Sébastien Béland a évalué l'efficacité de différents coefficients populaires sur des items unidimensionnels à réponse dichotomique. Félix Laliberté a prés...
Cette série d’annexes présente les ressources associées à l’article suivant :
Michelot, F., Poellhuber, B., & Béland, S. (2023). Métalittératie et pensée critique de futurs enseignants : pratiques et perceptions en francophonie. Revue internationale de pédagogie de l’enseignement supérieur, 39(2). https://doi.org/10/gsg375
La pensée critique et la capacité à aborder l’information sont apparues comme étant cruciales au cours des dernières années, particulièrement en raison du rôle délétère, réel ou supposé, des médias sociaux. Pour répondre à cet enjeu, le rôle de l’éducation et, par conséquent, des enseignants apparaît central. Dans cet article, nous rapportons les o...
This study investigates the correlates of statistics anxiety. Considering that statistics anxiety and spatial anxiety have been separately correlated with related constructs (e.g., mathematics anxiety, academic performance, etc.), the possibility that spatial anxiety plays a role in statistics anxiety is explored. When facing statistics or mathemat...
Qu’il s’agisse de sondages, d’échelles de satisfaction ou d’examens, les instruments de mesure font partie de nos vies personnelles et professionnelles. Puisque des décisions lourdes de conséquences peuvent être prises sur la base de l’information collectée par ceux-ci, il importe qu’ils soient bien construits. La validation des propriétés psychomé...
Background
Multiple mini-interviews (MMI) are used to assess non-academic attributes for selection in medicine and other healthcare professions. It remains unclear if different MMI station formats (discussions, role-plays, collaboration) assess different dimensions.
Methods
Based on station formats of the 2018 and 2019 Integrated French MMI (IFMMI...
Structural equation modeling involving latent interaction has garnered much attention from researchers in many disciplines. Interestingly, Becher & Trowler (2001) described academics as living in a tribe sharing a common set of practices and led by a stable elite. To provide an overview of psychological and educational studies using the latent mode...
This chapter examines the relationship between teaching and research at Canada’s universities via the perceptions of full-time professors. Data from the 2007 Changing Academic Profession (CAP) and the 2018 Academic Profession in the Knowledge-Based Society (APIKS) surveys are analysed to determine how professors perceive their institutions’ orienta...
Évidemment, la pandémie a eu un effet disruptif sur les méthodes d’évaluations des apprentissages, particulièrement quant à leur instrumentation. Les modes de passation des évaluations ont dû être adaptés, révisés ou transformés en profondeur pour s’accorder au contexte.
D’abord, le contexte actuel a révélé de nouveaux besoins chez les enseignants...
Purpose. While training students to new literacy and critical thinking has been recognized for several decades, it seems even more crucial today as education is presented as a lever to fight against fake news. Preservice teachers, both so-called digital natives at the cutting edge of the social web and tomorrow’s educators, represent a useful objec...
De la perspective située à la fraude universitaire, en passant par le design collaboratif et diverses pratiques évaluatives, cet ouvrage poursuit la réflexion entamée dans le tome précédent, publié aux Presses de l’Université du Québec en 2017. Il met de l’avant une variété d’angles pour aborder l’évaluation dans les disciplines artistiques au post...
Des universités offrent des cours d’éducation à la collaboration interprofessionnelle en sciences de la santé et, pour faire face aux défis de synchronisation des horaires, de cloisonnement et de communication, plusieurs sont dispensés en mode hybride. Cet article s’intéresse à l’analyse de la qualité métrique d’un questionnaire utilisé en contexte...
Universities are offering hybrid interprofessional health sciences collaboration education courses to address the challenges of schedule synchronization, silos, and communication. This article focuses on analyzing the psychometric quality of a questionnaire used in a setting where interprofessional teams collaborated online and face-to-face in a hy...
Contexte : Les programmes de la santé innovent pour bonifier l’enseignement des réalités autochtones aux étudiants allochtones. Il n’existe toutefois pas d’échelle validée en français pour évaluer l’effet de ces interventions sur les préjugés à l’égard des autochtones. But : Cet article présente le processus de traduction en français et une évaluat...
Drawing on theoretical and empirical insights from art teachers in Canada and Europe, this edited volume explores the question of how learning in the arts can be effectively and fairly assessed in the context of higher education.
The chapters consider a rich variety of assessment practices across music, visual and plastic arts, performing arts, de...
Humor is a concept that has been examined so far in several fields of study such as health, philosophy, or history, to name a few. In education, the use of humor has been presented as a strategy which, when used sensitively, can create a pleasant atmosphere in the classroom that is not only conducive for student learning, but also for their persona...
Holistic processing, which includes the integration of facial features and analysis of their relations to one another, is a hallmark of what makes faces ‘special’. Various experimental paradigms purport to measure holistic processing but these have often produced inconsistent results. This has led researchers to question the nature and structure of...
Importance
Adults with sickle cell disease (SCD) disproportionally experience early cognitive decline; however, guidance on the optimal screening strategy for cognitive dysfunction is lacking, and several available tools are biased by language, educational level, socioeconomic status, and race/ethnicity. The Rowland Universal Dementia Assessment Sc...
Résumé
Face au défi du passage à l’enseignement à distance, de nombreux établissements
d’enseignement supérieur ont développé des programmes de formation pour leurs enseignants. À la fin de la session d’hiver 2020, le Centre de pédagogie universitaire de l’Université de Montréal a développé un cycle comprenant une vingtaine d’activités pour concevo...
Mini-Med Schools (MiMS) are an opportunity for health sciences and social work undergraduates to discuss health-related topics with Innu and Atikamekw youth in Canada. More than 500 undergraduates and 1,000 students have taken part in the project since its beginning in 2011. This study aims to assess the impact of both 1) MiMS's predeparture traini...
Le présent article est une exemplification méthodologique de l’utilisation des
graphiques Johnson-Neyman pour interpréter l’effet d’interaction entre
variables latentes. Il fait suite à l’exemplification méthodologique de Girard et
Béland (2017) et apporte certaines mises à jour au regard des analyses
précédemment exemplifiées. De plus, il propose...
Le livre The coddling of the American mind, par Greg Lukianoff et Jonathan Haidt, a généré beaucoup d'intérêt depuis sa sortie. Nous en proposons une recension critique qui situe d'abord l'ouvrage dans son contexte sociopolitique, puis en résume les idées centrales. Nous présentons ensuite une critique qui s'est concentrée sur les choix et fondemen...
The Educational Data Mining (EDM) and Learning Analytics (LA) fields have generated a wealth of research over the last decade, including two yearly conferences and two scientific journals. This workshop aims to foster the dissemination of this research to the education community. It will bring together researchers and practitioners to share their p...
Au cours des dernières décennies, certains auteurs ont suggéré de rejeter le coefficient alpha (α) de Cronbach (1951) pour adopter le coefficient oméga (ω) de McDonald (1985, 1999) basé sur un modèle d’analyse factorielle. Après avoir présenté certaines limites inhérentes à l’α, nous présentons le coefficient ω et ses déclinaisons en poursuivant de...
This study investigated possible gender bias on a vocabulary test, using a method suggested by Andrich and Hagquist to detect "real" differential item functioning (DIF). A total of 443 adult ESL learners completed all 228 items of the Peabody Picture Vocabulary Test (PPVT-IV). The 310 female and 133 male participants were assumed to be of equal com...
Présentation (diaporama) des principaux faits saillants de la recherche FRQ-SC (2014-2017/2018) "Une pédagogie favorisant la résilience sociale et scolaire des parents et la réussite éducative des jeunes. Impact d'interventions communautaires auprès des parents de populations vulnérables" incluant le processus de coconstruction d'une Recherche-acti...
Le but de cette recherche est d’explorer les liens qui existent entre le leadership et les compétences émotionnelles (CÉ) des directions d’établissement scolaire en regard de l’anxiété, la colère et la joie. Un total de 473 enseignants et professionnels a répondu à un questionnaire sur leur perception des pratiques de leadership et des CÉ de leur d...
De nombreux chercheurs en psychométrie soutiennent que le coefficient alpha de Cronbach (1951) n’est pas une mesure adéquate de la fidélité ( reliability) d’un test. C’est dans l’optique d’améliorer les pratiques d’analyse de données que ce court article va présenter les fondements théoriques de la fidélité, synthétiser les principales limites de l...
In Classical test theory, diculty (p) and discrimination (d) are two item coecients that are widely used to analyze and validate items in educational testing. However, test items are usually affected by missing data (MD), and little is known about the effect of methods for handling MD on these two coecients. The current study compares several simpl...
Dans cette recherche, collaborative et partenariale, nous analysions les particularités de l’intervention socioéducative de trois organismes communautaires implantés dans autant de quartiers à très fort indice de défavorisation socioéconomique sur le territoire montréalais. Ces interventions s’adressent soit de façon exclusive aux parents d’enfants...
Faits saillants et principaux résultats ainsi que recommandations du processus d'étude évaluative de l'intervention d'un organisme communautaire, La Relance, Jeunes et familles, implanté depuis quatre décennie dans un quartier populaire de Montréal (Centre sud). L'intervention se situe à la charnière des univers de la famille, de l'école et de la c...
Cognates are known to facilitate second language acquisition and use, as learners tend to assign to a new L2 word the meaning of a similar L1 word. Consequently, for L2 tests that rely largely on lexical items, performance may prove inflated for examinees whose L1 shares many cognates with the language being tested. This article examines the possib...
Le présent article est une exemplification méthodologique de la méthode LMS (Latent Moderated Structural Equations) disponible dans le logiciel Mplus. Des données recueillies pour étudier la motivation d’adolescentes (n = 434) en éducation physique
serviront à présenter la méthodologie à suivre pour évaluer l’interaction de variables latentes dans...
Le présent ouvrage collectif traite de l’acte délicat d’évaluer les apprentissages dans les disciplines artistiques au collège et à l’université. Il explore les difficultés à concilier l’enseignement en arts, domaine visant une transformation intuitive de l’étudiant, et l’évaluation d’apprentissages prenant leur sens dans la subjectivité et la sens...
La présente étude tient à la fois de la recherche évaluative et de l’étude d’impact. De
façon plus particulière, elle se situe dans un courant particulier, celui de l’évaluation réaliste théoriquement fondée. Elle se situe aussi en perspective écologique, situant une
intervention multimodale, celle de La Relance, dans un écosystème social complexe...
Diaporama d’une communication faisant la synthèse des données issues de 156 périodes de mise en oeuvre de SAE construites collaborativement avec les enseignantes et enseignants responsables de 26 groupes classes au secondaire (Mathématique et Français) au Québec, entre 2008 et 2014. La communication ne porte que sur les données relatives aux pratiq...
Des chercheurs discutaient récemment de l’importance de rester à jour au sujet des plus récentes avancées en méthodes quantitatives. À ce titre, de nombreux auteurs ont exposé leur souhait de voir les chercheurs abandonner le populaire coefficient alpha de Cronbach. C’est dans une optique de diffusion et de vulgarisation que ce court article a comm...
Many discussions, sometimes heated, sometimes critical, were held on the use of statistics since the beginning of the new millennium. The aim of this opinion piece is to tap these criticisms in order to highlight ten ways to analyze a data set. We thus offer our own version of the Ten Commandments. We ultimately hope this will encourage the scienti...
Au menu Recherche orientée: définitions, fondements et contexte. Données probantes et recherche évaluative. Recherche-action / Recherche évaluative. Illustration du propos: Comment pervertir la recherche orientée dans un contexte de financement sous influence (néo-libérale) ? Application et implications… Introduction: Recherche orientée...
Le développement de dispositifs de formation à distance en enseignement supérieur soulève la question de la nature et de la pertinence des pratiques évaluatives des enseignantes et enseignants, dans un contexte où la nature des données recueillies, la portée et la crédibilité de leur interprétation ainsi que les modalités de communication des résul...
Certains étudiants peuvent répondre au hasard ou être inattentifs dans une situation de testing. Plusieurs approches ont déjà été développées pour détecter ce type de réponse. Parmi celles-ci, l’utilisation d’indices de détection (person-fit indexes) de patrons de réponses inappropriés est l’approche qui est la plus étudiée et qui semble la plus pr...
With the intent to detect inappropriate response patterns, the lz index (Drasgow, Levine, & Williams, 1985) was applied to a 64-item test of second language reading ability administered to 171 university students. Our goal was to compare intuitive rejection of research data to data elimination suggested by lz. In addition, lz was challenged to dete...
The scientific treatment of missing data has been the subject of research for nearly a century. Strangely, interest in missing data is quite new in the fields of educational science and psychology (Peugh & Enders, 2004; Schafer & Graham, 2002). It is now important to better understand how various common methods for dealing with missing data can aff...
Researchers are frequently confronted with unanswered questions or items
on their questionnaires and tests, due to factors such as item difficulty, lack of
testing time, or participant distraction. This paper first presents results from
a poll confirming previous claims (Rietveld & van Hout, 2006; Schafer & Graham,
2002) that data replacement and d...
Les methodes permettant de detecter les reponses au hasard dans l’evaluation des apprentissages presentent quelques limites. Par exemple, les indices de detection de patrons de reponses inappropries (person-fit indexes) necessitent generalement d’enormes bases de donnees et permettent seulement de dire si un etudiant repond en accord ou non avec un...
English teachers use the Sentence Verification Technique (Royer et al., 1979) to determine the readability of written material for their classes. This process requires students to read short passages from a book, followed by isolated sentences. These sentences can be either identical or different from the original passages, in their meaning as well...
There exist diverse approaches that can be used for cognitive diagnostic assessment, such as mastery testing, constrained latent class analysis, rule space methodology, diagnostic cognitive modeling, and person-fit analysis. Each of these approaches can be used within 1 of the 4 psychometric perspectives on diagnostic testing discussed by Borsboom...
Cette étude vise à examiner la présence de fonctionnement différentiel d’items selon le sexe des répondants dans un test de compréhension en lecture en anglais administré à 171 universitaires francophones. Deux méthodes non paramétriques sont utilisées: le test Mantel-Haenszel et le modèle de régression logistique. Sur un total de 64 items, deux pr...
La théorie de la réponse aux items (TRI) est une classe de modèles de mesure très utilisée en éducation. À ce jour, de nombreux logiciels, tel BILOG-MG, sont disponibles afin de procéder à l'estimation des paramètres d'item et de sujet. Parmi ces logiciels, il ne faut pas négliger ICL et R, qui sont gratuits et qui peuvent permettre de produire des...
La présence de réponses aberrantes est habituellement détectée par l’utilisation d’indices d’ajustement permettant de déterminer si le patron de réponses est inapproprié par rapport aux caractéristiques du test. Cette approche nécessite cependant une préestimation des paramètres d’items qui est souvent réalisée sur le même ensemble de données. La p...
La Theorie de la reponse aux items (TRI) est une classe de modeles de mesure tres utilisee en education. A ce jour, de nombreux logiciels, tel BILOG-MG, sont disponibles afin de proceder a l’estimation des parametres d’item et de sujet. Parmi ces logiciels, il ne faut pas negliger ICL et R qui sont gratuits et qui peuvent permettre de produire des...
We present an extension of the logistic regression procedure to identify dichotomous differential item functioning (DIF) in the presence of more than two groups of respondents. Starting from the usual framework of a single focal group, we propose a general approach to estimate the item response functions in each group and to test for the presence o...
In this paper, the estimation of extremely large or extremely small proficiency levels, given the item parameters of a logistic item response model, is investigated. On the one hand, the estimation of proficiency levels by maximum likelihood (ML), despite being asymptotically unbiased, may yield infinite estimates. On the other hand, with an approp...
La détection des tentatives de fraudes lors de l'évaluation des apprentissages à l'aide de l'application PersonFitR
Research on Internet use for distance learning and counselling seems to prove that results are the same when comparing traditional distance learning and counselling versus its online counterpart. A lot of work and efforts had been invested by education institutions to convert printed course material in electronic format. Therefore, future work is s...
Résumé : Des recherches sur le développement de l'Internet tendent à prouver que l'apprentissage et le counseling peuvent aussi bien s'effectuer en ligne qu'en présence. Beaucoup d'efforts ont présentement été faits par les institutions d'enseignement pour la conversion de notes de cours en format électronique. Cependant, des recherches restent à f...