Using the log-linear cognitive diagnosis model to classify individuals in career and educational assessment

Abstract

The log-linear cognitive diagnosis model (LCDM) is a modern technique that dichotomously classifies individuals (e.g., possession and non-possession) on attributes of a multidimensional construct, which is particularly suited to diagnostic and formative assessments where a classification decision is desired (e.g., to assign intervention or not). This article provides a tutorial for conducting analyses using the LCDM and illustrates an application in career assessment with simulated data to showcase the unique types of diagnostic feedback the LCDM provides. The article concludes with a discussion of the ideal contexts in which to apply the model and its implications in career and educational assessment.

Résumé

Utiliser le Modèle Log-linéaire de Diagnostique Cognitif (MLDC) pour Classifier les Individus lors d’Évaluations Pédagogiques et de Carrière Le modèle log-linéaire de diagnostic cognitif (MLDC) est une technique moderne qui classe les individus dichotomiquement (p.e. possession et non-possession) sur les attributs d’un concept multidimensionnel, ce qui est particulièrement approprié pour les diagnostiques et évaluations pédagogiques pour lesquelles une décision de classification est désirée (p.e. attribuer une intervention ou non). Cet article fournit un tutoriel pour conduire des analyses en utilisant la MLDC et illustre une application en évaluation de carrière avec des données simulées afin de montrer les types uniques de feedback diagnostiques fournis par la MLDC. Cet article conclut avec une discussion sur les contextes idéaux dans lesquels appliquer le modèle et ses implications pour les évaluations pédagogiques et de carrière.

Zusammenfassung

Verwendung des log-linearen kognitiven Diagnosemodells zur Klassifizierung von Personen im Rahmen von schulischen und karriereorientierten Assessments Das log-lineare kognitive Diagnosemodell (log-linear cognitive diagnosis model, LCDM) ist eine moderne Methode, um Personen auf der Basis von Attributen eines mehrdimensionalen Konstruktes dichotom (z.B. vorhanden und nicht vorhanden) zu klassifizieren. Speziell geeignet ist diese Methode im Zusammenhang mit diagnostischen oder formativen Assessments, wenn es darum geht, eine klassifikatorische Entscheidung zu treffen (z.B. Einschluss in die Intervention oder nicht). Der Beitrag stellt ein Tutorial zur Verfügung, um Analysen anhand des LCDM durchzuführen und illustriert eine Anwendung innerhalb eines karriereorientierten Assessments mit simulierten Daten, um vorzuführen, welche Arten von diagnostischen Feedbacks das LCDM zur Verfügung stellt. Der Artikel schliesst mit einer Diskussion geeigneter Kontexte, in denen das Modell mit seinen Implikationen bei karriereorientierten und schulischen Assessments idealerweise zum Einsatz kommt.

Resumen

Utilización de los modelos log-linear de diagnosis cognitiva para la clasificación de inidividuos en los procesos de evaluación educativa y de la carrera El modelo log-linear de diagnosis cognitiva (LCDM) es una técnica moderna que clasifica dicotómicamente a los sujetos (p.e. posesión y no-posesión) en atributos de un constructo multidimensional que es particularmente adecuado a las evaluaciones diagnósticas y formativas en las que se desea hacer una decisión clasificatoria (p.e. asignar una intervención o no). Este artículo proporciona un tutorial para desarrollar análisis usando el LCDM e ilustra una aplicación en la evaluación de la carrera con datos simulados como muestra de la singularidad de tipos de retroalimentación diagnóstica que el LCDM proporciona. Este artículo concluye con una discusión sobre los contextos ideales de aplicación del modelo y las implicaciones para la evaluación educacional y de la carrera.

Appendix