Schwichow et al. (2016): Enseñar a controlar variables: metaanálisis

Referencia (APA 7): Schwichow, M., Croker, S., Zimmerman, C., Höffler, T., & Härtig, H. (2016). Teaching the control-of-variables strategy: A meta-analysis. Developmental Review, 39, 37–63. https://doi.org/10.1016/j.dr.2015.12.001

Eje: 03 Competencias experimentales e indagación · Prioridad: P1 · Mapa: MOC - Mapa de contenidos

Resumen del artículo

Schwichow, Croker, Zimmerman, Höffler y Härtig (IPN Kiel e Illinois State University) sintetizan 72 estudios de intervención diseñados, al menos en parte, para mejorar la estrategia de control de variables (CVS), la habilidad de diseñar experimentos en los que solo cambia la variable investigada. Participaron en total 5355 estudiantes; la mitad de los estudios tenía 40 estudiantes o menos. Con metarregresión robusta estiman un efecto medio de g = 0,61.

De los moderadores analizados (diseño del estudio, características de los estudiantes, de la instrucción y de la evaluación), solo dos rasgos de la instrucción se asociaron con mayores efectos: inducir conflicto cognitivo (g = 0,80 frente a 0,53) y usar demostraciones de buenos experimentos (g = 0,69 frente a 0,48). Entrenar con tareas de desempeño, reales o virtuales, no añadió ventaja, y los estudios experimentales y cuasiexperimentales no se diferenciaron de manera sistemática.

El formato del instrumento de evaluación resultó ser una fuente importante de variación, lo que hace pensar que pruebas distintas pueden no estar midiendo el mismo constructo. Los autores concluyen que los estudiantes no aprenden de manipular el aparato en sí, sino de pensar en los datos y reflexionar sobre las estrategias experimentales, y recomiendan que las tareas prácticas simplifiquen al máximo la medición y el registro.

Subrayados por color

Las citas son textuales del PDF subrayado (Zotero/subrayados/Schwichow_2016_subrayado.pdf). Cada una va seguida de la nota de lectura.

Definiciones (azul)

Definición (p. 2)

“Therefore, all variables except the one being investigated should ideally be held constant (or “controlled”) across experimental conditions (Dewey, 2002; Popper, 1966).” (p. 2)

Mi nota: Definición operativa de control de variables (CVS); base de la competencia «controlar variables» en la rúbrica.

Definición (p. 2)

“For example, students often over-extend a “fairness schema” to produce experiments that are completely equivalent (i.e., identical), they often have trouble making the distinction between a variable and the variable levels, and they often misunderstand the goal of the task as to be one that is consistent with engineering an outcome rather than finding out about the causal status of a single variable.” (p. 2)

Mi nota: Tres concepciones erróneas típicas sobre el control de variables: insumo para diseñar distractores del pretest y para la retroalimentación del simulador.

Definición (p. 6)

“A demonstration is a didactic presentation of a controlled experiment by the teacher.” (p. 6)

Mi nota: Definición de demostración; distinguirla de la manipulación libre del simulador en el diseño de la guía.

Definición (p. 6)

“The key idea is that the teacher presents discrepant or anomalous information, typically in the form of an uncontrolled comparison, with the goal that the student will notice “the inherent indeterminacy of confounded experiments” (Chen & Klahr, 1999, p. 1098).” (p. 6)

Mi nota: Definición de conflicto cognitivo aplicado a la CVS: mostrar un experimento confundido. Se puede programar en el simulador.

Ideas principales (amarillo)

Idea principal (p. 1)

“The control-of-variables strategy (CVS) is foundational for school science and scientific literacy, but it does not routinely develop without practice or instruction.” (p. 1)

Mi nota: Tesis del artículo: controlar variables no surge solo, hay que enseñarlo. Justifica la intervención mediada para 9.° grado.

Idea principal (p. 21)

“It may be the case that carefully constructed hands-on training tasks could be developed with the sole purpose of CVS instruction. Such tasks would require that measurement and data recording are made as simple as possible.” (p. 21)

Mi nota: Recomendación aplicable a sus simuladores: automatizar medición y registro para centrar la atención en el control de variables.

Metodología (morado)

Metodología (p. 14)

“The sample size varied, with studies ranging from 14 to 318 students; half of the studies used 40 or fewer students. Overall, 5355 students participated in the intervention studies included in the analysis.” (p. 14)

Mi nota: Metaanálisis de 72 estudios (5355 estudiantes). Muestras pequeñas son habituales: respalda la viabilidad de 3 grupos rurales.

Evidencia (verde)

Evidencia (p. 18)

“Instructional interventions that employed demonstrations of good experiments showed significantly larger effect sizes (g = 0.69, 95% CI = 0.57–0.81) than studies that did not use demonstrations (g = 0.48, 95% CI = 0.32–0.64).” (p. 18)

Mi nota: Evidencia: demostrar buenos experimentos aumenta el efecto. Incluir demostraciones guiadas en el simulador (principio de diseño).

Evidencia (p. 18)

“Interventions using procedures to induce cognitive conflict in students had larger effect sizes (g = 0.80, 95% CI = 0.62–0.98) than interventions not using such procedures (g = 0.53, 95% CI = 0.43–0.63).” (p. 18)

Mi nota: Mayor moderador: conflicto cognitivo (g = 0,80). Referente para comparar el tamaño del efecto entre ciclos DBR.

Evidencia (p. 20)

“Experimental and quasi-experimental studies did not differ systematically from each other. Accordingly, classroom studies are appropriate to study treatment effects even though they have a lower internal validity.” (p. 20)

Mi nota: Respalda la validez de estudios en aula (validez ecológica), útil para defender el DBR sin aleatorización.

Tensiones y vacíos (rojo)

Tensión o vacío (p. 2)

“Across many studies, it is evident that most students and even some adults do not have a generalized understanding of CVS because their ability to identify, select, or design controlled experiments depends on the task content or situational factors” (p. 2)

Mi nota: Límite: la CVS depende del contenido de la tarea. Evaluar con tareas en varios contextos físicos para no sobreestimar la transferencia.

Tensión o vacío (p. 18)

“The effect sizes for studies in which students were trained on virtual or real performance tasks (g = 0.59, 95% CI = 0.49–0.69) were not significantly different from studies that did not train students on performance tasks (g = 0.74, 95% CI = 0.58–0.90).” (p. 18)

Mi nota: Hallazgo incómodo: practicar con tareas virtuales o reales no añade ventaja. Hay que justificar el simulador por la mediación, no por la manipulación.

Tensión o vacío (p. 21)

“Instead, “hands-on” activities (whether they are manipulations of physical apparatus or computer simulations) may actually have a negative impact on student understanding. When running experiments, students have to attend to additional challenges such as measuring and recording data.” (p. 21)

Mi nota: Crítica directa a las simulaciones: carga extra de medir y registrar. Conecta con Kirschner; el diseño debe reducir esa carga.

Tensión o vacío (p. 23)

“Nevertheless, the significant impact of assessment characteristics challenges our knowledge about student learning and understanding of CVS. It could mean that assessments using different formats are not measuring the same underlying construct.” (p. 23)

Mi nota: Límite de medición: el formato del test cambia el efecto. Cuidar el diseño del instrumento y combinar ítems cerrados con tareas de desempeño.

Citas para usar (naranja)

Cita para usar (p. 21)

“Taken together, it seems that students may not learn from the manipulation of a physical or virtual apparatus per se, but rather by thinking about data or evidence and reflecting on experimental strategies.” (p. 21)

Mi nota: Cita textual clave: se aprende al reflexionar, no al manipular. Fundamenta la mediación didáctica como núcleo de la tesis.

Cita para usar (p. 22)

“Students need not be taught what unambiguous evidence looks like; rather, they need to be reminded to apply a reasoning strategy they may already know when carrying out experimental tasks.” (p. 22)

Mi nota: Cita textual: andamiaje tipo recordatorio («cambia una sola variable»). Útil para los prompts del simulador.

Conexión con la tesis

Controlar variables es el núcleo de las competencias experimentales que José Luis quiere desarrollar, y este metaanálisis le da tanto la definición operativa (p. 2) como los ingredientes didácticos con más evidencia. Las dos estrategias con mayor efecto, el conflicto cognitivo con experimentos confundidos y la demostración de buenos experimentos, pueden programarse dentro del simulador propio y convertirse en principios de diseño. El hallazgo incómodo (manipular, sea en físico o en virtual, no añade ventaja por sí mismo) es en realidad el mejor argumento para la tesis: lo que enseña es la mediación que hace pensar en los datos, no el simulador. De ahí sale también una decisión de diseño concreta: automatizar la medición y el registro en el simulador para liberar atención hacia el razonamiento. Las tres concepciones erróneas típicas (p. 2) sirven para construir distractores del pretest, y la advertencia sobre el formato del instrumento pide combinar ítems cerrados con tareas de desempeño. Que los estudios en aula no difieran de los experimentales respalda la validez de un diseño DBR sin aleatorización.

Conectado a

Mi reflexión

Preguntas orientadoras

Escoge una o responde varias. Graba en tus propias palabras (1 a 3 minutos).

  1. Schwichow et al. encontraron que el conflicto cognitivo tiene el mayor efecto. ¿Qué experimento confundido podrías programar en tu primer simulador para provocarlo en tus estudiantes?
  2. Los autores dicen que se aprende pensando en los datos y no manipulando. Si eso es cierto, ¿qué tendría que hacer tu simulador por sí solo y qué tendría que hacer el docente?
  3. El formato de la prueba cambia el efecto. ¿Cómo combinarías ítems cerrados y tareas de desempeño en tu instrumento, y qué te aporta el contraste con Husnaini y Chen (2019) sobre planificar y experimentar?

Reflexión de voz

Graba tu reflexión sobre este texto usando el botón de abajo.


Colores Zettelkasten: azul = definición | amarillo = idea principal | morado = metodología | verde = evidencia | rojo = tensión o vacío | naranja = cita para usar