Etkina et al. (2006): Rúbricas para evaluar habilidades científicas en Física

Referencia (APA 7): Etkina, E., Van Heuvelen, A., White-Brahmia, S., Brookes, D. T., Gentile, M., Murthy, S., Rosengrant, D., & Warren, A. (2006). Scientific abilities and their assessment. Physical Review Special Topics - Physics Education Research, 2(2), 020103. https://doi.org/10.1103/PhysRevSTPER.2.020103

Capítulo: Cap. 2 – Marco teórico · Subcategorías: 2.3.1 Competencias experimentales (concepto y dimensiones) · Mapa: MOC - Mapa de contenidos

Resumen

El grupo de investigación en enseñanza de la Física de Rutgers propone el concepto de “habilidades científicas” (scientific abilities): procesos que los científicos usan para construir conocimiento y resolver problemas experimentales, y que el estudiante debe usar de forma reflexiva, no automática. Definen siete habilidades (representar procesos de varias formas; idear y poner a prueba una explicación o relación; modificarla; diseñar una investigación experimental; recoger y analizar datos; evaluar predicciones, resultados, soluciones y modelos; y comunicar) y las descomponen en subhabilidades evaluables. Para cada subhabilidad escriben una rúbrica de 0 a 3 (ausente, inadecuado, necesita mejorar, adecuado), afinada entre nueve evaluadores hasta superar el 80 % de acuerdo, y tareas de laboratorio y de aula que la ejercitan: experimentos de observación, de prueba y de aplicación.

El artículo resume cuatro estudios en cursos universitarios introductorios de Física basada en álgebra, con cientos de estudiantes. En el laboratorio, con 35 estudiantes elegidos al azar, mejoraron de forma significativa entre la semana 3 y la 10 las habilidades de diseñar un experimento, idear el procedimiento matemático y comunicar los detalles, pero no la de evaluar la incertidumbre experimental. En el examen final, tres meses después y sin rúbrica, el 58 % diseñó un experimento para intentar refutar la hipótesis, una tasa de transferencia que los autores consideran alta.

Los límites son de contexto y de diseño. Todo ocurre en la universidad estadounidense, con estudiantes de ciencias, y los estudios son descriptivos o con grupo de comparación no equivalente. Las rúbricas guían la autoevaluación, pero no dan retroalimentación de contenido: el docente sigue siendo indispensable.

Citas por color

Las citas son textuales del PDF (Zotero/PDF nucleo/Etkina_2006.pdf). El PDF aún no está subrayado en Zotero; estas citas guían ese subrayado. Las páginas son las del artículo 020103 (p. 1 = 020103-1).

Definiciones (azul)

Definición (p. 1)

“We use the term “scientific abilities” to describe some of the most important procedures, processes, and methods that scientists use when constructing knowledge and when solving experimental problems.” (p. 1)

Mi nota: Definición base para el concepto de competencia experimental en el capítulo 2; conviene contrastarla con la de los estándares del MEN.

Definición (p. 1)

“We use the term scientific abilities instead of science-process skills to underscore that these are not automatic skills, but are instead processes that students need to use reflectively and critically.” (p. 1)

Mi nota: Argumento para hablar de competencias y no de destrezas mecánicas: la reflexión es parte del constructo, y eso exige mediación.

Definición (pp. 1-2)

“The list of scientific abilities that our physics education research group developed includes (A) the ability to represent physical processes in multiple ways; (B) the ability to devise and test a qualitative explanation or quantitative relationship; (C) the ability to modify a qualitative explanation or quantitative relationship; (D) the ability to design an experimental investigation; (E) the ability to collect and analyze data; (F) the ability to evaluate experimental predictions and outcomes, conceptual claims, problem solutions, and models, and (G) the ability to communicate.” (pp. 1-2)

Mi nota: Lista que cubre tus dimensiones (hipótesis, control de variables, diseño, datos, conclusión) y agrega representar, evaluar y comunicar. Decide si las incluyes o las dejas fuera de forma explícita.

Ideas principales (amarillo)

Idea principal (p. 1)

“However, in the PER community, there are no instruments that assess whether students can design and conduct investigations, communicate, and defend scientific argument, etc.” (p. 1)

Mi nota: El vacío de instrumentos que motivó el artículo sigue siendo un problema para tu tesis: tendrás que adaptar o construir el instrumento de competencias.

Idea principal (p. 4)

“Thus a rubric guides a student in the process of self-assessment but does not provide feedback by itself.” (p. 4)

Mi nota: La rúbrica es un instrumento de mediación, no un sustituto del docente. Encaja con tu idea de mediación didáctica.

Metodología (morado)

Metodología (p. 2)

“We agreed on a scale of 0–3 in the scoring rubrics to describe student work (0, missing; 1, inadequate; 2, needs some improvement; and 3, adequate) and devised descriptions of student work that could merit a particular score.” (p. 2)

Mi nota: Escala que puedes adaptar para puntuar guías y reportes de los estudiantes en cada ciclo.

Metodología (p. 2)

“This process was iterated until we achieved 80% or higher agreement among our scores.” (p. 2)

Mi nota: Criterio de acuerdo entre evaluadores. Si usas rúbrica, prevé un segundo evaluador para una parte de los trabajos y reporta el acuerdo.

Metodología (p. 5)

“For pedagogical purposes we have classified experimental investigations that students perform in introductory courses into three broad categories: observational experiments, testing experiments, and application experiments.” (p. 5)

Mi nota: Tipología útil para organizar las actividades de la secuencia: primero observar con el simulador, luego poner a prueba, luego aplicar.

Evidencia (verde)

Evidencia (p. 10)

“We found that the students’ abilities to design an experiment, to devise a mathematical procedure to solve an experimental problem, and to communicate the details of the procedure performance improved. The changes in the above abilities were statistically significant.” (p. 10)

Mi nota: Las habilidades de diseño mejoran en diez semanas con tareas y rúbricas; da una idea de la duración mínima razonable de cada ciclo.

Evidencia (p. 11)

“These results are encouraging as this rate of transfer for some abilities was much higher than the typical 20% transfer rate reported in other studies (this is transfer of a skill without a hint).” (p. 11)

Mi nota: Evidencia de transferencia sin andamiaje. Sugiere incluir en el postest una tarea de diseño sin guía, distinta de las del aula.

Tensiones y vacíos (rojo)

Tensión o vacío (p. 10)

“However, the changes in students’ ability to evaluate experimental uncertainties were not significant. We later found that another ability on which students do not improve is the evaluation of the effects of theoretical assumptions. It could be that guidelines for the students in the lab, asking them to evaluate the effects of assumptions and uncertainties, are not sufficient for them to actually do it.” (p. 10)

Mi nota: Incertidumbre y supuestos no mejoran solo con instrucciones. Un simulador propio podría introducir ruido o error a propósito para trabajar esto.

Tensión o vacío (p. 12)

“Here the instructor’s help is essential as the rubrics themselves do not provide content-related feedback.” (p. 12)

Mi nota: Límite del instrumento y argumento a favor de la mediación del docente durante el uso del simulador.

Citas para usar (naranja)

Cita para usar (p. 4)

“We emphasize that they need to try to design an experiment to rule out the hypothesis, not to support it.” (p. 4)

Mi nota: Principio de diseño citable: las guías deberían pedir experimentos que puedan refutar la hipótesis, no confirmarla.

Conexión con la tesis

Este artículo es la referencia más sólida para definir y operacionalizar las competencias experimentales del capítulo 2. Sus siete habilidades y la Tabla IV (identificar variables independientes y dependientes, diseñar un experimento confiable con el equipo disponible, decidir si se confirma la predicción, señalar fallas del diseño) se pueden mapear contra las dimensiones de José Luis (preguntas e hipótesis, control de variables, diseño, interpretación de datos y conclusión) y servir de base para un instrumento con rúbrica 0 a 3, puntuable en pretest, postest y en las guías de cada ciclo DBR. La idea de que la rúbrica guía pero no retroalimenta respalda que la mediación del docente sea parte del artefacto que se rediseña. El hallazgo sobre incertidumbre abre una posibilidad propia del simulador diseñado por el investigador: incluir variabilidad en las mediciones, cosa que muchos simuladores comerciales eliminan. La limitación es clara: todo proviene de cursos universitarios en Estados Unidos, así que adaptar el lenguaje de las rúbricas a estudiantes de secundaria rural de Lorica y validarlo con expertos es un paso que la tesis tiene que documentar.

Conectado a

  • Schwichow et al. (2016): metaanálisis sobre enseñar a controlar variables, la subhabilidad de identificar variables independientes y dependientes que Etkina incluye en el diseño experimental.
  • Pedaste et al. (2015): las fases del ciclo de indagación dan la secuencia; Etkina da las habilidades que se evalúan dentro de esas fases.
  • Gobert et al. (2015): evalúa el diseño y la conducción de experimentos dentro de un micromundo con minería de datos, un complemento a la rúbrica cuando el experimento ocurre en un simulador.
  • Wang et al. (2021): mide habilidades integradas (control de variables, interpretación de datos, gráficas) con simulaciones en secundaria, el nivel que falta en Etkina.
  • MOC - Mapa de contenidos

Mi reflexión

Preguntas orientadoras

Escoge una o responde varias. Graba en tus propias palabras (1 a 3 minutos).

  1. De las siete habilidades de Etkina, ¿cuáles entran en tu tesis y cuáles dejas fuera? Explica por qué, pensando en lo que se puede lograr en tres ciclos con tus estudiantes.
  2. Etkina pide diseñar experimentos para refutar la hipótesis, no para confirmarla. ¿Cómo redactarías una consigna así para un tema de Física de tu unidad?
  3. La evaluación de la incertidumbre no mejoró con solo pedirla. ¿Te animarías a que tu simulador produzca datos con error? ¿Qué ganarías y qué riesgo correrías?

Reflexión de voz

Graba tu reflexión sobre este texto usando el botón de abajo.


Colores Zettelkasten: azul = definición | amarillo = idea principal | morado = metodología | verde = evidencia | rojo = tensión o vacío | naranja = cita para usar