Zheng (2015): La mitad de los DBR hace un solo ciclo y no documenta la revisión
Referencia (APA 7): Zheng, L. (2015). A systematic literature review of design-based research from 2004 to 2013. Journal of Computers in Education, 2(4), 399–420. https://doi.org/10.1007/s40692-015-0036-z
Capítulo: Cap. 3 – Método (referencia) · Subcategorías: 3.a Investigación basada en diseño y métodos mixtos · Mapa: MOC - Mapa de contenidos
Resumen
Lanqin Zheng, de la Universidad Normal de Pekín, revisa 162 artículos de investigación basada en diseño (DBR) publicados entre 2004 y 2013 en 219 revistas de educación indexadas en el SSCI. Parte de 479 artículos localizados por palabras clave, aplica seis criterios de inclusión y codifica cada estudio con tres codificadores (acuerdo superior a 0,9). Analiza población, contexto, dominio, método, fuentes de datos, tipo de intervención, revisión de la intervención, número de iteraciones, duración y resultados medidos, y compara los periodos 2004–2008 y 2009–2013.
Los datos que más te sirven están en la Tabla 3. El 50 % de los estudios hizo una sola iteración, el 32,1 % dos, el 12,96 % tres y menos del 5 % cuatro o más. El 74,07 % revisó la intervención, pero solo el 60,49 % informó qué cambió, y esa proporción bajó en el segundo periodo. La intervención tecnológica es la más frecuente (53,09 %), las ciencias naturales son el dominio más estudiado (37,65 %) y la secundaria aparece en el 16,05 % de los estudios. Los datos de proceso, como los logs, son apenas el 13,78 % de las fuentes. Ningún estudio usó solo métodos cuantitativos: el 72,84 % se clasificó como cualitativo y el 27,16 % como mixto. Los resultados medidos son sobre todo cognitivos (48,16 %).
Hay que leerla con cuidado. Es una revisión descriptiva de solo artículos en inglés y no analiza cómo evoluciona el diseño entre ciclos, algo que la autora reconoce. Tiene además problemas de reporte: al menos un contraste se presenta como “el aumento más significativo” con p > 0,05, el texto habla de “the second 2 years” para un periodo de cinco años, y la conclusión dice que la mayoría hace un solo ciclo cuando la cifra es exactamente el 50 %. Cita los porcentajes descriptivos y deja de lado las pruebas chi cuadrado.
Citas por color
Las citas son textuales del PDF (Zotero/PDF actualizacion/Zheng-2015.pdf) y las páginas son las impresas de la revista (399–420). El PDF aún no está subrayado en Zotero; estas citas guían ese subrayado.
Definiciones (azul)
Definición (p. 399)
“Being situated in a real context, DBR focuses on examining a particular intervention by continuous iteration of design, enactment, analysis, and redesign” (p. 399)
Mi nota: Definición breve de DBR con las cuatro fases del ciclo. Te sirve para mostrar que pilotaje, ciclo 1 y ciclo 2 recorren cada uno diseño, implementación, análisis y rediseño.
Definición (p. 403)
“Iteration frequency refers to the number of times the intervention is implemented during the whole research.” (p. 403)
Mi nota: Con esta definición, tu estudio tiene tres implementaciones (pilotaje más dos ciclos). Aclara en el capítulo 3 si cuentas el pilotaje como iteración o como fase previa, porque cambia dónde te ubicas frente a estos datos.
Definición (p. 403)
“Revision of intervention refers to whether the intervention was revised and specified.” (p. 403)
Mi nota: La revisión tiene dos partes: cambiar la intervención y dejar escrito qué cambió. Las dos deben verse en tu informe entre ciclos.
Ideas principales (amarillo)
Idea principal (p. 400)
“As an emerging paradigm, DBR highlights how the design principles evolved by multiple iterations as well as what kinds of intervention can lead to improved outcomes.” (p. 400)
Mi nota: El producto de la DBR no es solo el simulador, sino los principios de diseño y cómo cambian de un ciclo a otro. Tu H2 (más ganancia en el ciclo 2) es una forma de mirar esa evolución.
Idea principal (p. 409)
“Second, the findings of the present study suggest that multiple iterations are required in DBR so as to refine the theory, methods, or tools.” (p. 409)
Mi nota: Respaldo para no quedarte en un solo ciclo. Dos ciclos después de un pilotaje cumplen esta recomendación dentro de lo que permite un periodo académico.
Metodología (morado)
Metodología (p. 401)
“In the first stage, 479 papers related on DBR were selected using keyword and paper title searches within the 219 journals.” (p. 401)
Mi nota: Dato del corpus para tu tabla de revisiones sobre DBR: de 479 artículos localizados quedaron 162 tras los criterios de inclusión.
Metodología (p. 404)
“Three raters manually and independently coded all of the articles based on the aforementioned schemes.” (p. 404)
Mi nota: La codificación tiene control de acuerdo entre jueces, lo que da cierta solidez a los porcentajes descriptivos aunque las pruebas estadísticas estén mal reportadas.
Evidencia (verde)
Evidencia (p. 408)
“In terms of iteration frequency, 50 % of the DBR only conducted one cycle in the past decade.” (p. 408)
Mi nota: La cifra central para tu justificación. Según la Tabla 3, solo cerca del 18 % de los estudios hizo tres o más implementaciones, así que pilotaje más dos ciclos te deja por encima de la práctica habitual.
Evidencia (p. 408)
“As shown in Table 3, 60.49 % of DBR in the past decade reported what had been revised in terms of intervention.” (p. 408)
Mi nota: Cuatro de cada diez estudios no cuentan qué cambiaron. Si documentas los cambios del pilotaje al ciclo 1 y del ciclo 1 al ciclo 2, eso será una fortaleza metodológica visible.
Evidencia (p. 406)
“In the past decade, the technological intervention was the major type of intervention used in DBR.” (p. 406)
Mi nota: Tu tesis entra en la línea más común de la DBR, la intervención tecnológica. Lo que la distingue es que diseñas el simulador y su mediación, no solo que lo pruebas.
Tensiones y vacíos (rojo)
Tensión o vacío (p. 409)
“This indicated that there was a tendency among researchers towards not providing the details of revising the design and intervention.” (p. 409)
Mi nota: Vacío que puedes cubrir con un registro de cambios por ciclo: qué se modificó, por qué (qué dato del log o de la rúbrica lo motivó) y qué principio de diseño se ajustó.
Tensión o vacío (p. 409)
“This can be explained by the findings of Anderson and Shattuck (2012) that multiple iterations and cycles indeed go beyond the time and resources available to researchers.” (p. 409)
Mi nota: Reconocimiento explícito de que hacer muchos ciclos choca con el tiempo y los recursos. Es tu argumento para defender ante el jurado por qué un periodo académico con pilotaje más dos ciclos es una decisión razonable y no una carencia.
Tensión o vacío (p. 410)
“It would be very valuable to thoroughly analyze how design functions and evolves in different cycles.” (p. 410)
Mi nota: La autora deja abierto justo lo que tu tesis puede mostrar: cómo funciona y cambia el diseño entre ciclos, con logs y rúbricas como evidencia.
Citas para usar (naranja)
Cita para usar (p. 399)
“Furthermore, it was found that most DBR only conducted one cycle of iteration.” (p. 399)
Mi nota: Frase corta para el capítulo 3. Úsala junto con la cifra exacta (50 %) para no exagerar lo que dice la revisión.
Conexión con la tesis
Zheng (2015) te da el respaldo empírico para el número de iteraciones. Si la mitad de los 162 estudios DBR revisados hizo un solo ciclo (p. 408) y solo cerca del 18 % llegó a tres implementaciones o más, tu diseño de pilotaje más dos ciclos en un periodo académico queda por encima de la práctica habitual, y la propia revisión reconoce que más ciclos suelen exceder el tiempo y los recursos disponibles (p. 409). La revisión también marca una exigencia: el 40 % de los estudios no informó qué cambió entre iteraciones (p. 408), y la autora pide analizar cómo evoluciona el diseño entre ciclos (p. 410). Eso te obliga a llevar un registro explícito de cambios del pilotaje al ciclo 1 y del ciclo 1 al ciclo 2, ligado a evidencias concretas (logs de control de variables, rúbricas de competencias experimentales) y a los principios de diseño que ajustas. El dato de que los logs son menos del 14 % de las fuentes en DBR (Tabla 2) suma un argumento a favor de tus simuladores propios con registro de interacción. Cita los porcentajes descriptivos y evita las pruebas de significancia del artículo, que están mal reportadas.
Conectado a
- Anderson y Shattuck (2012): la revisión previa que Zheng retoma para explicar por qué los ciclos múltiples exceden tiempo y recursos.
- McKenney y Reeves (2018): el manual de investigación educativa de diseño que orienta cómo planear y documentar los ciclos.
- Haagen-Schützenhöfer y Hopf (2020): un ejemplo de DBR en Física escolar con principios de diseño explícitos y revisados entre ciclos.
- Sandoval (2014): el mapa de conjeturas, una herramienta para dejar escrito qué cambia en el diseño y por qué.
- MOC - Mapa de contenidos
Mi reflexión
Preguntas orientadoras
Escoge una o responde varias. Graba en tus propias palabras (1 a 3 minutos).
- ¿Cuentas el pilotaje como una iteración más o como una fase previa a los dos ciclos? ¿Cómo lo explicarías al jurado usando los datos de esta revisión?
- ¿Qué formato usarás para registrar qué cambia del pilotaje al ciclo 1 y del ciclo 1 al ciclo 2, de modo que no caigas en el 40 % que no informa sus revisiones?
- Si tuvieras que defender ante el jurado que dos ciclos bastan para un periodo académico en Lorica, ¿qué argumentos de tiempo, recursos y evidencia darías?
Reflexión de voz
Graba tu reflexión sobre este texto usando el botón de abajo.
Colores Zettelkasten: azul = definición | amarillo = idea principal | morado = metodología | verde = evidencia | rojo = tensión o vacío | naranja = cita para usar