Marco Metodológico para el Paper Académico
1. Título oficial tentativo
Deuda cognitiva en educación técnica: un protocolo de intervención con chatbot socrático para el rediseño del aprendizaje universitario en contexto de IA generativa.
Motivo de selección: nombra el problema (deuda cognitiva) antes que la solución, protege la validez metodológica al no sobrevender generalización, y es consistente con el Documento Rector v1.1.
Alternativas descartadas
Opción A — Descriptiva/metodológica:
Rediseño del aprendizaje técnico universitario en contexto de IA generativa: un protocolo socrático para capturar proceso de razonamiento
Opción B — Posicionamiento crítico:
No prohíbas la IA, rediseña la clase: evidencia de un protocolo socrático que captura razonamiento técnico en ingeniería
2. Diseño de investigación
| Elemento | Especificación |
|---|---|
| Tipo | Investigación-acción con diseño cuasi-experimental de medidas repetidas |
| Paradigma | Mixto (cualitativo predominante, con métricas cuantitativas de apoyo) |
| Unidad de análisis | Trayectoria de razonamiento del estudiante a través de 5 sesiones |
| Variable independiente | Secuencia metodológica del protocolo (rastro → socrático → datos → decisión → transferencia) |
| Variable dependiente | Desplazamiento cognitivo en 4 dimensiones (D1–D4) |
| Control | El rastro inicial de Clase 1 (línea base intra-sujeto) |
3. Participantes
| Ítem | Descripción |
|---|---|
| Población | Estudiantes de Ingeniería Industrial, USACH |
| Asignatura | Máquinas y Equipos Industriales |
| Muestra | Cohorte completa del semestre (censo de conveniencia) |
| Criterio de inclusión | Asistencia obligatoria a Clase 1 (produce el rastro inicial = control intra-sujeto) + al menos 3 de las 4 sesiones restantes. Sin rastro de C1 el caso es analíticamente inútil aunque cumpla 4/5. |
| Consentimiento | Informado, firmado en Clase 1 |
4. Instrumentos de recolección de datos
| Instrumento | Clase | Qué captura |
|---|---|---|
| M1 — Rastro en papel (foto → AI Vision → BD) | 1–5 | Razonamiento pre-IA: línea base individual por sesión |
| M2 — Log de interacción PLAN (chatbot socrático/adversarial) | 1–4 | Trayectoria de refinamiento cognitivo bajo presión |
| M3 — Log de interacción BUILD (alumno evalúa documento con errores en chat) | 2–4 | Capacidad evaluativa: detección de errores, calidad argumentativa |
| M4 — Reflexión de cierre DD_30 | 1–5 | Evidencia de cambio intra-sesión (Δ_intra = M4 − M1) |
| Feedback al alumno (AGENT_SESION → WhatsApp, automático) | 1–5 | Retroalimentación SFL de proceso, nunca dimensional: describe hábitos cognitivos observados sin revelar niveles D1-D4. Ver §5.1 para ejemplos. |
| Informe analítico al profesor (AGENT_SESION → interfaz docente) | 1–5 | Análisis consolidado del desempeño del grupo |
| Informe longitudinal (AGENT_TRAYECTORIA → interfaz docente) | Post-C2 a C5 | Δinter, heatmap de trayectorias, detección de estancamientos/regresiones/saltos, comparación M1C1→C5 |
| Notas de observación docente | 1–5 | Comportamiento en aula, intervenciones |
| Clase | M1 (Papel) | M2 (Chat PLAN) | M3 (Chat BUILD) | M4 (Cierre DD_30) | Total |
|---|---|---|---|---|---|
| C1 | ✓ | ✓ (PLAN básico) | — | ✓ | 3 momentos |
| C2 | ✓ | ✓ (PLAN) | ✓ (BUILD) | ✓ | 4 momentos |
| C3 | ✓ | ✓ (PLAN) | ✓ (BUILD) | ✓ | 4 momentos |
| C4 | ✓ | ✓ (PLAN adversarial) | ✓ (BUILD) | ✓ | 4 momentos |
| C5 | ✓ | ✓ (NEUTRO) | — | ✓ | 3 momentos |
C1 no tiene BUILD por ser línea base (DD_21); C2-C4 tienen los 4 momentos completos con errores deliberados escalados; C5 retira BUILD y PLAN —el chatbot opera en modo NEUTRO— para medir transferencia sin andamiaje. M3 (BUILD) no se usa para calcular Δ_intra: se analiza como indicador independiente de capacidad evaluativa.
5. Procedimiento de análisis
5.1 Codificación (dual: IA + humano)
Codificación primaria (tiempo real, formativa): AGENT_SESION invoca a AGENT_ANALISTA_SFL sobre M1, M2, M3 y M4 automáticamente post-sesión para codificar D1-D4. Genera: (a) feedback de proceso al alumno vía WhatsApp, (b) informe analítico al profesor. No requiere revisión humana.
Codificación longitudinal (inter-sesión): AGENT_TRAYECTORIA invoca a AGENT_ANALISTA_SFL sobre los rastros M1 de sesiones consecutivas. Calcula Δinter = M1N − M1N−1 por dimensión. Detecta patrones: estancamientos (Δinter = 0 × 2 sesiones), regresiones (Δinter < 0), saltos (Δinter ≥ +2). Genera heatmap de trayectorias individuales. Se dispara post-C2, C3, C4 y C5 (acumulativo).
Contenido del feedback al alumno: El feedback es SFL de proceso, nunca dimensional. Describe hábitos cognitivos observados sin revelar niveles D1-D4 ni las dimensiones que se miden. Esta distinción es metodológicamente necesaria: si el alumno supiera qué se está midiendo, sus respuestas en sesiones siguientes podrían adaptarse a la métrica (características de demanda), inflando artificialmente Δinter y destruyendo la validez interna del estudio.
| Lo que SÍ dice (SFL de proceso) | Lo que NO dice (dimensional, prohibido) |
|---|---|
| "Conectaste varias variables pero tus cadenas causales eran de un solo eslabón. La próxima vez intenta trazar el camino completo: ¿qué causó qué, y eso qué provocó después?" | "Estás en D1 nivel 2. Necesitas más nexos causales para llegar a nivel 3." |
| "Cuando el chatbot te mostró datos contradictorios, revisaste tu hipótesis. Ese hábito te va a servir en el caso de la torre de enfriamiento." | "Tu D3 mejoró de nivel 1 a nivel 2. Sigue así." |
| "Tus variables estaban bien identificadas pero sin valores. En ingeniería, un dato sin número es una opinión." | "D2 nivel 1: te faltan participantes con modificación numérica." |
El primer tipo enseña a razonar. El segundo enseña a pasar un test.
Codificación para el paper (investigativa):
- Dos codificadores humanos independientes asignan niveles (1–4) en cada dimensión, sobre datos codificados (sin nombres). Los criterios se basan en recursos lingüísticos observables derivados de la Lingüística Sistémico-Funcional (Halliday & Matthiessen, 2014).
- Se calcula acuerdo inter-codificador con Cohen's κ ponderado. Umbral ≥ 0.80 para reporte publicable; κ ≥ 0.70 acepta solo análisis exploratorio.
- Desacuerdos se resuelven por consenso con un tercer evaluador.
- Dato metodológico adicional: se calcula κ entre AGENT_ANALISTA_SFL y codificadores humanos. Si κ_IA-humano ≥ 0.80, es hallazgo publicable sobre viabilidad de codificación automatizada de razonamiento.
5.2 Análisis cualitativo
- Análisis de contenido temático de rastros iniciales y producciones finales
- Comparación constante entre sesiones (progresión individual)
- Análisis de discurso de interacciones con chatbot (cambio superficial vs. estructural)
- Casos extremos: análisis profundo de estudiantes con máximo y mínimo desplazamiento
5.3 Análisis cuantitativo (descriptivo-exploratorio)
Dado un n esperado de 20–30 (cohorte completa de una asignatura), el componente cuantitativo se reporta como descriptivo-exploratorio, no inferencial confirmatorio.
- Media y desviación estándar de niveles por dimensión y por clase
- Δintra y Δinter por dimensión (medianas, rangos intercuartílicos)
- Wilcoxon emparejado para diferencias entre sesiones: solo se reporta acompañado de (a) tamaño de efecto r de Wilcoxon o d de Cohen para muestras pareadas, y (b) declaración explícita de poder estadístico. Para detectar un efecto medio (d ≈ 0.5) con α = 0.05 y poder 0.80, se requieren ~35 pares; con n < 35, los p-values se interpretan como exploratorios.
- Visualización: heatmap de trayectorias individuales
6. Validez y confiabilidad
| Criterio | Estrategia |
|---|---|
| Validez interna | Diseño intra-sujeto (cada estudiante es su propio control); secuencia fija; captura antes/después |
| Validez externa | Documentación completa del protocolo para replicación; caso técnico transferible a otras ingenierías |
| Credibilidad | Triangulación de fuentes (rastro + chatbot + observación docente); member checking |
| Transferibilidad | Descripción densa del contexto; protocolo público y replicable |
| Confiabilidad | Codificación doble con κ ponderado ≥ 0.80 para publicación (≥ 0.70 solo exploratorio); audit trail del análisis |
| Confirmabilidad | Todos los datos brutos preservados; decisiones de codificación documentadas |
7. Consideraciones éticas
- Consentimiento informado con derecho a retiro sin consecuencia académica
- Anonimización de datos en publicación
- El piloto NO afecta calificaciones del curso
- Datos almacenados en repositorio institucional protegido
- Aprobación del comité de ética de la Facultad (tramitar antes del inicio)
8. Limitaciones anticipadas
- Muestra por conveniencia: una sola cohorte, una sola asignatura
- Efecto Hawthorne: los estudiantes saben que participan en un piloto
- Sin grupo control: diseño intra-sujeto mitiga parcialmente, pero no hay comparación con clase sin protocolo
- Generalización limitada: caso técnico específico (hidráulica) puede no transferir a otras disciplinas sin adaptación
- Dependencia del chatbot: resultados pueden variar según plataforma y configuración del modelo
9. Estructura propuesta del paper
- Introducción — Problema: IA generativa y deuda cognitiva en educación superior. Brecha: las respuestas actuales (prohibir, ignorar) no resuelven el problema de diseño instruccional. Contribución: protocolo socrático que captura proceso de razonamiento.
- Marco teórico — Deuda cognitiva (concepto propuesto); método socrático y presión cognitiva; transferencia como evidencia de aprendizaje profundo; IA como herramienta pedagógica vs. sustituto cognitivo.
- Metodología — Diseño del estudio; participantes y contexto; el protocolo: 5 sesiones, secuencia, roles; instrumentos y procedimiento de análisis.
- Resultados — Trayectorias de desplazamiento cognitivo (D1–D4); análisis por clase; casos ilustrativos; evidencia de transferencia (Clase 5).
- Discusión — ¿El protocolo previene la deuda cognitiva? ¿Qué fase es más crítica? Implicaciones para diseño instruccional universitario. Limitaciones y futuras investigaciones.
- Conclusiones — El protocolo es ejecutable, medible y replicable. La secuencia importa: rastro antes, IA después. La transferencia cercana como evidencia de internalización.
10. Revistas objetivo
| Revista | Área | Factor de impacto | Justificación |
|---|---|---|---|
| Computers & Education | Ed-Tech | ~12 | Máximo impacto en tecnología educativa |
| Studies in Higher Education | Educ. Superior | ~4 | Enfoque en pedagogía universitaria |
| Int. Journal of Engineering Education | Ing. + Educ. | ~1.5 | Público exacto del piloto |
| Teaching in Higher Education | Educ. Superior | ~3 | Innovación pedagógica |
| Revista Educación en Ingeniería (ACOFI) | Regional | — | Visibilidad latinoamericana, español |
11. Cronograma de publicación
| Fase | Fecha estimada | Entregable |
|---|---|---|
| Ejecución del piloto | Mayo–Junio 2026 | Datos brutos de 5 sesiones |
| Codificación y análisis | Julio 2026 | Dataset codificado, κ calculado |
| Primer borrador | Agosto 2026 | Manuscrito completo |
| Revisión interna | Septiembre 2026 | Versión corregida |
| Envío a revista | Octubre 2026 | Submission |