Semana 4 · Evidencia E3 · Apartado de la plantilla: Instrumentos
Propósito. Definir con qué se recogerán los datos de cada objetivo y cómo se asegurará la calidad de los instrumentos.
Comprender
Cada dato que se recoja debe tener un propósito y un análisis previsto. La matriz objetivo–categoría–instrumento–análisis hace visible esa relación: si un instrumento no responde a ningún objetivo, sobra; si un objetivo no tiene instrumento, falta.
La calidad de un instrumento se planea desde el anteproyecto: validez de contenido mediante juicio de expertos, pilotaje con población semejante, y, cuando aplica, cálculo de confiabilidad. Un instrumento generado o sugerido por IA no está validado por ese hecho; requiere el mismo proceso.
En el anteproyecto se presentan borradores de los instrumentos y el plan de validación. Las versiones definitivas se ajustan después del pilotaje.
Conceptos clave
Operacionalización, categorización y matriz pregunta–datoumbral
Cada dato tiene propósito y análisis previsto.
Error frecuente: Instrumentos que no responden a ningún objetivo.
Calidad de instrumentos
Validez de contenido, juicio de expertos y pilotaje.
Error frecuente: Dar por validado un instrumento generado con IA.
Pasos
- Construya la matriz con objetivos, categorías, subcategorías o indicadores, técnica, instrumento, fuente y análisis.
- Redacte el borrador de cada instrumento a partir de las definiciones operativas.
- Planee el juicio de expertos: número, perfil y criterios.
- Planee el pilotaje y los ajustes.
- Revise que cada pregunta o ítem tenga una categoría de origen.
Preguntas para pensar
- ¿Qué objetivo responde cada instrumento?
- ¿Cada ítem nace de una categoría del marco?
- ¿Quiénes pueden validar el contenido y con qué criterios?
- ¿Con quién lo pilotará sin afectar a los participantes del estudio?
Errores frecuentes
Instrumentos que no responden a ningún objetivo.
Por qué: Generan datos que no se analizan.
En su lugar: Elimine lo que no aparece en la matriz.
Dar por validado un instrumento generado con IA.
Por qué: La IA no garantiza validez ni pertinencia.
En su lugar: Someta el instrumento a juicio de expertos y pilotaje.
Adoptar un instrumento ajeno sin adaptarlo.
Por qué: Puede no corresponder a la población o al idioma.
En su lugar: Documente la adaptación y valídela en su contexto.
Ejemplo
Ejemplo ficticio, sin datos reales de estudiantes.
Versión débil
Se aplicará una encuesta de satisfacción con el chatbot y una prueba de lectura tomada de internet.
Versión mejorada
Objetivo 3 (valorar cambios en la comprensión inferencial) → categoría: comprensión inferencial; subcategorías: inferencia causal, de intención y de relación → instrumento: prueba de 18 ítems adaptada al contexto → análisis: comparación de desempeño por subcategoría entre ciclos. Validación: juicio de tres expertos en didáctica de la lectura con criterios de suficiencia, claridad, coherencia y relevancia; pilotaje con un grupo de décimo.
La versión mejorada traza el recorrido completo desde el objetivo hasta el análisis y planea la validación.
Compruebe su comprensión
Antes de seguir
- La matriz cubre todos los objetivos específicos.
- Cada ítem tiene una categoría de origen.
- Presento borradores de todos los instrumentos.
- Planeé juicio de expertos y pilotaje.
- Ningún instrumento queda fuera de la matriz.
Producto de la estación: Matriz objetivo–categoría–instrumento–análisis, borradores y plan de validación.
El trabajo con el agente y el registro en el portafolio estarán disponibles en una próxima versión.