Saltar al contenido
assignmentEvaluación y Medición

Toma de Decisiones Basada en Datos

Continuar, cambiar o terminar una intervención es una decisión — y puede tomarse mirando los datos.

Traducido del original en portugués. Leer el original (Português)

boltEn resumen

Toda intervención llega, tarde o temprano, a una encrucijada: seguir igual, ajustar o terminar. La toma de decisiones basada en datos es el compromiso de responder a esa pregunta mirando el desempeño medido de la persona — registrado de forma continua y representado en un gráfico — en vez de confiar en la impresión de quien enseña. Tiene tres piezas: una medida confiable de la conducta que realmente importa; un criterio definido de antemano (adónde se quiere llegar, y hasta cuándo); y una regla de decisión acordada con antelación, que indica qué hacer cuando los datos queden por debajo, por encima o justo en ese criterio. No es burocracia: en la investigación educativa, dar seguimiento sistemático al desempeño mejora los resultados — y la mejora es mayor justamente cuando los datos se convierten en gráfico y se leen con reglas explícitas. En el Análisis de la Conducta, esto no es solo buena práctica: es una exigencia ética.

Definición técnica

La toma de decisiones basada en datos (data-based decision making) es el uso sistemático de datos de desempeño — obtenidos mediante medida directa y repetida de la conducta objetivo, en condiciones comparables — para decidir si se continúa, modifica o termina un procedimiento de enseñanza o intervención. Es la forma práctica que adoptan dos de las dimensiones descritas por Baer, Wolf y Risley (1968): la analítica (demostrar que el cambio se debe a lo que se hizo) y la eficaz (producir un cambio de magnitud relevante para la vida de la persona). Corresponde a lo que la literatura educativa llama evaluación formativa o monitoreo del progreso: evaluación realizada durante el proceso, para corregir el rumbo, y no solo al final, para constatar el resultado. En el Ethics Code for Behavior Analysts (BACB), los estándares 2.17 (“Collecting and Using Data”) y 2.18 (“Continual Evaluation of the Behavior-Change Intervention”) hacen obligatoria la práctica: mostrar los datos gráficamente y usarlos para decidir si se continúa, modifica o termina el servicio, y tomar acción correctiva cuando los datos indiquen que los resultados deseados no se están logrando.

Por qué la impresión no basta

Nadie necesita mala fe para equivocarse sobre su propio trabajo. Una intervención que produce efecto a lo largo de varias semanas simplemente no es perceptible día a día — y una que no produce ningún efecto, tampoco. La memoria guarda las sesiones memorables, no las típicas; la semana buena pesa más en el recuerdo que las tres medianas que vinieron antes; y la expectativa de quien planificó el procedimiento inclina la lectura a su favor. Por eso “va bien” puede significar, sin que nadie lo note, simplemente “me gusta lo que estoy haciendo”.

El problema tiene dos caras, y las dos salen caras. Por un lado, insistir demasiado tiempo en algo que no está funcionando: cada semana perdida es una semana en que la persona podría haber estado aprendiendo con otro procedimiento. Por otro, abandonar demasiado pronto algo que estaba funcionando despacio, cambiando una ganancia real por un reinicio. Sin medida, ambas cosas ocurren y nadie se entera.

El antídoto no es desconfiar del juicio profesional — es darle algo mejor para mirar. Como resumieron Bushell y Baer en 1994, en un capítulo de título casi panfletario, “Measurably superior instruction means close, continual contact with the relevant outcome data. Revolutionary!” (una enseñanza comprobadamente superior significa contacto cercano y continuo con los datos de resultado relevantes. ¡Revolucionario!), lo que separa la instrucción que se sabe buena de la que se supone buena es la cercanía con los datos. Los datos no existen para probar que el profesional tenía razón; existen para que el error aparezca pronto, mientras todavía hay tiempo de corregirlo.

El Análisis de la Conducta heredó esa postura de forma radical. En la Enseñanza de Precisión (Precision Teaching), Ogden Lindsley resumió el enfoque como “basar las decisiones educativas en cambios en frecuencias de desempeño automonitoreadas de forma continua, mostradas en gráficos estandarizados de celeración”. Uno de sus principios es la frase que mejor resume el espíritu de todo este artículo: “quien aprende es quien sabe”. Si los datos muestran que la persona no está progresando, lo que necesita cambiar es el procedimiento — no quien aprende.

El ciclo de la decisión

La decisión basada en datos no es un momento al final del proceso: es un ciclo que gira durante todo el seguimiento, a veces cada semana, a veces en cada sesión. Cada vuelta completa produce una elección explícita — y esa elección es la entrada de la vuelta siguiente.

Definir objetivo y criterio 1 Medir siempre igual 2 Pasarlo al gráfico 3 Comparar con el criterio 4 Decidir y actuar 5 ¿QUÉ ESTÁN DICIENDO LOS DATOS? la decisión de hoy es el punto de partida de la próxima medida
El ciclo no tiene un final natural: gira mientras dure el seguimiento. Fíjate en que la etapa 1 viene antes de cualquier dato — ahí es donde se define qué va a contar como progreso, y por eso no puede escribirse después de ver el resultado. Y que la etapa 5 es una elección registrada, con fecha: “mantuvimos el procedimiento”, “aumentamos el apoyo”, “cambiamos el reforzador”. Una decisión que no queda escrita no puede evaluarse después.

Cada etapa depende de la anterior, y es común que el ciclo se trabe en alguna de ellas. Sin una definición operacional, dos personas miden cosas distintas y el gráfico se convierte en ruido. Sin un registro confiable, la comparación no se sostiene. Sin una línea base, no hay con qué comparar. Y sin un buen análisis visual, el gráfico terminado no produce ninguna decisión — se queda ahí, bonito, sin que nadie lo lea.

La regla de decisión: acordada antes, aplicada después

El punto que más distingue la práctica seria de su imitación es este: la regla de decisión se define al inicio, junto con el objetivo — no cuando los datos ya están en la pantalla. Definir la regla de antemano significa responder, por escrito, a tres preguntas:

  • ¿Adónde queremos llegar, y para cuándo? — el criterio de desempeño y el plazo. De ahí nace la línea de objetivo (aim line): el trazo que conecta el punto de partida con la meta en la fecha prevista, mostrando el ritmo de progreso necesario.
  • ¿Cuántas medidas vamos a mirar antes de concluir algo? — porque un punto malo es un día malo, no un fracaso. En los materiales del MTSS Center y del National Center on Intensive Intervention (NCII) se recomienda reunir de seis a nueve medidas antes de la primera lectura formal.
  • ¿Qué haremos ante cada resultado posible? — qué caracteriza un progreso suficiente, un progreso insuficiente y un resultado inconcluso, y qué acción corresponde a cada uno.

Una de las reglas más difundidas en el monitoreo del progreso escolar es la regla de los cuatro puntos, atribuida a Lynn y Douglas Fuchs y ampliamente adoptada en programas de individualización basada en datos. Después de reunir medidas suficientes, se observan los cuatro puntos más recientes en relación con la línea de objetivo:

los 4 puntos más recientes línea de objetivo mediana de la línea base meta desempeño → semanas → 4 puntos por debajo → cambiar la intervención
La línea de objetivo traduce la meta en ritmo: muestra dónde tendría que estar el desempeño cada semana para llegar a la meta en la fecha acordada. Al principio, los puntos oscilan a su alrededor — una situación legítimamente inconclusa. Cuando las cuatro medidas más recientes quedan todas por debajo de la línea, la regla ya había dicho qué hacer: cambiar algo en la intervención. Nota que la regla no dice qué cambiar; solo dice que seguir igual dejó de ser una opción defendible.

Aplicada a este gráfico, la regla de los cuatro puntos tiene tres desenlaces y ninguna ambigüedad:

  • Los cuatro puntos por encima de la línea — el progreso supera lo previsto. Se considera elevar la meta o empezar a desvanecer los apoyos.
  • Los cuatro puntos por debajo de la línea — el progreso es insuficiente. Es momento de cambiar la intervención.
  • Puntos en ambos lados — todavía no se puede concluir nada. Se mantiene el procedimiento y se reúnen más medidas.

Existen otras reglas igualmente legítimas — comparar la línea de tendencia de los datos con la línea de objetivo, o usar la mediana de las tres últimas medidas, por ejemplo —, y en la práctica clínica del Análisis de la Conducta es común que el criterio tome la forma de un criterio de dominio (“cierto porcentaje de aciertos independientes a lo largo de un número acordado de sesiones consecutivas”). Lo que estas formas tienen en común no es la aritmética: es el hecho de haber sido escritas de antemano, de modo que nadie tenga que decidir, con el gráfico en pantalla, qué contaría como un resultado aceptable.

verified

Qué muestra la investigaciónEl metaanálisis clásico sobre el tema es de Lynn y Douglas Fuchs (1986), que reunió 21 estudios controlados y 96 tamaños del efecto sobre evaluación formativa sistemática en educación. El efecto promedio ponderado sobre el aprendizaje fue de alrededor de 0,70 desviaciones estándar — sustancial, para un procedimiento que no cambia qué se enseña, solo cómo se le da seguimiento a lo que se está enseñando. Y el hallazgo más útil está en los moderadores identificados por el propio estudio: el tamaño del efecto dependía de cómo se mostraban y evaluaban los datos. Lecturas secundarias de este conjunto de estudios describen ese patrón como una escalera, en valores aproximados — solo recolectar los datos produciría un efecto modesto, alrededor de 0,26; convertirlos en gráfico llevaría a algo cercano a 0,70 (un escalón que prácticamente coincide con el promedio general del estudio, ya que graficar era el caso típico); y agregar reglas explícitas de decisión para analizar el gráfico llegaría a cerca de 0,90. La lección es directa: la carpeta de planillas no le enseña nada a nadie. La ganancia viene de ver y de decidir.

Las cuatro respuestas posibles

Cada vuelta del ciclo termina en una de estas cuatro decisiones. No son equivalentes, y confundirlas es una fuente común de error — sobre todo tratar un “todavía no se puede decir” como si fuera un “hay que cambiar algo”. Explora cada una:

Continuar como está

Los datos acompañan la línea de objetivo: el progreso va al ritmo previsto. La decisión correcta es no tocar nada — y eso es una decisión de verdad, no la ausencia de una. Existe una tentación real de “mejorar” un procedimiento que está funcionando agregando componentes; sin embargo, cada adición es una variable más y una posibilidad menos de poder explicar el efecto.

Una situación distinta es la de quien supera lo previsto de forma consistente. Ahí el propio criterio resultó modesto, y el paso siguiente no es quedarse quieto: es elevar la meta o empezar a reducir los apoyos. Eso ya es un cambio planificado — y es el segundo caso que se trata en la pestaña “Cambiar”.

Continuar y recolectar más datos

Los puntos están en ambos lados de la línea, o varían demasiado como para sostener cualquier lectura. El veredicto honesto es “todavía no se puede decir”, y eso no es un fracaso: es la constatación de que faltan medidas.

Esta es la decisión más incómoda, porque parece inacción — y precisamente por eso tiene que estar prevista en la regla. Sin eso, la presión por “hacer algo” lleva a cambiar el procedimiento ante cada oscilación, y un procedimiento que cambia cada semana nunca llega a ponerse a prueba. Si la variabilidad es muy alta, la pregunta que hay que hacerse es sobre la medida y sobre la consistencia de la aplicación, no sobre la técnica.

Cambiar la intervención

Los datos indican un progreso insuficiente. La regla dice que seguir igual dejó de ser una opción; no dice qué poner en su lugar. Esa parte viene de la evaluación funcional, de la literatura de evidencia y de lo que ya se sabe sobre la persona.

No todo cambio nace de un resultado malo. Cuando los datos superan la línea de objetivo de forma consistente, el cambio es hacia arriba: una meta más ambiciosa — que es un ajuste del criterio, no de la intervención — o el inicio del desvanecimiento de los apoyos, que es un cambio de procedimiento como cualquier otro y merece los mismos cuidados.

Una recomendación práctica atraviesa toda el área: cambia una cosa a la vez. Si el reforzador, el nivel de apoyo y el criterio de acierto cambian todos en la misma semana, y el desempeño mejora, no hay forma de saber a qué atribuir la mejora — ni qué preservar cuando algo vuelva a trabarse. Antes de cambiar la técnica, también vale la pena verificar lo más probable: ¿se estaba aplicando el procedimiento tal como se había planeado?

Terminar o avanzar

Se alcanzó el criterio. Terminar es una decisión de datos como cualquier otra — y una que suele posponerse por inseguridad, prolongando una enseñanza que ya cumplió su función.

Terminar bien rara vez significa dejar de medir. El paso siguiente es verificar si la conducta se mantiene sin el procedimiento y si aparece en los lugares y con las personas que importan — que es el tema de la generalización y mantenimiento. También es el momento de preguntarles a las personas involucradas si el resultado hizo una diferencia real en su vida: la validez social es una pregunta que el gráfico no responde por sí solo.

Dónde se tropieza la decisión basada en datos

Hablar de “datos” da un aura de objetividad que no siempre corresponde a lo que está ocurriendo. Da vuelta las tarjetas para ver las formas más comunes de conservar toda la apariencia del método y perder la sustancia:

warning

Un gráfico no elige el objetivoLos datos responden bien a dos preguntas: ¿cambió? y ¿cambió por lo que hicimos?. No responden a la tercera, que es la más importante: ¿valía la pena cambiar esto?. Un número puede subir de forma impecable hacia un objetivo que la propia persona no eligió, o que sirve más a la conveniencia de quienes la rodean que a su vida. Por eso la elección de los objetivos pasa por el consentimiento y asentimiento y por la validez social — y por eso reducir manifestaciones de identidad, como las estereotipias/stimming, no se convierte en un objetivo legítimo solo porque sea fácil de contar. Un buen dato con un objetivo equivocado sigue siendo un objetivo equivocado.

evaluación formativa monitoreo del progreso regla de decisión línea de objetivo (aim line) criterio de dominio regla de los cuatro puntos

Pon a prueba tu comprensión

quiz

Cuestionario rápido

Tres preguntas para fijar el concepto. Verás la explicación al instante.

Para saber más

  1. Cooper, J. O.; Heron, T. E.; Heward, W. L. Applied Behavior Analysis (Análisis de la Conducta Aplicado). 3ª ed. Pearson, 2020 — medida continua, representación gráfica y decisiones sobre programas de enseñanza.
  2. Baer, D. M.; Wolf, M. M.; Risley, T. R. “Some current dimensions of applied behavior analysis”. Journal of Applied Behavior Analysis, 1(1), 91–97, 1968 — las dimensiones analítica y eficaz.
  3. Behavior Analyst Certification Board (BACB). Ethics Code for Behavior Analysts, 2020 (vigente desde el 1/1/2022) — estándares 2.17 (recolección y uso de datos) y 2.18 (evaluación continua de la intervención).
  4. Fuchs, L. S.; Fuchs, D. “Effects of systematic formative evaluation: a meta-analysis”. Exceptional Children, 53(3), 199–208, 1986 — 21 estudios controlados; efecto promedio alrededor de 0,70, moderado por la exhibición de los datos y las reglas de evaluación.
  5. Lindsley, O. R. “Precision teaching: discoveries and effects”. Journal of Applied Behavior Analysis, 25(1), 51–57, 1992 — decisiones educativas a partir de frecuencias monitoreadas de forma continua.
  6. Bushell, D.; Baer, D. M. “Measurably superior instruction means close, continual contact with the relevant outcome data. Revolutionary!”. In: Gardner, R. III et al. (Eds.), Behavior Analysis in Education: Focus on Measurably Superior Instruction, pp. 3–10. Brooks/Cole, 1994.
  7. National Center on Intensive Intervention (NCII). Decision Rules for Analyzing Academic Progress Monitoring Data — la regla de los cuatro puntos, la línea de tendencia y la mediana de las últimas tres medidas. Ver también MTSS Center, Better Instructional Decision Making With Progress Monitoring — los tres desenlaces de la regla y el número de medidas antes de la primera lectura.
  8. The Wing Institute. What Is the Effect of Formative Evaluation on Student Achievement? — una lectura por componentes de los resultados de Fuchs & Fuchs (1986): recolectar, representar en gráfico y aplicar reglas de decisión.
info

Esta entrada tiene carácter educativo y no sustituye la evaluación, el diagnóstico ni el tratamiento por parte de un profesional de la salud cualificado. Cada persona es única: para un caso concreto, busca orientación individualizada.

¿Buscas orientación profesional?

El Instituto Walden4 es un centro de psicología y educación en Brasilia, Brasil, que ofrece evaluación y atención basadas en evidencia para autismo, psicoterapia y desarrollo, de forma presencial y en línea. Nuestro equipo atiende en portugués; escríbenos y buscaremos la mejor manera de ayudarte.

chat Escríbenos por WhatsApp
chat

Conta Walden4

Entrar

Use o e-mail e a senha da sua conta.