La recopilación y el análisis de datos cuantitativos o estadísticos juegan un papel importante en la forma en cómo se cuentan las historias en nuestro mundo contemporáneo. Se piensa comúnmente que aprovechar los conocimientos proporcionados por el análisis de estos datos nos permite evaluar de manera más clara y eficiente el mundo que nos rodea y realizar cambios que pueden demostrar ser impactantes y positivos. Al igual que muchos otros sectores de la sociedad, parece que el mundo educativo ha adoptado la idea de que las soluciones basadas en datos son el camino más eficiente para mejorar los resultados. Al desarrollar una mayor capacidad para comprender y utilizar datos, las escuelas y los distritos escolares esperan poder producir una imagen más precisa de cómo funcionan las escuelas y cómo se pueden cambiar para mejorar. Sin embargo, los miembros de la comunidad del área metropolitana han notado que recopilar y analizar datos en si no es suficiente para mejorar las escuelas. Si bien los datos pueden ser instructivos para evaluar el desempeño y establecer futuras direcciones de políticas, el uso actual de los datos por parte de los distritos escolares en el área metropolitana representa incorrectamente los valores de algunas comunidades.
Una dificultad en la utilización de datos es llegar inicialmente a un consenso sobre qué información debe recopilarse en primer lugar. Para muchos miembros de la comunidad, los datos que describen con precisión la “experiencia vivida” de las personas en una escuela es lo que más vale la pena recopilar. Un miembro de la comunidad que trabaja reimaginando los datos en DPS lo expresó de esta manera,“la forma en que se usan los datos ahora no es para ese modelo de aprendizaje continuo. [Se] usa de una manera para tratar de contar una historia que no creo que pueda contar con el conjunto limitado de información que tienen. Y eso es lo que creo que es peligroso. Eso quizás es lo que está escuchando de los educadores incluyéndome a mí.” Señaló que el desajuste entre la experiencia vivida y lo que se puede contar con datos cuantitativos puede tener consecuencias desproporcionadamente negativas para las escuelas que son innovadoras o sirven a comunidades que ya están marginadas. De hecho, lo que podría parecer una historia de éxito educativo para quienes viven en una comunidad se puede enmarcar como un fracaso cuando los datos se utilizan como armas.
Tener datos para respaldar las afirmaciones sobre las experiencias de las personas puede ayudar a quienes abogan por el cambio a plantear el problema de una manera inteligible y válida para los que toman las decisiones. Como señaló un alumno de DPS, tener datos para respaldar una experiencia o datos de observación puede hacer que las afirmaciones de uno parezcan más “verdaderas” que si esas mismas observaciones se presentarán con historias anecdóticas. Otro alumno de DPS señaló que tener datos de calidad permite que experiencias múltiples pueden ser comparadas y contrastadas relativamente rápido. Tal como lo expresan, “los datos pueden simplificar las historias y las perspectivas, como si 10 estudiantes en una encuesta tuvieran experiencias realmente similares, los datos pueden unirlos e informar que esto es un patrón y es sistémico.” A medida que las escuelas y las comunidades se vuelven más apegadas a informar la toma de decisiones basada en los conocimientos de los datos, se ha vuelto cada vez más importante contar con los datos apropiados para contextualizar un problema. Los distritos escolares en el área metropolitana, sin embargo, han utilizado métricas que fallan al capturar ricamente los elementos de la experiencia de las personas en la escuela.
Los miembros de la comunidad señalaron que las formas en que se utilizan los datos no siempre ayudan al público general a comprender lo que sucede en una escuela o en un distrito escolar. Como señaló un educador, parece que los distritos escolares en el área metropolitana están más interesados en los resultados de las pruebas estandarizadas porque permite que las escuelas y los estudiantes se comparen fácilmente entre sí. De esta manera, todos los datos que son necesarios para comprender qué tan bien o mal le está yendo a una escuela involucran el total de los puntajes de las pruebas de los estudiantes dentro de la escuela. Sin embargo, si bien el puntaje de una prueba estandarizada puede proporcionar un panorama de una dinámica particular en una escuela, no puede decirle todo lo que puede ser relevante para comprender cómo se están desempeñando las escuelas y los estudiantes. Una recopilación más robusta de puntos de datos puede proporcionar una mejor comprensión de lo que está sucediendo en una escuela y cómo se puede servir mejor a los estudiantes y educadores. Un educador señaló que se necesitan muchos puntos de datos para reflejar con precisión la historia de lo que está sucediendo en una escuela determinada. Como dicen, “un buen cuerpo de evidencia le dirá dónde están los niños. Combina CMAS (Medidas de Éxito Académico de Colorado) más datos internos más calificaciones y obtendrá una historia más precisa de cómo se están desempeñando los niños, pero no puede usar ninguno de esos y pensar que tiene la historia.”
Un padre de DPS señaló que parte del problema con el uso actual de los datos es que tiene poca relevancia cuando se trata de determinar si una escuela es la adecuada para un niño. Como dijo otro padre de DPS, “tal vez sea una escuela de 5 estrellas o cualquiera que sea la calificación, pero ¿permitirá que mi hijo prospere? No hay un número para eso.” Los modelos simples que se basan en gran medida en los puntajes de las pruebas estandarizadas revelan algo sobre el desempeño de una escuela pero carecen de la complejidad necesaria para ayudar a los padres a determinar cómo se relaciona la dinámica actual de la escuela con las necesidades de sus hijos. Una exalumna de DPS señaló que su madre trató de usar las evaluaciones actuales de las escuelas para poner a ella y a su hermana en la “mejor” escuela; sin embargo, debido a que las métricas estandarizadas no siempre se traducen en la experiencia vivida en la escuela, terminó teniendo una mala experiencia en comparación con la escuela de la que se mudó. Como ella lo expresó, “Realmente disfruté East, me encantaba y, de repente el próximo otoño estoy yendo a DSST y me pregunto por qué, y mi madre dice que East no es seguro. Pero, ¿cómo sabe ella que no es seguro? ¿Cómo sabe que esta escuela no es lo mejor para mí…Ahora me pones en esta burbuja basada en la información que recibiste de otra persona.”
Cuando las experiencias de las personas se reducen a métricas como los puntajes de las pruebas, a veces puede ser ignorado el uso de un enfoque equilibrado que nos permita explorar la causa de la diferenciación. Como ex alumno señaló, la creación de una narrativa a partir de datos independientes del contexto puede reducir los fenómenos sociales complejos a una colección de estadísticas, de alguna manera definiendo qué es el éxito. Esto parece sugerir que todos los procesos de recopilación de datos deben incluir un elemento de discusión con las poblaciones afectadas para obtener su perspectiva sobre por qué se están produciendo los hallazgos de los datos. Como señaló un alumno, “Yo diría que debería tener más de un tipo de data, al menos no deberían ser solo números. Por ejemplo, el distrito escolar de Cherry Creek solo reporta números y en realidad no habla sobre las experiencias de los estudiantes de los que están hablando para que puedan decirnos si hay algún tipo de disparidad… Por ejemplo, si está hablando de la forma en que el sistema educativo está fallando a los estudiantes de piel negra y morena, debe hablar con esos estudiantes de piel negra y morena específicamente y averiguar qué barreras existen o qué normas supremacistas de piel blanca existen dentro del sistema escolar que hacen que algo como la graduación parezca más inaccesible.”
Es tentador sugerir que a través de la recopilación de datos sin analizar, podemos saber todo lo que necesitamos saber sobre lo que están haciendo las escuelas y lo que necesitan, pero puede que ese no sea el caso. Una madre de DPS se dio cuenta de que, a pesar de su deseo de poder comprender el sistema escolar a través de un marco de recopilación de datos, no hay forma de que la recopilación de datos cuente la historia completa por sí misma. Como dicen, “independientemente de lo que estés viendo, los datos te llevan al 80% pero no cruzarán la línea de meta y esa ha sido una verdad muy dura que he tenido que aceptar como alguien que ama a los datos. Creo que es una herramienta, el deseo de eficiencia es genial, pero si se hace una tarea, entonces se hace la tarea, realmente no importa qué tan eficiente seas.” A pesar de la insuficiencia de los datos para contar la historia completa, para muchos miembros de la comunidad es importante que los datos se recopilen de manera precisa, significativa y útil. Para garantizar que los datos puedan cumplir estas funciones, parece que expandir las definiciones convencionales de lo que cuenta como datos relevantes, también cómo se dispersa esa información, es un paso necesario en el uso de datos en la educación.