Gracias por la A2A.
He estado monitoreando la reacción a la historia de Reuters en las últimas dos semanas desde que se publicó (28 de marzo de 2016). Creo que es demasiado pronto para decir cuáles serán las ramificaciones de esta historia, pero trataré de dar algunas reacciones por parte de los educadores y luego algunas predicciones de cómo las cosas pueden o no cambiar en la prueba y por parte de los colegios y universidades. .
Sin embargo, antes de hacerlo, en el interés de una divulgación completa, debo mencionar que hablé varias veces durante el año pasado con dos de los autores de los artículos de Reuters sobre temas relacionados con los estudiantes y la educación en China. Además, planteé el tema de las pruebas en China en un artículo que escribí el verano pasado para el Diario de Admisión de NACAC.
- ¿Es la sección de escritura de la sesión menos importante en el proceso de admisión que las otras secciones?
- ¿El examen SAT requiere matemáticas?
- Cómo obtener la máxima calificación en la lectura y escritura del SAT / ACT como estudiante internacional
- ¿Cuáles son mis posibilidades con una nueva puntuación en el SAT de 1420 (math 800, cr 620)?
- ¿Einstein haría bien en las pruebas estandarizadas?
La reacción de los educadores
Si bien no ha habido un consenso universal entre los educadores que han publicado comentarios sobre estas historias en grupos cerrados en toda la web, muchos han culpado directamente a los problemas con el SAT en el College Board y su política de reciclaje de preguntas antiguas en exámenes posteriores. . Argumentan que en una era electrónica, todas las preguntas antiguas serán registradas y entregadas como ayudas de estudio por aquellas compañías que recopilan toda la información en cuestión de minutos después de cada administración de la prueba. El College Board ha sido consciente durante años de que estas compañías estaban reuniendo viejas preguntas en China (y en otros lugares también). Dado que la seguridad de las pruebas se ha comprometido durante muchos años, el College Board respondió
La reacción de la junta de la universidad
Poco después de la publicación de las historias de Reuters, The College Board respondió con una “Nota”:
El College Board no es perfecto; Hicimos lo mejor que pudimos con la información que teníamos en ese momento. Podemos y debemos hacer más. De hecho, recientemente hemos tomado medidas más agresivas para asegurar el examen a nivel internacional, incluida la cancelación de una administración en China. Continuamos equilibrando el acceso a la ampliación con la protección del examen. Recientemente rechazamos la entrada a la primera administración del SAT rediseñado a varios registrantes de alto riesgo, muchos de los cuales se ganan la vida violando los protocolos de seguridad. En el futuro, tendremos que hacer aún más.
Hemos estado trabajando con Reuters en estas historias desde el verano de 2015. Durante ese período, hemos puesto a disposición el liderazgo de College Board para múltiples entrevistas y hemos compartido más detalles sobre la seguridad de las pruebas que hemos brindado a cualquier otra organización de noticias. Hemos sido transparentes con Reuters en un esfuerzo por asegurarnos de que sus lectores comprendan mejor todo lo que hacemos para proteger la integridad del SAT a nivel internacional y garantizar la validez de los resultados de los exámenes que informamos. En un espíritu de transparencia total, compartimos aquí la carta detallada que enviamos a Reuters con los hechos de nuestra toma de decisiones.
Incluso cuando reconocemos dónde debemos hacer más, estamos muy orgullosos del nuevo SAT y su impacto en los estudiantes. Esta es una época de cambios notables y positivos para nuestra organización centenaria. A principios de marzo, más de 460,000 estudiantes tomaron el SAT rediseñado, que refleja mejor lo que los estudiantes están aprendiendo en el aula y los conecta con oportunidades distintas, tales como herramientas de práctica gratuitas y exenciones de pago de solicitud de ingreso a la universidad. Una nota a nuestros miembros sobre los artículos de Reuters de hoy.
La “Nota” admite que ha habido problemas y que hay esfuerzos para abordar algunos de los problemas de seguridad relacionados con la administración de pruebas. Lo que la Nota no aborda, y lo que preocupa a muchos educadores, es que el College Board no aborda directamente el uso de preguntas antiguas en las nuevas versiones de la prueba.
Lo que esto significa para futuros examinados y para colegios y universidades
Una razón por la que el College Board no abordó esta pregunta puede tener que ver con el hecho de que la prueba más reciente, en marzo, fue el lanzamiento del SAT nuevo y actualizado. La primera administración de prueba tenía una mayor seguridad y se impidió que cualquiera que no fuera de la edad universitaria la tomara (ya sea que los que pueden continuar haciendo esto puede ser algo que decidirán los tribunales). Sin embargo, el esfuerzo por mantener fuera a los profesionales que forman parte de las empresas de preparación de exámenes no impedirá que estas empresas reúnan todas las preguntas en el examen. Algunas empresas de preparación de exámenes hacen que los estudiantes memoricen las preguntas y una vez finalizada la prueba, se reúnen todas las preguntas y luego se utilizan para preparar el siguiente grupo de examinados.
Lo que es importante acerca de la Nota no es algo que esté incluido; más bien, es lo que no se aborda lo que es más revelador. No hay nada en la Nota que me lleve a creer que las preguntas anteriores ya no se reciclarán en las pruebas posteriores. Mientras las preguntas anteriores sean recicladas, habrá una ventaja injusta para aquellos que hayan tenido acceso previo a estas preguntas.
Para formular preguntas que le permitan a The College Board distribuir los puntajes en una amplia gama de habilidades estudiantiles, muchos psicometristas están empleados por el Servicio de Pruebas Educativas (ETS). Para aquellos que no están familiarizados con el diseño de la prueba, el SAT produce respuestas de tal manera que las calificaciones promedio de los estudiantes son aproximadamente 500 de 800 en cada sección de la prueba. Para que la prueba produzca estos resultados cada año, las preguntas deben diseñarse de modo que haya una curva de timbre confiable en las respuestas de los estudiantes. Tiene que haber, para decirlo simplemente, algunas preguntas que son fáciles y otras que son difíciles. Por ejemplo, hay algunas preguntas que la gran mayoría de los examinados contestarán correctamente y hay algunas preguntas que están diseñadas para que casi todos los estudiantes se equivoquen. Los diseñadores de pruebas crean una prueba en la que el rango de respuestas siempre lleva a una media de cerca de 500. Esto requiere que las preguntas de la prueba se examinen antes de que se usen como parte de la prueba oficial. A los estudiantes que toman el SAT oficial no se les dice cuál de las secciones de la prueba es experimental y, por lo tanto, no se califican para los estudiantes que toman ese SAT en particular en esa fecha en particular. Las secciones experimentales proporcionan los datos necesarios sobre las preguntas del examen. Una vez que los psicometristas han medido las preguntas experimentales en términos de cuántos responderán a la pregunta correctamente, estas preguntas se pueden usar como parte de una prueba “real” dada en una fecha futura. Aquellas compañías e individuos que hayan reunido todas las preguntas del SAT en una fecha en particular, incluida la sección experimental, les darán a los estudiantes que se hayan inscrito para la preparación para el examen acceso a estas preguntas cuando se inscriban en sus servicios de preparación para el examen. Las historias de Reuters apoyan lo que acabo de escribir. También plantea la cuestión de si los puntajes de SAT de los estudiantes deben usarse para fines de admisión.
Los colegios y universidades necesitan confiar en el SAT. Si existe evidencia sólida de que la seguridad de la prueba ha estado tan comprometida que los puntajes pueden no ser precisos para muchos estudiantes individuales, entonces la razón completa para requerir pruebas estandarizadas es cuestionable. Sin embargo, es casi imposible determinar qué estudiante ha obtenido una ventaja injusta al tener acceso a preguntas anteriores antes de la fecha de la prueba en la que el estudiante decide sentarse.
Si obtener acceso a las preguntas que han aparecido en pruebas anteriores es “trampa”, entonces es un tipo muy diferente a traer respuestas ocultas en una calculadora o algún otro dispositivo. El “engaño” que se produce cuando se reciclan las preguntas anteriores se produce antes de que se administre la prueba real y, por lo tanto, no puede ser observado ni determinado por los supervisores ni por nadie más. Es, en resumen, casi imposible de probar si un estudiante se ha beneficiado de haber tenido acceso previo. Y esto es cuando las cosas se ponen éticamente turbias. Algunos lectores de admisión asumen, desde el principio, que los puntajes de ciertos estudiantes (los de China en su mayoría) no son precisos porque han tenido acceso a preguntas. Sin embargo, asumir esto no es la forma en que nosotros, en los Estados Unidos, decimos que se deben hacer las cosas a los individuos. Los estudiantes deben ser inocentes hasta que se demuestre su culpabilidad. Además, un lector que asume que un estudiante tenía una ventaja injusta debería permitirle al estudiante montar una defensa. Los estudiantes ni siquiera saben que sus calificaciones están siendo, si no se han descartado, por lo menos observadas con sospecha por los oficiales de admisión. He hecho que un alumno escriba sobre su discriminación por las siguientes razones Parke Muth, consultora: Estudio de caso y propuesta modesta: conozca a la persona o el país que juzga
La prueba SAT no solo otorga una puntuación a un estudiante individual; además, demuestra dónde se encuentra el alumno en percentiles en comparación con todos los demás examinados. Sin una distribución de puntajes confiable, la prueba no funcionaría bien para comparar estudiantes, no solo en una prueba individual sino en múltiples pruebas que un estudiante podría tomar. El SAT también es utilizado por empresas de clasificación como US News para medir la selectividad y la reputación de universidades individuales. Las puntuaciones de las pruebas deben ser comparadas con las puntuaciones de las pruebas de los años anteriores y posteriores para que sean útiles. Por ejemplo, si el puntaje promedio de los estudiantes que se matriculan en una universidad en particular aumenta en 20 puntos en 5 años, la reputación de la escuela aumentará. Esto solo es cierto, sin embargo, las puntuaciones de las pruebas se pueden comparar de manera útil. Además, las escuelas secundarias y las universidades a menudo se miden por los puntajes SAT promedio de sus estudiantes. El uso de los puntajes del SAT para medir la calidad educativa de los estudiantes de secundaria aumentará en un futuro próximo porque la nueva versión del SAT está vinculada al Common Core. Como resultado, los puntajes del SAT ahora son obligatorios para todos los estudiantes en algunos estados que usan Common Core. Sin embargo, si los puntajes no son confiables, los padres y educadores que están en contra de las pruebas pueden iniciar juicios para detener el uso de estas pruebas.
He estado explicando por qué debería ser lo mejor para el College Board descontinuar el uso de viejas preguntas en el SAT porque quería construir un caso que probara, si no más allá de una duda razonable, entonces al menos uno digno de discusión vigorosa. Sin embargo, ahora debo sugerir por qué el uso de las preguntas anteriores no cambiará a menos que el liderazgo del College Board considere que deben desarrollar todas las nuevas pruebas para cada fecha futura debido a la presión de las universidades y el público en general (y, en una escenario menos probable por los tribunales.)
El College Board es consciente de los problemas de seguridad y los reconoce en su Nota, pero no están en condiciones de crear nuevas pruebas para cada administración posterior. La razón por la que las preguntas antiguas pueden continuar (y, en mi opinión, es casi seguro que continúen) es una cuestión de tiempo y costo. El proceso de crear nuevas preguntas que se ajusten a la necesidad de crear resultados de puntaje que coincidan estrechamente con las pruebas anteriores, la necesidad de usar preguntas experimentales para asegurar que las preguntas se realicen de la manera que necesitan en conjunto, y la necesidad de hacer esto una y otra vez. múltiples fechas de prueba cada año es, en su forma actual, una tarea abrumadora. Si bien el College Board puede reforzar la seguridad de manera que se evite el engaño convencional, el problema de usar preguntas anteriores sigue sin respuesta.
El SAT fue diseñado mucho antes de Internet. Las preguntas de la prueba se pueden dar a través de zonas horarias y países con poco miedo a que las preguntas se envíen o se publiquen. Ahora, sin embargo, las preguntas se envían a todo el mundo en minutos. ¿Qué debe hacer el College Board? Ya han creado una nueva prueba en la que algunas de las cosas que se les pide a los estudiantes no están sujetas fácilmente a las respuestas memorizadas. Esto es particularmente cierto en la nueva sección de escritura. Por lo que puedo decir, la nueva sección es una gran mejora con respecto a su predecesora. Pídale al alumno que escriba basándose en pruebas de cálculo: pensamiento crítico en lugar de memorización. Parece paradójico entonces que la mayoría de los colegios y universidades han hecho la sección de escritura opcional para los estudiantes. Los collages y las universidades no quieren desalentar a los estudiantes que no quieren escribir un ensayo sobre la aplicación a sus escuelas. La sección que es menos susceptible al intercambio de información es la que se utilizará menos. Espero que los colegios universitarios y las universidades alienten firmemente a los estudiantes a tomar la sección de escritura al menos en lugares donde se piensa que los estudiantes reciben ventajas injustas debido al intercambio de preguntas antiguas. Iría tan lejos como para animar a las escuelas a que los profesores lean el ensayo del SAT, ya que son de naturaleza académica y pueden ayudar a predecir el éxito académico también o mejor que las preguntas de opción múltiple. Como mínimo, los estudios deberían financiarse para ver qué tan bien el ensayo SAT predice el éxito académico. No espero que las escuelas sigan esta propuesta.
Durante los últimos años, el número de colegios y universidades que han pasado las pruebas optativas ha aumentado significativamente. Hay escuelas en todo los EE. UU., Muchas de ellas bastante conocidas que ya no requieren que los solicitantes presenten las calificaciones SAT / ACT. He escrito sobre este fenómeno antes, así que no lo ensayaré todo aquí. Lo que puedo predecir, sin embargo, es que muchas más escuelas irán opcionales en los próximos años. En primer lugar, aumenta el número de estudiantes que se presentarán en las escuelas. Esto ayuda a que las escuelas parezcan más selectivas cuando hacen ofertas de admisión y esto, a su vez, podría ayudar a la clasificación de las escuelas. Más importante aún, las escuelas pueden tener menos confianza en las calificaciones que reciben y, por lo tanto, no les darán tanto peso. Para grupos como Fairest y otros que piensan que la prueba estandarizada es perniciosa, esta será una buena noticia. Para aquellos que piensan que las pruebas estandarizadas, especialmente en los extremos del espectro (evaluadores muy altos y evaluadores muy bajos) son buenos predictores del éxito académico, se sentirán decepcionados. Aquellos que quieran cuantificar a los estudiantes tampoco serán felices. Dado que el nuevo SAT está relacionado con Common Core, aquellos que apoyan el Core querrán que las pruebas sigan siendo una parte necesaria de la evaluación de las escuelas y los estudiantes.
En este punto puede parecer que creo que el SAT está en un gran problema y que su futuro está en peligro. Si bien esto puede ser cierto por algunas de las razones que he enumerado y por otras también. No creo que el problema con las viejas preguntas que se reciclan sea la razón de su caída por ser una parte común del proceso de admisión. Para que los estudiantes obtengan una ventaja en el SAT al memorizar las preguntas, los estudiantes deben estar increíblemente concentrados y dispuestos a dedicar muchas horas a la tarea. Las respuestas que los estudiantes requieren requieren conocer la pregunta completa y la respuesta de muchos cientos, si no miles de preguntas antiguas. En otras palabras, solo los estudiantes increíblemente motivados pueden esperar obtener una ventaja significativa al memorizar las preguntas antiguas. Si bien ahora hay un nuevo SAT y las preguntas para memorizar pueden no ser tan grandes como en el pasado, esto cambiará dentro de un año cuando se administrarán al menos 7 pruebas por año.
No debería sorprender que los lugares donde se preparan el examen y el acceso a preguntas anteriores estén en Asia. La memorización de memoria de los materiales ha sido una parte del sistema de educación. Los estudiantes pasan horas incalculables memorizando materiales para sus propios exámenes nacionales. Lo que muchos no se dan cuenta entonces es que estos estudiantes están, de hecho, abarrotados para los exámenes al memorizarlos. Esto en sí mismo requiere mucho tiempo y esfuerzo. La otra información sobre muchos de estos estudiantes es que son, en muchos casos, estudiantes brillantes. Por ejemplo, muchos estudiantes en China que toman el SAT podrían obtener una calificación muy superior a 2000 en el SAT anterior y a más de 1400 en la nueva prueba. Estos puntajes, mientras que están cerca de los mejores porcentajes de todos los evaluadores, son bajos para China. En los últimos años, los estudiantes que son aceptados en las mejores escuelas en los EE. UU. Tienen un puntaje de 800 en matemáticas y muy por encima de los 700 en las secciones críticas de lectura y escritura del SAT. Hay cientos de estudiantes con muy buenos puntajes en el sábado y no solo porque tienen acceso a preguntas antiguas; más bien, es que tienen estudios muy difíciles para las pruebas de toda su vida y están preparados para hacerlo bien de todos modos. La competencia para ingresar a las mejores escuelas de los EE. UU., Que admiten solo un pequeño número de solicitantes de China y Corea, es tan feroz que los estudiantes están dispuestos a dedicar un esfuerzo tremendo para mejorar sus calificaciones. Por lo que he visto, no hay muchos estudiantes en los Estados Unidos que estén listos para dedicar sus veranos a asistir a los campamentos del SAT que requieren 12 o más horas de preparación del SAT por día. Algunos estudiantes de Asia ven que necesitan puntajes casi perfectos para ser admitidos en las mejores escuelas y, por lo tanto, están dispuestos a hacerlo. Puede ser que haya otros en todo el mundo y en los Estados Unidos que estén dispuestos a esforzarse por memorizar todo en las pruebas, pero el porcentaje general será pequeño. ¿Este pequeño porcentaje socavará la credibilidad de todas las pruebas? No es probable. Algunos oficiales de admisión ya han dicho que observan los puntajes de estudiantes en algunos lugares con la vista cansada. En otras palabras, un estudiante con una gran puntuación en China no será considerado igual que un estudiante con una gran puntuación de Iowa. Sin embargo, es poco probable que la mayoría de las escuelas no esperen que la mayoría de sus estudiantes a los que se les ofrecerá la admisión presenten puntajes y que la mayoría asuman que los puntajes son correctos.
Si fuera un VC y estuviera buscando una nueva oportunidad de inversión que tenga el potencial de resolver los problemas con la seguridad de las pruebas, buscaría a alguien para crear una prueba como el examen PISA o incluso el Gaokao, que se daría una vez por semana. año. Sin embargo, la prueba no tendría una puntuación media como la de SAT / ACT. En otras palabras, los resultados de la prueba no se compararán con otra versión de la prueba dada en otros años. La prueba se usaría para mostrar cómo les fue a los estudiantes en una prueba en particular. Esta prueba podría utilizarse como sustituto del SAT o además del SAT. Me doy cuenta de que me estoy abriendo a un diluvio de comentarios críticos, ya que muchos educadores sienten que los estudiantes viven en una cultura de prueba estandarizada y agregar uno más solo empeoraría las cosas. Puede empeorar las cosas para algunos, pero para aquellos que necesitan probar que los resultados de sus exámenes son precisos, también puede ayudar a los estudiantes y las universidades.
El pragmático que hay en mí cree que en el mundo de la admisión, la mayoría de los estudiantes y las escuelas se confundirán con las pruebas que están ahí fuera y que la preocupación por la seguridad de las pruebas no socavará el uso de las pruebas tan pronto como estén vinculadas a la escuela secundaria y rankings universitarios. Me he equivocado con muchas cosas antes, así que veré cómo se ve esto dentro de unos años.
