La evaluación de la escritura se refiere a un área de estudio que contiene teorías y prácticas que guían la evaluación del desempeño o el potencial de un escritor a través de una tarea de escritura. La evaluación de la escritura se puede considerar una combinación de estudios de estudios de composición y teoría de la medición dentro de la evaluación educativa . [1] La evaluación de la escritura también puede referirse a las tecnologías y prácticas utilizadas para evaluar la escritura y el aprendizaje de los estudiantes. [2]
Contextos
La evaluación de la escritura comenzó como una práctica en el aula durante las dos primeras décadas del siglo XX, aunque también surgieron pruebas estandarizadas y de alto riesgo durante este tiempo. [3] Durante la década de 1930, College Board pasó de utilizar la evaluación de escritura directa a la evaluación indirecta porque estas pruebas eran más rentables y se creía que eran más fiables. [3] A partir de la década de 1950, más estudiantes de diversos orígenes asistían a colegios y universidades, por lo que los administradores utilizaron las pruebas estandarizadas para decidir dónde deberían ubicarse estos estudiantes, qué y cómo enseñarles, y cómo medir lo que aprendieron. necesitaban aprender. [4] Las evaluaciones de escritura a gran escala en todo el estado que se desarrollaron durante este tiempo combinaron la evaluación de escritura directa con elementos de opción múltiple , una práctica que sigue siendo dominante en la actualidad en los programas de evaluación a gran escala de EE. UU., Como el SAT y el GRE . [3] Estas evaluaciones generalmente se llevan a cabo fuera del aula, a nivel estatal y nacional. Sin embargo, a medida que más y más estudiantes fueron asignados a cursos basados en los puntajes de las pruebas estandarizadas, los maestros de escritura comenzaron a notar un conflicto entre lo que se evaluaba a los estudiantes ( gramática , uso y vocabulario) y lo que los maestros realmente estaban enseñando ( proceso de escritura). y revisión. [4] Debido a esta división, los educadores comenzaron a presionar por evaluaciones de escritura que fueron diseñadas e implementadas a nivel local, programático y de aula. [4] [5] A medida que los profesores de escritura comenzaron a diseñar evaluaciones locales, los métodos de evaluación comenzaron a diversificarse, lo que resultó en pruebas de ensayo cronometradas, rúbricas diseñadas localmente y carpetas de trabajo. Además del aula y los niveles programáticos, la evaluación de la escritura también tiene una gran influencia en los centros de escritura para la evaluación del centro de escritura y en los centros de apoyo académico similares. [6]
Historia
Debido a que la evaluación de la escritura se usa en múltiples contextos , la historia de la evaluación de la escritura se puede rastrear mediante el examen de conceptos y situaciones específicos que provocan cambios importantes en las teorías y prácticas. Los académicos de la evaluación de la escritura no siempre están de acuerdo sobre el origen de la evaluación de la escritura.
Se ha descrito que la historia de la evaluación de la escritura consta de tres cambios importantes en los métodos utilizados para evaluar la escritura. [4] La primera ola de evaluación de la escritura (1950-1970) buscó pruebas objetivas con medidas indirectas de evaluación. La segunda ola (1970-1986) se centró en las pruebas de calificación holística en las que se comenzaba a evaluar la escritura real de los estudiantes. Y la tercera ola (desde 1986) cambió hacia la evaluación de una colección de trabajo de los estudiantes (es decir, evaluación de portafolios) y evaluación programática.
La publicación de 1961 de Factors in Judgments of Writing Ability en 1961 por Diederich, French y Carlton también se ha caracterizado por marcar el nacimiento de la evaluación de la escritura moderna. [7] Diederich y col. basó gran parte de su libro en investigaciones realizadas a través del Educational Testing Service (ETS) durante la década anterior. Este libro es un intento de estandarizar la evaluación de la escritura y es responsable de establecer una base de investigación en la evaluación de la escritura. [8]
Conceptos principales
Validez y fiabilidad
Los conceptos de validez y confiabilidad se han ofrecido como una especie de heurística para comprender los cambios en las prioridades en la evaluación de la escritura [9] , así como para interpretar lo que se entiende como mejores prácticas en la evaluación de la escritura. [10]
En la primera ola de evaluación de la escritura, el énfasis está en la confiabilidad : [11] la confiabilidad confronta preguntas sobre la consistencia de una prueba. En esta ola, la preocupación central era evaluar la escritura con la mejor previsibilidad con la menor cantidad de costo y trabajo.
El cambio hacia la segunda ola marcó un paso hacia la consideración de principios de validez . La validez confronta preguntas sobre la idoneidad y efectividad de una prueba para el propósito dado. Los métodos de esta ola estaban más preocupados por la validez de constructo de una prueba : si el material obtenido de una prueba es una medida apropiada de lo que la prueba pretende medir. Los maestros comenzaron a ver una incongruencia entre el material que se solicitaba para medir la escritura y el material que los maestros pedían a los estudiantes que escribieran. La puntuación holística , defendida por Edward M. White, surgió en esta ola. Es un método de evaluación en el que se solicita la escritura de los estudiantes para medir su capacidad de escritura. [12]
La tercera ola de evaluación de la escritura surge con un interés continuo en la validez de los métodos de evaluación. Esta ola comenzó a considerar una definición ampliada de validez que incluye cómo la evaluación del portafolio contribuye al aprendizaje y la enseñanza. En esta ola, la evaluación de portafolios surge para enfatizar las teorías y prácticas en los estudios de composición y redacción , como revisión , redacción y proceso .
Evaluación directa e indirecta
Las evaluaciones de escritura indirecta generalmente consisten en pruebas de opción múltiple sobre gramática, uso y vocabulario. [4] Los ejemplos incluyen altas apuestas pruebas estandarizadas tales como la ACT , SAT , y GRE , que más a menudo se utilizan por los colegios y universidades para admisión propósitos. Otras evaluaciones indirectas, como Compass, se utilizan para colocar a los estudiantes en cursos de escritura de recuperación o convencionales. Las evaluaciones directas de escritura, como Writeplacer ESL (parte de Accuplacer) o una prueba de ensayo cronometrada, requieren al menos una muestra de escritura de los estudiantes y muchos especialistas en evaluación de escritura las consideran más válidas que las pruebas indirectas porque evalúan muestras reales de escritura. [4] La evaluación de la carpeta de trabajos, que generalmente consiste en varios escritos de los estudiantes escritos en el transcurso de un semestre, comenzó a reemplazar los ensayos cronometrados a fines de la década de 1980 y principios de la de 1990. La evaluación de la carpeta de trabajos se considera incluso más válida que las pruebas de redacción cronometradas porque se centra en múltiples muestras de escritura de los estudiantes que se han compuesto en el contexto auténtico del aula. Los portafolios permiten a los evaluadores examinar múltiples muestras de escritura de los estudiantes y múltiples borradores de un solo ensayo. [4]
Como tecnologia
Métodos
Los métodos de evaluación de la escritura varían según el contexto y el tipo de evaluación. La siguiente es una lista incompleta de evaluaciones de redacción que se administran con frecuencia:
portafolio
La evaluación de la carpeta de trabajos se usa generalmente para evaluar lo que los estudiantes han aprendido al final de un curso o durante un período de varios años. Los portafolios del curso constan de múltiples muestras de escritura de los estudiantes y una carta o ensayo reflexivo en el que los estudiantes describen su escritura y trabajo para el curso. [4] [13] [14] [15] Los "portafolios de exhibición" contienen borradores finales de la escritura de los estudiantes, y los "portafolios de proceso" contienen varios borradores de cada escrito. [16] Tanto los portafolios impresos como electrónicos pueden ser portafolios de exhibición o de proceso, aunque los portafolios electrónicos suelen contener hipervínculos del ensayo reflexivo o la carta a muestras del trabajo de los estudiantes y, a veces, a fuentes externas. [14] [16]
Ensayo cronometrado
Las pruebas de redacción cronometradas se desarrollaron como una alternativa a las evaluaciones de escritura indirecta de opción múltiple. Las pruebas de ensayo cronometradas se utilizan a menudo para colocar a los estudiantes en cursos de escritura apropiados para su nivel de habilidad. Estas pruebas suelen ser supervisadas , lo que significa que las pruebas se llevan a cabo en un lugar específico en el que se les da a los estudiantes una indicación para que escriban en respuesta dentro de un límite de tiempo establecido. Tanto el SAT como el GRE contienen porciones de ensayo cronometradas.
Rúbrica
Una rúbrica es una herramienta utilizada en la evaluación de la escritura que se puede utilizar en varios contextos de escritura. Una rúbrica consiste en un conjunto de criterios o descripciones que guían a un evaluador a calificar o calificar a un escritor. Los orígenes de las rúbricas se remontan a los primeros intentos en la educación de estandarizar y escalar la escritura a principios del siglo XX. Ernest C. Noyes aboga en noviembre de 1912 por un cambio hacia prácticas de evaluación más basadas en la ciencia. Una de las escalas originales utilizadas en educación fue desarrollada por Milo B. Hillegas en A Scale for the Measurement of Quality in English Composition by Young People . Esta escala se conoce comúnmente como escala de Hillegas. Los administradores utilizaron la escala de Hillegas y otras escalas utilizadas en educación para comparar el progreso de las escuelas. [17]
En 1961, Diederich, French y Carlton del Educational Testing Service (ETS) publicaron Factors in Judgments for Writing Ability, una rúbrica compilada a partir de una serie de evaluadores cuyos comentarios fueron categorizados y condensados en una rúbrica de cinco factores: [18]
- Ideas : relevancia, claridad, cantidad, desarrollo, capacidad de persuasión
- Forma : Organización y análisis
- Sabor : estilo, interés, sinceridad
- Mecánica : errores específicos de puntuación , gramática , etc.
- Redacción : elección y disposición de las palabras.
A medida que las rúbricas comenzaron a usarse en el aula, los maestros comenzaron a abogar por que se negociaran criterios con los estudiantes para que los estudiantes reclamen la forma en que serían evaluados. Académicos como Chris Gallagher y Eric Turley, [19] Bob Broad, [20] y Asao Inoue [21] (entre muchos) han defendido que el uso eficaz de las rúbricas proviene de criterios locales, contextuales y negociados.
Prueba de opción múltiple
Las pruebas de opción múltiple contienen preguntas sobre uso , gramática y vocabulario . Las pruebas estandarizadas como el SAT, ACT y GRE se usan generalmente para la admisión a la universidad o la escuela de posgrado. Otras pruebas, como Compass y Accuplacer, se utilizan típicamente para colocar a los estudiantes en cursos de escritura de recuperación o convencionales.
Calificación de ensayos automatizada
La calificación automatizada de ensayos (AES) es el uso de prácticas de evaluación asistidas por computadora no humanas para calificar, calificar o calificar tareas de escritura.
Raza
Algunos académicos en evaluación de escritura centran su investigación en la influencia de la raza en el desempeño en las evaluaciones de escritura. Las becas en evaluación de raza y escritura buscan estudiar cómo las categorías de raza y las percepciones de la raza continúan dando forma a los resultados de la evaluación de escritura. Sin embargo, algunos estudiosos de la evaluación escrita reconocen que el racismo en el siglo XXI ya no es explícito , [22] pero abogan por un racismo "silencioso" en las prácticas de evaluación escrita en las que las desigualdades raciales en la evaluación escrita se justifican típicamente por razones no raciales. [23] Estos académicos abogan por nuevos desarrollos en la evaluación de la escritura, en los que las intersecciones de la evaluación de la raza y la escritura se llevan a la vanguardia de las prácticas de evaluación.
Ver también
- Evaluación de la escritura
- Validez concurrente
- Validez de contenido
- Validez externa
- Validez aparente
- Validez predictiva
- Retórica
Referencias
- ^ Behizadeh, Nadia y George Engelhard Jr. "Visión histórica de las influencias de las teorías de medición y escritura en la práctica de la evaluación de la escritura en los Estados Unidos" Evaluación de la escritura 16 (2011) 189-211.
- ^ Huot, B. y Neal, M. (2006). Evaluación de la escritura: una tecnohistoria. En CA MacArthur, S. Graham y J. Fitzgerald (Eds.), Handbook of Writing Research (págs. 417-432). Nueva York, NY: Guilford Press.
- ^ a b c Behizadeh, Nadia y George Engelhard Jr. "Visión histórica de las influencias de las teorías de medición y escritura en la práctica de la evaluación de la escritura en los Estados Unidos" Evaluación de la escritura 16 (2011) 189-211
- ^ a b c d e f g h Yancey, Kathleen Blake. "Mirando hacia atrás mientras miramos hacia adelante: historizar la evaluación de la escritura como un acto retórico". Composición y comunicación universitaria . 50,3 (1999): 483-503. Web. 23 de febrero de 2013.
- ^ Huot, Brian. (Re) articular la evaluación de la escritura para la enseñanza y el aprendizaje. Logan, Utah: Estado de Utah UP, 2002.
- ^ Bell, James H. (2001). "Cuando se hacen preguntas difíciles: evaluación de centros de escritura" . El Diario del Centro de Escritura . 21.1 : 7-28.
- ^ Amplio, Bob. Lo que realmente valoramos: más allá de las rúbricas en la enseñanza y evaluación de la escritura . Logan, UT: Utah State University Press, 2003. Imprimir
- ^ Diederich, PG; Francés, JW; Carlton, ST (1961) Factores en los juicios de capacidad de escritura. Princeton, Nueva Jersey: Servicio de pruebas educativas
- ^ Yancey, Kathleen Blake. "Mirando hacia atrás mientras miramos hacia adelante"
- ^ O'Neill, Peggy, Cindy Moore y Brian Huot. Una guía para la evaluación de redacción universitaria. Logan, UT: Utah State University Press, 2009. Imprimir.
- ^ Yancey, Kathleen Blake. "Mirando hacia atrás como miramos hacia adelante"
- ^ "Holisticismo". College Composition and Communication, 35 (diciembre de 1984): 400-409.
- ^ Emmons, Kimberly. "Repensar los géneros de reflexión: las cartas de presentación del portafolio del estudiante y la narrativa del progreso". Estudios de composición 31.1 (2003): 43-62.
- ^ a b Neal, Michael. Evaluación de la escritura y la revolución de los textos y tecnologías digitales. Nueva York: Teachers College, 2011.
- ^ Blanco, Edward. "La puntuación de los portafolios de redacción: Fase 2". Composición universitaria y comunicación 56.4 (2005): 581-599.
- ^ a b Yancey, Kathleen. "Posmodernismo, palimpsesto y portafolios: cuestiones teóricas en la representación del trabajo estudiantil". Sistemas de soporte al desempeño de ePortfolio: construcción, presentación y evaluación de portafolios. Editores Katherine V. Wills y Rich Rice. Fort Collins, Colorado: WAC Clearinghouse. Web. 16 de noviembre de 2013.
- ^ Turley, Eric D. y Chris Gallagher. "Sobre los 'usos' de las rúbricas: reformulación del gran debate de las rúbricas" The English Journal Vol 97. No. 4. (marzo de 2008) págs. 87-92.
- ^ Diederich, PG; Francés, JW; Carlton, ST (1961) Factores en los juicios de capacidad de escritura.
- ^ Turley, Eric D. y Chris Gallagher. "Sobre los 'usos' de las rúbricas: reformulación del gran debate de las rúbricas"
- ^ Amplio, Bob. Lo que realmente valoramos: más allá de las rúbricas en la enseñanza y evaluación de la escritura
- ^ Inoue, Asao B. "Pedagogía de la evaluación basada en la comunidad". Evaluación de la escritura. 9 (2005): 208-38. Web. 23 de febrero de 2013.
- ↑ Bonilla-Silva, Eduardo. Racismo sin racistas: racismo ciego al color y la persistencia de la desigualdad racial en los Estados Unidos . Lanham, MD: Rowman & LittleField Publishers, Inc., 2006. Imprimir.
- ^ Behm, Nicholas y Keith D. Miller. "Desafiando los marcos del racismo daltónico: por qué necesitamos una cuarta ola de becas de evaluación de la escritura". Evaluación de raza y escritura. Asao B. Inoue y Mya Poe, eds. Nueva York: Peter Lang Publishing, 2012. 127-38. Impresión.
enlaces externos
- Conferencia sobre composición universitaria y declaración de posición de comunicación sobre evaluación de redacción
- Evaluación de Journal of Writing