Los datos de venta libre (OTCD) son un enfoque de diseño utilizado en los sistemas de datos , en particular los sistemas de datos de tecnología educativa , para aumentar la precisión de los análisis de datos de los usuarios mediante mejores informes de datos . [1] El enfoque implica adherirse a estándares que están organizados por cinco componentes: etiqueta, documentación complementaria, sistema de ayuda, paquete / pantalla y contenido. [2]
OTCD se inspiró en las diversas formas en que los medicamentos de venta libre ayudan a quienes usan su contenido. [3] Así como sería negligente que los medicamentos de venta libre no contengan etiquetas, documentación u otros soportes que ayuden a las personas a usar su contenido de manera segura, se considera negligente que los sistemas de datos muestren datos a los educadores sin proporcionarles los apoyos necesarios para garantizar que se utilice correctamente cuando los educadores utilicen los datos para tratar las necesidades de los estudiantes.
Fondo
Inspirado por las diversas formas en que los medicamentos de venta libre apoyan a quienes usan su contenido, OTCD se creó en 2010 y se aplicó a la mejora de los sistemas de datos educativos. [4] Considere la forma en que la Administración de Alimentos y Medicamentos (FDA) requiere que los medicamentos de venta libre estén acompañados de una guía textual que haya demostrado mejorar su uso, por considerar negligente hacer lo contrario. [5] Con tal orientación, los pacientes pueden tomar medicamentos de venta libre con el objetivo de mejorar su bienestar mientras un médico no esté presente para explicar cómo usar el medicamento. Las etiquetas de medicamentos deficientes o inexistentes han dado lugar a muchos errores y tragedias, ya que las personas se quedan sin forma de saber cómo usar los contenidos de manera inteligente. [6]
Las convenciones de etiquetado también pueden traducirse en una mejor comprensión de los productos que no son medicamentos. [7] [8] Por lo tanto, en la forma en que se comunica el uso adecuado de los medicamentos de venta libre con una etiqueta completa y documentación adicional, un sistema de datos utilizado para analizar el desempeño de los estudiantes puede incluir componentes para ayudar a los usuarios a comprender mejor los datos que contiene. [9] El uso de un enfoque OTCD (es decir, siguiendo los estándares OTCD) al comunicar datos implica seguir recomendaciones basadas en la investigación que probablemente mejoren la comprensión, el análisis y el uso de los datos que se muestran por parte de los educadores. [10]
Componente OTCD | Aparición en medicamentos de venta libre | Aparición en sistemas de datos y sus informes |
---|---|---|
Etiqueta | La etiqueta del recipiente proporciona el nombre y la información de preguntas como "¿Cuántos debo tomar?" y "¿Cuáles son los posibles efectos secundarios?", etc. | El informe tiene un título claro y conciso, y en el pie de página o al costado se incluyen anotaciones que brindan la información más relevante e importante para el informe. |
Documentación complementaria | No toda la información que un usuario necesita saber puede caber en la etiqueta, por lo que se incluye una hoja de papel doblada dentro del paquete para ofrecer una explicación más detallada. | Del mismo modo, la información explicativa puede acompañar a cada informe a través de enlaces a una hoja de referencia y una guía de referencia específica para cada informe. |
Sistema de ayuda | Los usuarios quieren un sistema de ayuda en línea para explorar y discutir preguntas específicas (50 millones de personas usan WebMD cada año [11] ). | Un sistema de ayuda en línea puede ofrecer lecciones completas sobre el uso del sistema y sobre el análisis de datos (específicos de los datos). |
Paquete / Pantalla | La forma en que se muestra y empaqueta el producto ayuda a comunicarse al identificar claramente la información más importante, como el propósito y el uso. | La forma en que se organizan y muestran los datos, como el diseño que fomenta los análisis correctos para cada informe en particular, ayuda a evitar confusiones. |
Contenido | Los ingredientes del producto son vitales; tienen que ser efectivos, apropiados para el usuario y no vencidos. | El contenido de cada informe y el conjunto de informes en su conjunto son eficaces, adecuados para la audiencia y no han caducado. |
No obstante, el etiquetado y las herramientas dentro de los sistemas de datos para ayudar en los análisis son poco comunes, aunque la mayoría de los educadores analizan los datos por sí solos. [12] Esencialmente, los sistemas de datos y los informes no suelen presentar datos en un formato "de venta libre" para los educadores, cuya opción principal para usar datos para tratar a los estudiantes se compara, por lo tanto, con la ingestión de medicamentos de un recipiente sin marcar o marginalmente marcado. Así como sería negligente que los medicamentos de venta libre no contengan etiquetas, documentación u otros apoyos que ayuden a las personas a usar su contenido de manera segura, es negligente que los sistemas de datos y los informes muestren datos a los educadores sin brindar los apoyos necesarios de la mejor manera. asegurarse de que los datos se utilicen de manera adecuada y, por lo tanto, tengan un impacto deseable en los estudiantes. [13]
Las recomendaciones resumidas por los Estándares OTCD (a continuación) se basan en la investigación en educación y edtech , así como en la investigación en una variedad de otros campos (por ejemplo, economía del comportamiento , diseño , análisis de negocios , tecnología y más). Un enfoque de OTCD no está destinado a reemplazar el desarrollo profesional de los educadores u otras intervenciones que mejoren el uso de datos, pero es una solución adicional que no les cuesta a los educadores más tiempo, dinero o estrés. [13]
Significado
Los educadores han aceptado ampliamente la importancia de usar datos para informar su tratamiento de las necesidades de los estudiantes. [14] [15] Esto es bueno, ya que la investigación promociona los beneficios del uso efectivo de datos. [16] [17] [18] [19] Desafortunadamente, el uso generalizado de datos por parte de los educadores no siempre es algo bueno. Una parte significativa, y algunas investigaciones afirman que la mayoría, de los educadores que analizan y utilizan datos lo hacen de manera incorrecta. [18] [20] [21] [22] [23] [24] Por ejemplo, en dos estudios del Departamento de Educación de EE. UU. Realizados en distritos conocidos por el uso sólido de datos, los maestros lograron solo un 48% de precisión al hacer inferencias de datos que involucran conceptos estadísticos básicos . [12] [25] Por lo tanto, los educadores utilizan datos para informar decisiones, pero no siempre comprenden los datos que utilizan. Dado que sus decisiones mal informadas sobre los datos impactan a los estudiantes, tales decisiones deben impactar, este es un problema importante. Los productos Edtech que presentan datos a los educadores en un formato de venta libre, en lugar de simplemente "mostrar los datos" y exigir a los educadores que busquen recursos para ayudar en los análisis, desempeñan un papel activo en la mejora del uso de datos de los educadores.
Estudio de datos de venta libre
Aunque numerosos estudios a lo largo de los años han producido evidencia en la que se basan los estándares de OTCD, un estudio cuantitativo en 2013 se centró específicamente en el impacto directo de OTCD en la precisión del análisis de datos (en lugar de simplemente determinar qué aspectos de la tecnología educativa prefieren los educadores). 211 educadores de diversos orígenes en nueve escuelas en seis distritos escolares diferentes de California participaron en el estudio Impacto de los datos de venta libre en la precisión del análisis de datos de los educadores . [13] La premisa del estudio fue determinar el impacto preciso en la precisión del análisis cuando los entornos de informes del sistema de datos hicieron que los datos fueran "de venta libre", brindando a los educadores apoyos integrados como el tipo de medicación de venta libre que proporciona a los usuarios en forma de etiquetado y documentación complementaria. Los hallazgos clave fueron significativos y tienen implicaciones para los educadores, la tecnología educativa y / o los proveedores de sistemas de datos , y cualquier otra persona involucrada en la comunicación de datos a los educadores: [26]
Relacionado con preguntas de investigación primarias
- Cuando había un pie de página en los informes de datos educativos vistos por los participantes del estudio, los análisis de los educadores de los datos mostrados eran un 307% más precisos. Cuando los participantes indicaron específicamente haber usado el pie de página (73% del tiempo), sus análisis de datos fueron un 336% más precisos.
- Cuando una hoja de referencia (siguiendo las plantillas ) acompañó a los informes de datos vistos por los participantes del estudio, los análisis de los educadores de los datos mostrados fueron un 205% más precisos. Cuando los participantes indicaron específicamente haber usado la hoja (50% del tiempo), sus análisis de datos fueron un 300% más precisos.
- Cuando una guía de referencia (siguiendo las plantillas ) acompañó a los informes de datos vistos por los participantes del estudio, los análisis de los educadores de los datos mostrados fueron un 273% más precisos. Cuando los participantes indicaron específicamente haber usado la guía (52% del tiempo), sus análisis de datos fueron un 436% más precisos.
- En general, cuando cualquier soporte OTCD acompañó a los informes de datos vistos por los participantes del estudio, los análisis de los educadores de los datos mostrados fueron un 264% más precisos. Cuando los participantes indicaron específicamente haber utilizado el soporte (58% del tiempo), sus análisis de datos fueron un 355% más precisos.
- El 87% de los participantes del estudio que no recibieron apoyos indicaron que habrían utilizado apoyos, como pies de página, hojas de referencia o guías de referencia, si los apoyos hubieran estado disponibles.
- Los participantes que no recibieron apoyos promediaron un 11% de precisión en el análisis de datos (es decir, una puntuación del 11% correcta al responder preguntas variadas de análisis de datos como, de acuerdo con los datos vistos, qué área es más probable que sea una fortaleza del sitio, qué área es más probable debilidad del sitio, qué estudiantes no obtuvieron una calificación de Competente en la prueba y qué áreas causaron que los estudiantes no obtuvieran calificaciones de Competente en la prueba).
Relacionado con preguntas de investigación secundarias
- La demografía del sitio escolar de los educadores (variables secundarias independientes: tipo de nivel de escuela, nivel de escuela, rendimiento académico, población EL, población en desventaja socioeconómica y población de estudiantes con discapacidades) no tuvo un impacto significativo en la precisión del análisis de datos o el uso de apoyo.
- Los datos demográficos de los educadores (variables secundarias independientes: estado de veterano, función profesional actual, percepción de la competencia en el análisis de datos propios, tiempo de desarrollo profesional del análisis de datos y número de cursos de medición educativa a nivel de posgrado) no tuvieron un impacto significativo en la precisión del análisis de datos o el uso de apoyo.
- Las variaciones menores en el encuadre / formato de cada soporte (principalmente en términos de longitud y uso del color) no tuvieron un impacto significativo en la precisión del análisis de datos o el uso del soporte.
Estándares de datos de venta libre (OTCD)
Los estándares OTCD implican incorporar soportes de análisis de datos directamente dentro de los entornos de informes y adherirse a las mejores prácticas relacionadas con el diseño. [27] Los estándares OTCD fueron diseñados para ser utilizados por cualquier persona que comunique datos a los educadores y para que se reflejen en las herramientas a través de las cuales se comunican los datos (por ejemplo, informe de datos, sistema de datos u otro producto de tecnología educativa con un componente de datos) . Su propósito es fomentar la comprensión, el análisis y el uso óptimos de los datos proporcionados por parte del educador ("usuario").
Menciones de OTCD
Las menciones de OTCD por parte de organizaciones y publicaciones incluyen:
- Consejo de Educación de Maestros de California (CCTE) (presentación del póster de la conferencia 18 en el programa de la conferencia de 2013) y también artículo "Remediar los errores de análisis de datos de los educadores con datos de venta libre ", páginas 14 a 21 en CCNews: Boletín del Consejo de California sobre la formación del profesorado, 24 (4)
- Asociación de Investigación Educativa de California (CERA) (presentación que explica los componentes de OTCD; la presentación se describe en la página 27 del programa de la conferencia)
- Classroom 2.0 Learning 2.0 (haga clic en el enlace para la presentación de la conferencia OTCD)
- Connect 2013: Conferencia de Tecnología y Aprendizaje de Canadá (haga clic en la pestaña / enlace del martes para ver la mención de la presentación de OTCD)
- Educadores conectados (Directorio de la comunidad de educadores conectados)
- Educadores conectados (lista colectiva de Twitter)
- EdSurge (artículo); también, Bio ; Boletín informativo n. ° 114 (17 de abril de 2013), boletín informativo n. ° 115 (24 de abril de 2013) y boletín informativo n. ° 116 (1 de mayo de 2013) referenciado y vinculado al estudio de OTCD; y el Boletín # 121 (5 de junio de 2013) hizo referencia al artículo de OTCD
- EdTech Women (artículo)
- Edukwest (artículo)
- K-12 Online (presentación de la conferencia)
- Learning Forward (anteriormente National Staff Development Council) (desplácese hasta la presentación G09 y vea las diapositivas 30 y 35)
- Foro de verano del Centro Nacional de Estadísticas de Educación (NCES) en STATS-DC (mencionado cuando se presentó la presentación descrita en la página 49)
- La Red para la Educación Pública (haga clic en la página de Amigos y Aliados # / burbuja en el sur de CA hasta que pueda hacer clic en el pin en Laguna Beach, CA)
- Asociación Startup America (destacado)
- Teacher Tech (artículo)
- Centro de información tecnológica para el liderazgo administrativo (TICAL) (haga clic en el enlace del sitio web / URL asociado con la descripción de la sesión de la Cumbre de liderazgo escolar para ver la presentación en la que se discute OTCD)
Referencias
- ^ Rankin, JG (2013, 3 de junio). Artículo destacado: Qué pueden aprender los sistemas de notificación de datos del etiquetado de medicamentos. EdSurge . Obtenido de https://www.edsurge.com/n/2013-06-03-opinion-what-data-reporting-systems-can-learn-from-medicine-labeling
- ^ Rankin, J. (2013, 24 de octubre). Corregir los errores de análisis de datos de los educadores con datos de venta libre. Conferencia del Consejo de Educación de Maestros de California (CCTE) . Presentación de póster realizada desde Kona Kai Resort, San Diego, CA.
- ^ Rankin, JG (2 de mayo de 2013). Los datos de venta libre son la próxima frontera para los datos en edtech. Edukwest . Obtenido de http://www.edukwest.com/over-the-counter-data-is-the-next-frontier-for-data-in-edtech/
- ^ Rankin, J. (2011, 1 de diciembre). El análisis de datos no tiene por qué ser tan difícil. Nonagésima presentación anual de la Conferencia de la Asociación de Investigación Educativa de California (CERA) realizada desde el Centro de Convenciones de Disney, Anaheim, CA.
- ^ DeWalt, DA (2010). Garantizar un uso seguro y eficaz de la medicación y la asistencia sanitaria: perfeccionar el desmontaje. Revista de la Asociación Médica Estadounidense (JAMA), 304 (23), 2641-2642. doi: 10.1001 / jama.2010.1844
- ^ Brown-Brumfield, D. y DeLeon, A. (2010). Adherencia a un protocolo de seguridad de medicamentos: práctica actual para etiquetar medicamentos y soluciones en el campo estéril. Asociación de enfermeras de quirófano. Revista AORN, 91 (5), 610-610-7. doi: 10.1016 / j.aorn.2010.03.002
- ^ Hampton, T. (2007). Los grupos exigen etiquetas de advertencia para dispositivos médicos que contienen sustancias químicas tóxicas. The Journal of the American Medical Association (JAMA), 298 (11), 1267. doi: 10.1001 / jama.298.11.1267
- ^ Qin, Y., Wu, M., Pan, X., Xiang, Q., Huang, J., Gu, Z., & ... Zhou, M. (2011, 25 de febrero). Reacciones de los adultos chinos a las etiquetas de advertencia en los paquetes de cigarrillos: una encuesta en la provincia de Jiangsu. Salud Pública de BMC, 11 (133). doi: 10.1186 / 1471-2458-11-133
- ^ Rankin, JG (2013, 25 de octubre). Impulsar la responsabilidad de la tecnología educativa de comunicar la retroalimentación de manera efectiva. Edtech Women . Obtenido de http://edtechwomen.com/blog/2013/10/25/pushing-edtechs-responsibility-to-communicate-feedback-effectively
- ^ Rankin, J. (2013, 7 de mayo). Datos de venta libre: precisión de análisis mejorada. Connect 2013: Conferencia de aprendizaje y tecnología de Canadá . Presentación realizada desde el Centro de Convenciones de Scotiabank, Niagara Falls, Ontario, Canadá.
- ^ Kronstadt, J., Moiduddin, A. y Sellheim, W. (marzo de 2009). Uso de aplicaciones computarizadas por parte del consumidor para abordar las necesidades de salud y atención médica: Preparado para el Departamento de Salud y Servicios Humanos de los EE. UU., Oficina del Secretario, Subsecretario de Planificación y Evaluación . Bethesda, MD: NORC en la Universidad de Chicago.
- ^ a b Oficina de planificación, evaluación y desarrollo de políticas del Departamento de Educación de EE. UU. (2009). Implementar la toma de decisiones basada en datos en las escuelas: acceso, apoyo y uso de los maestros. Departamento de Educación de los Estados Unidos (ERIC Document Reproduction Service No. ED504191)
- ↑ a b c Rankin, JG (2013). El impacto de los datos de venta libre en la precisión del análisis de datos de los educadores . ProQuest Dissertations and Theses, 3575082. Obtenido de http://pqdtopen.proquest.com/doc/1459258514.html?FMT=ABS
- ^ Van der Meij, H. (2008). Diseñar para la cognición y el afecto del usuario en un manual. ¿Debería haber un apoyo especial para este último? Aprendizaje e instrucción, 18 (1), 18-29.
- ^ Hattie, J. (2010). Aprendiendo visiblemente de los informes: la validez de los informes de puntuación. Revista de investigación educativa en línea. Obtenido de http://www.oerj.org/View?action=viewPaper&paper=6
- ^ Wohlstetter, P., Datnow, A. y Park, V. (2008). Creación de un sistema para la toma de decisiones basada en datos: aplicación del marco principal-agente. Efectividad escolar y mejoramiento escolar, 19 (3), 239-259.
- ^ Lewis, D., Madison-Harris, R., Muoneke, A. y Times, C. (2010). Usar datos para guiar la instrucción y mejorar el aprendizaje de los estudiantes. Carta SEDL, 22 (2), 10–12.
- ^ a b Instituto SAS. (2013). Mejores prácticas en gestión de información, informes y análisis para la educación. Obtenido de https://fs24.formsite.com/edweek/form15/secure_index.html
- ^ Stansbury, M. (julio de 2013). Nueve plantillas para ayudar a los educadores a aprovechar los datos de la escuela: la nueva colaboración de la industria dice que el uso efectivo de los datos puede ayudar a cerrar las brechas educativas. eSchool News. Obtenido de http://www.eschoolnews.com/2013/01/07/nine-templates-to-help-educators-leverage-school-data/?ast=104&astc=9990
- ^ Campaña de calidad de datos (2009). El siguiente paso: usar sistemas de datos longitudinales para mejorar el éxito de los estudiantes. Obtenido de http://www.dataqualitycampaign.org/find-resources/the-next-step/
- ^ Wayman, JC, Cho, V. y Shaw, SM (2009, diciembre). Resultados del primer año de un estudio de eficacia del sistema de datos Acuity. Documento presentado en la Vigésima Cuarta Conferencia Anual de Evaluación de Texas, Austin, TX.
- ^ Underwood, JS, Zapata-Rivera, D. y VanWinkle, W. (2010). Un enfoque centrado en la evidencia para el uso de datos de evaluación para los formuladores de políticas (ETS Research Rep. No. RR-10-03). Princeton, Nueva Jersey: ETS.
- ^ Wayman, JC, Snodgrass Rangel, VW, Jimerson, JB y Cho, V. (2010). Mejorar el uso de datos en NISD: convertirse en un distrito informado por datos. Austin, TX: Universidad de Texas en Austin.
- ^ VanWinkle, W., Vezzu, M. y Zapata-Rivera, D. (2011). Informes basados en preguntas para los responsables de la formulación de políticas (Memorando de investigación de ETS Nº RM-11-16). Princeton, Nueva Jersey: ETS.
- ^ Oficina de planificación, evaluación y desarrollo de políticas del Departamento de Educación de Estados Unidos (2011). La capacidad de los maestros para usar datos para informar la instrucción: desafíos y apoyos . Departamento de Educación de los Estados Unidos (ERIC Document Reproduction Service No. ED516494)
- ^ Hansen, L., & Johnson, M. (2013, 24 de julio) Toma de decisiones basada en datos: se necesita una ciudad. Learning Forward (anteriormente National Staff Development Council) Conferencia de verano de 2013. Presentación realizada desde Minneapolis Hilton, Minneapolis, MN
- ^ Rankin, J. (28 de marzo de 2013). Cómo los sistemas de datos y los informes pueden combatir o propagar la epidemia de errores de análisis de datos. 2013 Centro de información tecnológica para el liderazgo administrativo (TICAL) Cumbre de liderazgo escolar . Obtenido de http://admin20.org/forum/topics/how-data-systems-reports-can-either-fight-or-propagate-the-data