Uso de un modelo de resolución de problemas y toma de decisiones para evaluar las barras de ensaladas del almuerzo escolar

La evaluación de programas es un término generalizado que se refiere a cualquier método sistemático para recopilar, analizar y utilizar información para responder preguntas sobre proyectos, programas y políticas. La evaluación de programas ha avanzado a lo largo de al menos cuatro generaciones de desarrollo: 1) la generación técnica con la informatización; 2) centrarse en metas y objetivos como base de evaluación; 3) evaluación requerida para responder a las necesidades de otros (generación de capacidad de respuesta); y 4) metaevaluación (Issel, 2009). Los modelos de evaluación han aumentado con el tiempo (Issel, 2009; Rowitz, 2001) a lo largo de generaciones de complejidad creciente, con diseños de programas y métodos estadísticos volviéndose igualmente más complejos (Guttmacher, Kelly y Ruiz-Janecko, 2010). Los modelos de evaluación también se han vuelto más especializados para áreas definidas de evaluación como economía, investigación, programación de salud pública, capacitación y liderazgo, y procedimientos médicos.

Los modelos complejos casi aseguraron la necesidad de expertos para implementar los modelos y proporcionar evaluaciones basadas en métodos estadísticos. Lo que se necesita en muchos entornos, como escuelas, organizaciones comunitarias y organizaciones sin fines de lucro, es centrarse en métodos de evaluación simplificados y fáciles de usar, una habilidad que sea transferible a múltiples aplicaciones, así como un sistema simplificado y eficiente. modelo que pueda funcionar como guía para evaluar actividades, programas y procedimientos internos.

Una dicotomía de evaluación muy útil es la que existe entre evaluaciones “centradas en los resultados” y evaluaciones “centradas en la utilización” (Issel, 2009). El surgimiento de estas “líneas” de evaluación puede explicar gran parte de la variación relacionada con la evaluación de programas (Issel, 2009). El propósito de las evaluaciones centradas en resultados es mostrar el efecto de un programa (2^nd generación) mientras que el propósito de las evaluaciones centradas en la utilización es proporcionar información a las partes interesadas para la toma de decisiones y el desarrollo futuro de programas (3^rd generación) (Patton, 1997).

El propósito de este informe es presentar un modelo de evaluación “centrado en la utilización” de cinco pasos, eficiente y simplificado, y demostrar su aplicabilidad a la evaluación de barras de ensaladas (SB) escolares.

Barras de ensaladas escolares

La obesidad infantil es un grave problema de salud pública en la nación (Must et al., 1999; Polednak, 2008), así como en Luisiana, donde en 57 se informó que alrededor del 10% de los niños y adolescentes de entre 17 y 2007 años tenían sobrepeso u obesidad. (Singh, Kogan y van Dyck, 2010). Una estrategia dietética para prevenir o reducir el peso infantil es aumentar el consumo de frutas y verduras frescas (Fung et al., 2012; Van Duyn y Pivonka, 2000).

Las escuelas pueden ser un lugar eficaz para influir en los patrones dietéticos de los niños debido al tiempo que pasan en la escuela y a la gran proporción de alimentos diarios que allí se consumen (Story, Kaphingst y French, 2006). En 2014, el Programa Nacional de Almuerzos Escolares (NSLP) funcionó en más de 99,000 escuelas públicas y privadas sin fines de lucro (K-12) e instituciones residenciales de cuidado infantil, y proporcionó almuerzos gratuitos o de bajo costo a más de 30.3 millones de personas diariamente (Departamento de EE. UU. de Agricultura [USDA], 2016). Con más de 55 millones de jóvenes matriculados en escuelas primarias y secundarias públicas y privadas de Estados Unidos, una estrategia de intervención nutricional basada en la escuela tiene el potencial de llegar a la mayoría de los niños en edad escolar del país (Digest of Education Statistics, 2010).

Los Centros para el Control y la Prevención de Enfermedades (CDC) (1996) establecieron pautas para los programas de salud escolar para promover una alimentación saludable y recomendaron una integración del servicio de nutrición escolar y la educación nutricional, junto con capacitación para todo el personal escolar (CDC, 1996). El informe ¡Hacer que suceda! (USDA Team Nutrition, 2005) sugirieron que las escuelas pongan a disposición alimentos y bebidas saludables, adopten técnicas de marketing que promuevan opciones saludables y limiten el acceso de los estudiantes a alimentos competitivos. El Comité Asesor de Política Alimentaria de Nueva Orleans, un comité creado por el Centro de Investigación y Prevención de Tulane (PRC), hizo recomendaciones similares en su informe de 2010. Un paso al frente: transformando la alimentación escolar en Nueva Orleans (Comité Asesor sobre Políticas Alimentarias de Nueva Orleans, 2010).

Las mejores prácticas en el consumo de FFV en el entorno escolar ahora suelen incluir el acceso de los estudiantes a barras de ensalada (SB) durante el almuerzo (French y Wechsler, 2004). Aunque la investigación es limitada en esta área, estudios en Alabama (Reynolds, Franklin y Binkley, 2000) y California (Joshi, Asuma y Feenstra, 2008) encontraron un mayor consumo de FFV cuando se introdujeron las SB durante la hora del almuerzo (Slusser, Cumberland, Browdy, Lange y Neumann, 2007). Los determinantes cruciales para aumentar el consumo de FFV en los SB incluyeron una variedad de alimentos ofrecidos en los SB (Adams, Pelletier, Zive y Sallis, 2005) y educación nutricional a nivel escolar (Suárez-Balcazar et al., 2007).

El Llevemos las barras de ensaladas a las escuelas es un programa nacional cuyo objetivo es que todos los niños de todo el país tengan acceso diario a FFV (Harris, et al., 2012; Let's Move Salad Bars to Schools, 2016). Se han otorgado alrededor de 4,800 SBS a escuelas de todo el país, y se otorgaron unidades SB (es decir, estructuras independientes que exhiben y sirven ensaladas) a algunas escuelas receptivas de Nueva Orleans, brindando al PRC de Tulane la oportunidad de evaluar los SB del comedor. . Este artículo describe la aplicación de un modelo de resolución de problemas/toma de decisiones para evaluar el uso de barras de ensaladas en el comedor.

MÉTODOS: Descripción del modelo de evaluación de barra de ensaladas

La evaluación del SB se presenta como una demostración de la aplicación del modelo de evaluación propuesto. La evaluación involucró a 19 escuelas que recibieron unidades SB que son independientes y exhiben y sirven alimentos. El diseño del estudio de evaluación fue transversal con recopilación de datos en múltiples niveles dentro de las escuelas participantes: administrativo, nutrición escolar, estudiantes y escaneos ambientales que incluyeron observaciones de la cafetería. El modelo proporcionó una guía simple y eficiente para la evaluación que arrojó datos prácticos importantes para las decisiones escolares sobre el uso de SB como alternativa o complemento a la línea principal de alimentos del almuerzo.

El modelo presentado es una amalgama de tres modelos propuestos por Liebler, Levine y Rothman (1992), Robbins y Coulter (1999) y Rowitz (2001). El modelo resultante, que fue desarrollado por el comité de evaluación de PRC SB (investigador principal, bioestadístico, coordinador del programa y un investigador de MPH), implica un enfoque de cinco pasos: 1) definición del problema; 2) establecimiento de objetivos; 3) opciones de método; 4) planes de acción; y 5) evaluación continua (Figura 1). Se aplicaron los siguientes cinco pasos a la evaluación SB.

1. Define el problema. El uso de SB se ha intentado numerosas veces en las cafeterías de las escuelas de Orleans Parish con efectos inconsistentes y mixtos, lo que resultó en un uso ineficaz, inapropiado o discontinuado. Por lo tanto, se ha subutilizado una estrategia potencialmente valiosa para aumentar el consumo de FFV por parte de los estudiantes. Un modelo de evaluación centrado en la utilización podría proporcionar la información necesaria para que el personal escolar tome decisiones informadas.

 

2. Desarrollar una meta general. De acuerdo con un modelo centrado en la utilización (Patton, 1997), el comité de evaluación decidió que el objetivo sería recopilar datos relacionados con el uso, la función y la eficacia de los SB. Para que estos datos sean útiles para las partes interesadas, sería necesaria su difusión interna a los administradores de las escuelas y al personal de nutrición escolar. También sería necesario incluir en el plan la difusión externa a los educadores, administradores y personal de nutrición escolar, así como a los legisladores a nivel estatal y distrital.

 

3. Considere opciones y seleccione métodos. Se consideraron varias opciones para la recopilación de datos. a) ¿Métodos cualitativos o cuantitativos? En el proceso de toma de decisiones, se determinó que la recopilación de datos cuantitativos serviría mejor a las necesidades de este estudio en particular. Aunque los métodos cualitativos, como las entrevistas y los grupos focales, serían una rica fuente de datos que normalmente no se encuentran disponibles con los métodos cuantitativos, los métodos cualitativos consumirían mucho tiempo, requerirían más recursos para implementar y evaluar, y pueden no ser factibles durante el día escolar. . El tiempo de los estudiantes es limitado debido a los períodos de clases académicas y el tiempo del personal de nutrición escolar también es limitado porque la mayoría trabaja a tiempo parcial.

 

1. b) Consideración de la encuesta. Al considerar las encuestas, la decisión fue entre instrumentos de medición publicados y validados versus encuestas desarrolladas específicamente para esta evaluación. Una búsqueda bibliográfica reveló estudios publicados sobre SB y otras evaluaciones de servicios de comidas escolares; sin embargo, ninguno proporcionó todas las preguntas que abordarían suficientemente los objetivos de esta evaluación.

 

1. c) Observación directa. El comité de evaluación decidió utilizar la observación directa para capturar información sobre algunos determinantes cruciales, como los materiales de educación nutricional publicados en las escuelas y la comercialización de productos saludables para el almuerzo, particularmente dentro de la cafetería, y la observación fotográfica de los SB durante las horas de almuerzo. Esta observación directa se logró con listas de verificación que implicaban la recopilación de datos cuantitativos.

 

1. d) Grupos a los que se dirigirá la recopilación de datos. El objetivo general guió la toma de decisiones relativas a los grupos destinatarios para la recopilación de datos. Se necesitaban encuestas a estudiantes para determinar el uso, y los datos del personal de nutrición alimentaria y de los administradores escolares proporcionarían información sobre la función y el apoyo de la SB, así como la eficacia en relación con la implementación y el costo. Se consideraron encuestas a docentes, pero estudios previos realizados por el comité de evaluación habían demostrado que los docentes rara vez comen en la cafetería de los estudiantes, lo que disminuye la probabilidad de que se obtengan datos útiles de este grupo; por lo tanto, no se planificaron encuestas a docentes.

 

4. Plan de acción. Los planes de acción se basaron en las deliberaciones anteriores del comité de evaluación y sus resultados: a) utilizar métodos cuantitativos más observación directa; b) desarrollar encuestas para este estudio utilizando preguntas publicadas más preguntas nuevas para variables adicionales; c) implementar las encuestas con estudiantes, administradores y personal de nutrición escolar (director y personal), y d) realizar un escaneo ambiental escolar que incluyó observaciones de la cafetería para capturar el entorno nutricional/alimentario y las ofertas reales de SB durante los períodos de almuerzo.

 

5. Evaluación continua. Generalmente surgen problemas durante la implementación que requieren flexibilidad. En la evaluación de SB, surgieron consistentemente problemas de campo que requirieron flexibilidad en la medición y/o renegociaciones con el personal de la escuela. Un problema, por ejemplo, fue que los datos de inscripción proporcionados por las escuelas sobreestimaron la inscripción de estudiantes y dieron como resultado tamaños de muestra más pequeños de lo esperado originalmente. Una reevaluación condujo al reclutamiento de estudiantes adicionales en los niveles de grado de interés para que se pudieran realizar los análisis apropiados. Si bien generalmente se considera que la evaluación avanza de manera lineal, en realidad es un proceso cíclico (Figura 1), lo que hace que este paso final sea importante para la efectividad general del modelo. Otra situación inesperada surgió cuando se descubrió que 7 escuelas que supuestamente tenían unidades SB no las tenían o no las utilizaban. Esta situación requirió un ajuste de la evaluación para esas 7 escuelas y se utilizaron versiones modificadas de las encuestas eliminando aquellos ítems pertenecientes a las SB. 

MAS FUERTES

La Tabla 1 enumera los objetivos de medición y las variables de interés que se incluyeron en la evaluación del SB como resultado de la aplicación del modelo de resolución de problemas/toma de decisiones. El estudio se realizó con 19 escuelas que habían recibido SB. Durante la implementación, se encontró que 7 de estas escuelas no estaban usando las unidades SB, por lo que 12 escuelas con unidades SB recibieron la evaluación completa. Las 7 escuelas sin unidades SB recibieron una evaluación modificada en la que se eliminaron las preguntas relacionadas con el SB. Se dirigieron a unos 1,200 estudiantes, pero más estudiantes (n=1,291) aceptaron participar. Se encuestó a un administrador y a un director de nutrición escolar de cada escuela. Se realizaron dos exploraciones ambientales (observación directa) y dos observaciones de la cafetería en cada escuela según lo previsto. Se realizaron un total de 37 encuestas al personal de nutrición escolar en 12 escuelas.

Los resultados de este estudio de evaluación se han presentado en otro lugar (Andersen, Myers, O'Malley, Rose y Johnson, 2016; Spruance, Myers, O'Malley, Rose y Johnson, 2016). Se proporciona un breve resumen de esos resultados. Los administradores de escuelas de SB citaron más facilitadores, elementos que apoyan el uso de SB, que barreras en comparación con los administradores de escuelas que no son de SB. El fuerte apoyo del personal de nutrición escolar y el equipamiento adecuado contribuyeron a la implementación exitosa de los SB. Con respecto al uso de los estudiantes, se encontró que las mujeres y los estudiantes con preferencias alimentarias más saludables tenían mayores probabilidades de usar el SB que los estudiantes varones y los estudiantes que reportaban preferencias alimentarias menos saludables. Entre los estudiantes de secundaria, el estímulo de los estudiantes hacia otros para una alimentación saludable y el marketing de SB en la escuela se correlacionaron significativamente con el uso de SB.

5. Tabla 1. Métodos de recopilación de datos para la evaluación de barras de ensaladas en las escuelas de Nueva Orleans
   Measurement	Categoría de escuela	Principales variables de interés
   Encuesta para administradores	Escuelas SB	Antecedentes, estructura, sostenibilidad, presupuesto, marketing/promociones, política de bienestar escolar, educación nutricional y otros programas de nutrición de SB
   Administrador Modificado por la encuesta	Escuelas que no pertenecen a SB	Antecedentes de SB, sostenibilidad potencial, marketing/promoción potencial, política de bienestar, educación nutricional, otros programas de nutrición
   Directora de Nutrición Escolar Peritaje	Escuela SB	Antecedentes de SB, mantenimiento, infraestructura, implementación, contenido, adquisición de alimentos, capacitación del personal.
   Encuesta del director de nutrición escolar modificada	Escuelas que no pertenecen a SB	Antecedentes de SB, planes de mantenimiento e infraestructura, implementación futura, contenido, adquisiciones, capacitación futura del personal
   Encuesta al personal de nutrición escolar	Escuelas SB	Actitudes hacia SB horizontal
   Encuesta de Estudiantes	Escuelas SB	Información demográfica, uso de SB, preferencias alimentarias, conocimientos sobre nutrición, apoyo social.
   Escaneo ambiental escolar Observación directa	Escuelas SB	Máquinas expendedoras, políticas de nutrición, marketing; ambiente de cafetería; Características de SB, bebidas disponibles en cafetería, línea a la carta
   Observación de SB y línea principal de alimentos	Escuelas SB	Los estudiantes cuentan por género y categoría de edad usando SB y la línea principal de alimentos
   No diez = 12 escuelas de barra de ensaladas (SB); n = 7 escuelas que no son bares de ensaladas

SOLICITUDES PARA PROFESIONALES DE NUTRICIÓN INFANTIL

Resumen

Los métodos de evaluación más viables que no suponen una carga considerable para los recursos escolares son aquellos que son sencillos, convenientes y fáciles de implementar. Este estudio de evaluación de SB utilizando el modelo de resolución de problemas/toma de decisiones tuvo éxito porque todos los métodos fueron alcanzables, la participación alcanzó los niveles esperados, se alcanzaron las metas identificadas y se activaron planes de difusión. Sólo se utilizaron análisis descriptivos y no paramétricos; por lo tanto, el número de escuelas participantes fue suficiente para los propósitos de esta evaluación. Cabe destacar que la participación escolar se logró sin compensación porque el presupuesto era mínimo.

El quinto y último componente del modelo, la evaluación continua, fue importante no solo por la naturaleza cíclica de la evaluación, sino también porque permitió identificar y resolver los desafíos que surgieron durante la implementación. Los problemas que surgieron durante la evaluación del SB, por ejemplo, una menor inscripción de estudiantes de lo previsto y 7 escuelas que no utilizaron el SB, demostraron el valor de un proceso continuo de resolución de problemas/toma de decisiones y flexibilidad en la implementación.

Este artículo describe el uso de un modelo para desarrollar e implementar una evaluación de los SB escolares. Un proceso eficiente para evaluar programas escolares como los SB puede proporcionar datos basados ​​en evidencia para uso práctico por parte de los distritos escolares, el personal de nutrición escolar y los profesionales del comportamiento de salud, y se puede lograr internamente sin ayuda externa. El modelo de cinco pasos dio como resultado la recopilación de datos de múltiples niveles dentro de las escuelas. La evaluación continua fue útil para resolver desafíos inesperados. Los componentes de este modelo de resolución de problemas no son nuevos, pero la combinación de tres modelos publicados anteriormente junto con su aplicación a la evaluación de los SB escolares son únicas. Los CDC han proporcionado un documento, Marco para la evaluación de programas en salud pública (CDC, 1999), que incluye y va más allá de muchas de las áreas discutidas en este documento. La terminología en el documento de los CDC puede ser diferente del modelo propuesto aquí, pero los componentes principales son consistentes con los propuestos en este modelo.

Limitaciones y fortalezas del modelo

Una limitación del modelo presentado es que no incluye un proceso preliminar de toma de decisiones sobre si realizar o no la evaluación o el estudio, que se incluye en muchos otros modelos (por ejemplo, Durch, Bailey y Soto, 1997; Green, 1992). ; Asociación Nacional de Funcionarios de Salud de Ciudades y Condados, 2000). En este caso, esa decisión ya se había tomado y era preventiva. Además, el modelo, tal como se presenta, se aplica a un diseño de estudio transversal en el que casi todos los datos son autoinformados. Aparte de las observaciones directas en la cafetería y los escaneos ambientales de la escuela, todos los datos de autoinforme están sujetos a los bien conocidos sesgos del autoinforme.

La fortaleza es la simplicidad y la aplicación eficiente del modelo de resolución de problemas/toma de decisiones que puede mejorar el trabajo de un equipo de evaluación y tiene el potencial de proporcionar orientación para evaluar otras actividades escolares. Este informe también puede servir como herramienta de instrucción para los primeros investigadores, profesionales de la salud pública y personal escolar para la recopilación de datos relacionados con los comedores escolares.

AGRADECIMIENTOS

Esta publicación fue apoyada por el Acuerdo Cooperativo #U48DP005050, bajo el Programa de Centros de Investigación de Prevención de Enfermedades y Promoción de la Salud de Tulane, financiado por los Centros para el Control y la Prevención de Enfermedades. El contenido de este artículo es propiedad de los autores y no representa necesariamente las opiniones oficiales de los Centros para el Control y la Prevención de Enfermedades ni del Departamento de Salud y Servicios Humanos de EE. UU.