Slide 1

Por:Adriana Gutirrez PachecoFrances M. Torres Oquendo

Psic 8017 - 0U1 Perspectivas mltiples en la investigacin Prof(a). Dra. Dolores Miranda

Evaluacin de ProgramasEvaluarSegn la Real Academia Espaola (2001) evaluar se define como la accin de estimar, apreciar o calcular el valor de algo.

Implica dos procesos: describir y valorar. Algunos/as autores que hacen incapie en uno u otro de estos proceso.

Qu es la evaluacin?Segn Baltasar Fernndes Ramirz (2009): Evaluar es imitir juicios de valor sobre objetos diversos, incluidas las iniciativas de intervencin social. El plantamiento convencionales racionalista (diagnstico, planificacin, intervencin y analisis del impacto). La evaluacin sugiere o impone que es lo correcto en cada caso, criteros que pasan acotar, dar sentido y prioridad a determinado modo de entender las relaciones sociales, los objetivos, y los modos de comportamiento personal y organizacional.Evaluacin de ProgramasEs un proceso sistemtico y dinmico de recoleccin y anlisis de informacin respecto a distintos aspecto de un programa, en su contexto, para emitir juicios relacionados a su calidad o mrito, con la intencin de que se utilicen para mejorar su efectividad o informar decisiones programticas futuras. Se concibe como un proceso sistemtico porque constituye una actividad planificada, intencionada y realizada con rigor, tambin como un proceso dinmico porque ha de ajustarse al contexto y las circunstancias cambiantes del programa y de la propia evaluacin (Bravo, 2010).Lgica de la Evaluacin de ProgramasEvaluacin vs. InvestigacinDiferenciasInvestigacin

Evaluacin

Tienen propsitos distintos

Aportar a la base de conocimiento de algn campoTiene propsitos prcticos orientados a la accin

Responden a diferentes necesidades de informacin de las audienciasMiembros de una particular disciplina o campo del saberPartes implicadas del programa Comunican los resultados de modo distinto y a diferentes gruposA travs de revistas profesionales y presentaciones en congresos de asociacionesA travs de una diversidad de medios orales y escritos, formales e informales a las partes implicadasExisten distintas expectativas respeco al uso de los resultadosNo se hace nfasis en el uso de los resultadosSe presta gran importancia al uso de los resultadosDiferentes criterios y estndares de calidadValidez interna y externaUtilidad, viabilidad, honestidad y certidumbreTeora de la evaluacin de programas (Martnez, s.f.)Se define como una especificacin de lo que se debe hacer para conseguir las metas deseadas, qu otros impactos o logros importantes pueden ser tambin anticipados, y cmo estas metas y estos impactos pueden generarse.

Tipos de evaluacin de programasEvaluacin formativaEvaluacin sumativaPara producir informacin que contribuya al mejoramiento del programa.Identificacin de fortalezas y debilidadesLas maneras de atender las debilidadesPara viabilizar la toma de decisiones sobre la adopcin, continuacin, o ampliacin de un programa.Tambin se le llama accountability.Resultados que se producen y las circunstancias en que se producen.

Recuperado de: http://www.tdr.cesca.es/TESIS_URV/AVAILABLE/TDX-0323104-135426/OC_Capitulo_VIII_Def.pdfConsideraciones para el planeamiento e implementacin de una evaluacin No hay una nica forma correcta para realizar una evaluacin. Cada proyecto atiende a un grupo diferente de usuarios, utiliza distintos procesos para proveer servicios, existen diferentes metas y contextos.No obstante hay ciertos elementos crticos a seguir en cada proyecto para asegurar que elaboren e implementen estrategias

Algunos highlightsLa seleccin de los diseos y mtodos en el proceso de evaluacin del programa dependen de: planificacin, Implantacin, Produccin de resultados.Un diseo de evaluacin busca dar repuesta a cuestiones cmo, cundo, cuntas veces y en cules personas o grupos debe recogerse la informacin.Indica cmo organizarla y recogerla.Factores claves a considerar (Kellogg, 1998)PlaneamientoPlanificacinModelos de evaluacin (Bravo, 2010)A continuacin se proponen seis modelos de evaluacin sistemticos y dinmicos orientados a la participacin y la agenda social (Fitzpatrick, Senders y Worthen, 2004; Stuflebeam,2001).Estos modelos priorizan representar:NecesidadesValoresPerspectivas de las partes implicadas.Difieren en la forma y grado de atencin.A continuacin los primero cuatro se distinguen por su naturaleza transformadora, mientras los ltimos dos tienen caracteristicas ms practicas.Evaluacin Responsiva

Responde a las necesidades e inquietudes de las partes implicadas del programa. Informan sobre el xito o fracaso de actividades implantadas. Busca que las partes implicadas aumenten el entendimiento de las actividades y logros del programa. Qu se hizo y se logr? Uso de descripcin y juicios valorativosOrientados a la equidad y justiciaMtodos utilizados de naturaleza cualitativaEstudios de casoObservacionesEntrevistasMuestreoSociodramaDebatesInformes narrativosEvaluacin cclicaEvaluacin naturalista constructivistaEvala el programa tal como ocurre. Describe el programa en su totalidad mientras se toman en cuenta las perspectivas valorativas de las partes implicadas. Basada en la experiencia.Estar al tanto de las construcciones que emergenAcopio, anlisis y sntesis

Evaluacin democrtica deliberativaPrincipal nfasis a la participacin democrtica, el dialogo para examinar y verificar el insumo de las partes implicadas. Se mide el evalo de los mritos y el valor de un programa.Inclusin de grupos desprovistos de podernfasis en los meritos del programa.Evaluacin para el empoderamientoFacilita la participacin ciudadana en la evaluacin y promueve que la misma se convierta en un medio de intercesin para los grupos carentes de voz y poder en la sociedad. Existe una autoevaluacin que promueve la autodeterminacin.El evaluador acta como amigo crtico

Ejemplo de Evaluacin de empoderamineto (Fetterman, 1996)Cumple con necesidades especificas de evaluacin:Empleo de metodologas cualitativas y cuantitativasSe emplea en: en programas donde participan individuos, organizaciones, comunidades, sociedades y culturas.Busca el empoderamiento (Kellog, Zimmerman), la cual indica este es efectivo si ayuda a desarrollar las habilidades en las personas para que estas asuman as su vez soluciones de problemas y tengan en sus manos el poder decisivo.Se promueve la auto-evaluacin y reflexin.

18Ejemplo de Evaluacin de empoderamineto (Fetterman, 1996)Sirve a:Entrenamiento segn prioridades y objetivosFaciltacin de informacinApoyo y defensa EnriqueceLibera

Pasos a seguir:Se mide el posicionamiento del programaSe trazan metasDesarrollo de estrategiasDocumentacin de progreso

Evaluacion centrada en la utilizacin y participativaAmbas tienen un enfoque prctico.La primera se centra en promover que las evaluaciones de programas que se utilicen tengan un impacto. Estas evaluaciones se juzgan por su utilidad prctica (mejoramiento y generacin de conocimiento). Se seleccionan usuarios potenciales, para ayudar a obtener y aplicar la informacin para determinados usos.En la segunda el evaluador mantiene una continua interaccin y colaboracin con las personas que implantan el programa, y comparte la responsabilidad conjunta de la evaluacin asumiendo la posicin de coordinador que adiestra.

Caractersticas comunes (Mcmillan y Schumaker 2005; Fitzpatrick et al , 2004)Se retratan: valores y necesidades tanto de los individuos y grupos de los programas involucran a los participantes para lograr un mayor entendimiento de los programas.Enfoque holsticoRazonamiento inductivo basado en la observacinDiseos emergentes que surgen de la experiencia (idiosincrasias, influencias contextuales variaciones en los procesos, historias personales)Uso de multiplicidad de datos provenientes de diversas fuentes (cualitativos y cuantitativos.)Se respeta pluralidad y se registran las realidades mltiplesProducen retratos de personas, escenarios, actividades, proyectos, programas.Fortalezas y limitaciones de los enfoque participativosLa crtica los ha catalogado como poco rigurosos y que no ofrecen resultados slidos. Se critica su subjetividad. Inversin de tiempo, costo, acceso a recursos.Sin embargo, entre sus ventajas estn:La flexibilidadEl uso de mltiples tcnicas de recogida de datosPromueven la participacin , enfatizando el elemento humanoDirigen la atencin a las necesidadesnfasis en diversas perspectivasHay una valorizacin de la complejidadFacilitan la creacin de teoras tiles acerca de los fenmenos educativos, sociales y sanitarios que abordan.Plan de evaluacin (Fitzpatrick et al, 2004)Diseos y mtodos para evaluar distintas fases de programaInformacin general de diseosEvaluacin de fasesAlgunos mtodos y tcnicas de acopio de informacinAplicaciones especficas de los hallazgos de evaluacinSobre el juicio profesional del evaluadorLa experiencia acumulada le permite, generalmente describir el objeto a evaluar en detalle y mirar sus necesidades, costos y consecuencias. El evaluador puede utilizar su peritaje basado en las siguientes preguntas:Referencias:Bravo, M. (2010). Evaluacin de programas: proceso sistemtico y dinmico. Documento inditoKellog, W. (1998). Manual de evaluacin. Battle Creek, MI: WK Foundation.Martnez, C. (s.f.). La teora de la evaluacin de programas. Accedido en http://www.uned.es/educacionXX1/pdfs/01-04.pdfReal Academia Espaola (2001). Evaluar. Diccionario de la Lengua Espaola (22n edicin). Accedido en http://buscon.rae.es/draeI/SrvltConsulta?TIPO_BUS=3&LEMA=evaluar