TEMTICA E. EVALUACIN Y ACREDITACIN DE PROGRAMAS EVALUACION CURRICULAR.

TENSIONES Y PRCTICAS Mara del Carmen Vargas Lpez Mara del Carmen Vargas Lpez. Lic. En Ciencias de la Educacin por la Universidad Jurez Autnoma de Tabasco, Maestra en Educacin Superior por la Universidad Autnoma de Tlaxcala. Miembro del Sistema estatal de Investigadores del Estado de Tabasco y perfil deseable en el PROMEP. Docente investigador en la Universidad Jurez Autnoma de Tabasco. Miembro del Cuerpo acadmico de Educacin innovacin y cultura, lneas de investigacin: Currculum y Evaluacin educativa. Actualmente es estudiante del 2. Semestre del Programa de Doctorado en Educacin de la Universidad Autnoma de Tlaxcala. Domicilio: Calle Hidalgo No. 25 int. 5A. Tlaxcala, Tlaxcala. Telfono: 246 1 17 50 74. E-mail: mcvlopez@ hotamail.com; maria.vargas@daea.ujat.mx Requerimientos: Proyector (can) Abstract En el marco de las polticas para la modernizacin de la Educacin en la dcada de los noventa surgidas con la finalidad de impulsar la calidad de la educacin superior, se implement la aplicacin de un conjunto de evaluaciones para las diversas instancias y actores de los procesos educativos: Programas acadmicos, Instituciones, docentes, estudiantes y egresados. En este contexto abordaremos algunos temas derivados de la Evaluacin educativa, como lo es la del desarrollo y conformacin del Campo de la Evaluacin curricular, cuya consolidacin se interrumpe al aparecer en escena los Organismos evaluadores y acreditadores de las Instituciones y Programas Educativos, los cuales a partes de un conjunto de indicadores ya determinados en sus Marcos de Referencia. La Evaluacin curricular, surge relacionada con la reestructuracin de programas de estudios en la dcada de los aos setenta. En cuanto a su desarrollo, se produjo, en la dcada pasada un proceso de cambio de su objeto de estudio y/ prcticas evaluativas, situacin presentada como reconceptualizacin del trmino evaluacin curricular por el de Evaluacin de Programas aunque Daz Barriga (2005:3) lo establece mas bien como un desplazamiento y/o cancelacin del Campo de la Evaluacin Curricular ante el surgimiento de la Evaluacin de Programas. DESARROLLO DEL TEMA.. Un tema relevante en el Sistema Educativo mexicano, desarrollado en las dos ltimas dcadas es el de la Evaluacin educativa, establecida en el marco de las polticas para la modernizacin de la Educacin en la dcada de los noventa y que surgen con la finalidad de impulsar la calidad de la educacin superior. En donde a partir de un modelo de coordinacin o regulacin del Estado con las universidades, establece planteamientos de instrumentos como: La Articulacin de procedimientos de evaluacin, programas de financiamiento extraordinario as como exigencias de cambio a las instituciones, lo que se concret en la aplicacin de un conjunto de evaluaciones para las diversas instancias y 1

actores de los procesos educativos, ya que se evalan: Programas acadmicos, Instituciones, docentes, estudiantes y egresados/profesionistas. Presentaremos una descripcin breve algunos de estos programas (Luengo: 2003): -Evaluacin de instituciones. Surge en 1990 relacionada con financiamientos concedidos a travs de diversos Programas, como el Fondo para la Modernizacin de la Educacin Superior (FOMES) el Programa de apoyo al desarrollo universitario (PROADU). -Acreditacin de Instituciones. Es la Federacin de Instituciones Mexicanas Particulares de Educacin Superior (FIMPES), el primer organismo acreditador para IES, surgido en 1992. -Evaluacin de Programas acadmicos. Son los Comits Interinstitucionales para la Evaluacin de la Educacin Superior CIEES, los pares que determinan sobre la pertinencia y deficiencias de un programa acadmico. La informacin que generan es entregada solo a la institucin que evalan. Se crean en 1991. -Acreditacin de Programas acadmicos. Es realizado por el Consejo para la acreditacin de la Educacin Superior (COPAES), creado en el ao 2000 con el objetivo de dar confianza sobre la capacidad tcnica y operativa de las organizaciones que acreditan. Es en este contexto donde nos interesa abordar algunos temas derivados de la Evaluacin educativa como es la tensin entre la Evaluacin Curricular y la Evaluacin de Programas Educativos, as como la revisin de diversos conceptos surgidos en estos desarrollos. Evaluacin Curricular Reconocemos al Campo de la Evaluacin Curricular, como un Campo de conocimiento polmico, que conjunta dos conceptos: Evaluacin y currculum, donde cada uno de ellos tambin como campo de conocimiento ha establecido sus propios procesos, desde sus orgenes, aspectos tericos, conceptuales, metodolgicos, supuestos y fines. En este sentido hemos encontrado dos explicaciones a los orgenes del Campo de la evaluacin curricular, que tienen que ver con el contexto en donde se generan, en un pensamiento anglosajn y en un pensamiento latinoamericano; en la primera se plantea que el surgimiento de la Evaluacin curricular se encuentra en el mbito de las Ciencias de la Educacin y de la Evaluacin educacional, la medicin y la elaboracin de test. En el segundo se establece como unin de dos campos de conocimiento que surgen como respuesta a las problemticas educativas en el contexto de la sociedad industrial. A. Desde hace tres dcadas, (Lewy: 1976:19) afirma que los orgenes de la Evaluacin curricular, se encuentran en la dcada de los cincuentas, en un Campo de estudio independiente en el dominio de las ciencias de las educacin. Sus races pueden encontrarse en el campo mas general como lo es la Evaluacin educacional, la medicin y la elaboracin de test. Establece planteamientos de la Evaluacin curricular, diferentes a lo que se han trabajado en este sentido en Mxico, ya que no se circunscribe solo a un llenado de formatos la revisin del Currculum formal en el mejor de los casos, sino que presenta una propuesta que tiene que ver con el trabajo en el aula, la relacin entre materiales didcticos, la propuesta de objetivos, y la formacin de los docentes que van a involucrarse con el Plan de estudios en cuestin entre otros aspectos ms generales de Determinacin de objetivos y Planificacin por mencionar solo a algunos. Reconoce en la Evaluacin curricular un proceso complejo que puede atender a todo el Programa educativo solo a una parte de l, conceptualiza a la Evaluacin curricular 2

como un acto que consiste, esencialmente en proporcionar informacin para facilitar la toma de decisiones en diversas etapas del desarrollo del currculo. Esta informacin puede pertenecer al programa como entidad completa slo a algunos de sus componentes. El debate sobre la Evaluacin curricular de todo el plan de estudios solo una parte de l, profundidad versus extensin, est ausente en esta propuesta como tal, ya que reconoce que pueden suceder ambas situaciones sin demerito de la Evaluacin. Cabe sealar que los supuestos presentados por este autor, se refieren a la experiencia anglosajona sobre este tema, en un documento elaborado para la UNESCO. B. La conformacin del campo de la Evaluacin curricular es reciente, conjunta dos campos de conocimiento: Evaluacin y currculo, los cuales surgen como respuesta en el contexto de la sociedad industrial a las problemticas educativas en ese contexto. El origen del concepto Evaluacin se ubica entre la segunda mitad del Siglo XIX e inicios del XX y est vinculado al proceso de industrializacin de los Estados Unidos, en el marco de1 discurso de la Administracin. El concepto de Currculum se establece como Plan de estudios, en el contexto del Currculum formal as como el conjunto de experiencias generadas a partir de su implementacin lo que se denomina Currculo real vivido. La Evaluacin curricular, explicada en este marco, surge relacionada con la reestructuracin de programas de estudios en la dcada de los aos setenta. En cuanto a su desarrollo, se produjo, en la dcada pasada un proceso de cambio de su objeto de estudio y/ prcticas evaluativas, situacin denominada en el Estado del Arte sobre Currculo de la dcada de los noventas (Carlos, et al:2003), como reconceptualizacin del trmino evaluacin curricular por el de Evaluacin de Programas aunque Daz Barriga (2005:3) lo establece mas bien como un desplazamiento y/o cancelacin del Campo de la Evaluacin Curricular ante el surgimiento de la Evaluacin de Programas, situacin que menciona este autor, pas desapercibida durante una dcada para los expertos en el Campo del Currculum y que puede explicarse sin justificar, en el incipiente desarrollo de la Evaluacin Curricular, que se encontraba sumida en un conjunto de prcticas diversas, del cual dan cuenta los Estados del conocimiento sobre Currculo, elaborados en las dos dcadas pasadas. Es relevante destacar que en el Primer Congreso Nacional de Investigacin Educativa, realizado en 1983, slo el 10 % de los trabajos presentados, daba cuenta de la temtica de Evaluacin Curricular. Las experiencias de evaluacin curricular predominantemente tenan como objetivo la reestructuracin de planes y programas de estudio, aunque ausentes de referentes tericos. Las prcticas curriculares se desarrollaron en su mayora en el nivel superior. Igualmente plantean la predominancia del enfoque tcnico-instrumental que junto con el enfoque critico-alternativo fueron dos corrientes que estuvieron presentes en la produccin sobre Evaluacin Curricular en esta dcada. Estas experiencias estn marcadas por la necesidad institucional de fortalecer la administracin educativa, lo cual llev al fortalecimiento de prcticas evaluativas basadas en un planteamiento eficientista que promova la racionalidad de recursos en las Instituciones educativas. La corriente crtica-alternativa, destaca el manejo de aspectos socio-polticos as como el uso de Marcos de referencia elaborados a partir de la construccin de conceptos y metodologas, buscando la participacin de todos los actores involucrados en el Plan de estudios y la corriente tcnico sistmica, donde la evaluacin es plantada como un mecanismo de recuperacin de informacin para justificar la toma de decisiones, cuantifican la informacin a travs de indicadores, categoras y parmetros. 3

Una de las tensiones que se presentan en el Campo de la Evaluacin curricular es la consideracin de la Evaluacin Curricular como una actividad tcnica de intervencin frente a reconocerla como una actividad de investigacin. En el primer caso, parte de un conjunto de indicadores preestablecidos en el segundo caso de una actividad de investigacin, que posibilite la comprensin del desarrollo de un Plan de estudios, revisando y profundizando en el anlisis de algunos de sus procesos, reconocerla como un espacio de investigacin y comprensin de lo que sucede en un plan de estudios, con un objeto de estudio propio, un aparato conceptual y terico que lo sustente para el desarrollo de sus cuestionamientos y cuyo producto sea el informe de investigacin (Daz 1994:21/2005:8). Pensar de esta manera a la Evaluacin curricular abre una gama de posibilidades para su desarrollo, es abierta y nos llevara a trabajar la bsqueda de la comprensin de lo que sucede en un plan de estudios implementado en una institucin educativa: Relacin de los objetivos con el acercamiento didctico del docente y los contenidos, ambiente escolar, procesos de aprendizaje de los alumnos por mencionar algunos, ms que solo la intervencin en los Planes de estudio, desde indicadores preestablecidos, descartando adems la idea de considerar una propuesta metodolgica nica y general de Evaluacin Curricular. La produccin y campos temticos de los trabajos analizados en la elaboracin del Estado del arte sobre currculo de la dcada pasada -1992-2002-, en el apartado sobre Evaluacin curricular, refiere que el 48 % de estos trabajos eran Reportes de intervencin y solo el 22 % se consideraron como Reportes de investigacin, evidenciando de esta manera el carcter prctico reconocido en esta actividad, marcada por la necesidad de las instituciones educativas para dar respuesta a las exigencias del Sistema educativo entre las que se enfatiza precisamente la de su evaluacin, el 30 % restante est integrado por trabajos que presentan propuestas prcticas, ensayos con referente emprico y trabajos que reflejaron propuestas crticas. El 45 % de los trabajos presentados no explicitan el enfoque metodolgico que gui la evaluacin curricular, mientras que el 55 % restante presentaron propuestas diversas en este sentido entre las que se encontraban los enfoques metodolgicos: Sistmico, eclctico, cualitativo, calidad y eficiencia, crtico y cognosctivo-constructivista. Metodolgicamente, es necesario diferenciar en la produccin bibliogrfica de este tema, los documentos que dan cuenta de experiencias de propuestas de Evaluacin curricular, en el primer caso se presentan metodologas y resultados de ejercicios de Evaluacin curricular, con sustento terico-conceptuales, en el segundo caso son textos que presentan solo planteamientos sobre cmo realizar una Evaluacin curricular sin remitir al proceso y los resultados. Un pequeo ejemplo de esto, lo presentamos a continuacin:

EXPERIENCIAS DE EVALUACION CURRICULAR De Alba, Alicia, (1985). Evaluacin de la congruencia interna de planes de estudio. Estudio de caso. En Revista de Educacin superior No. 054, Abril-Junio de 1985, ANUIES, Mxico. Daz Barriga, ngel. (1996) El contenido del Plan de estudios de Pedagoga: Anlisis de los programas de asignatura. Cuadernos del CESU No. 32 , 1. Reimpr. 1996. Centro de estudios sobre la Universidad, CESU-UNAM, Mxico. Ruiz L. Estela. (1998). Propuesta de un modelo de Evaluacin curricular para el nivel superior. Una orientacin cualitativa. Cuadernos del CESU No. 35, CESU-UNAM, Mxico. Barrn, Concepcin (2003) Universidades privadas. Formacin en educacin, CESU-UNAM, Mxico. PROPUESTAS DE EVALUACION CURRICULAR Daz Barriga, Frida. (1990). Metodologa de Diseo curricular para la educacin superior, Trillas, Mxico. Daz Barriga, Frida. (1992) Diseo Curricular I. Aproximaciones metodolgicas. del Mdulo II. Fundamentos del Desarrollo de la Tecnologa Educativa I. PROMESUP OEA-ILCE, Mxico. Pacheco Mndez, Teresa y ngel Daz Barriga (2000). Programas de formacin de profesionales universitarios. Un modelo de evaluacin en Evaluacin Acadmica, Fondo de Cultura econmica-Centro de estudios sobre la Universidad, Mxico pp. 90-100. Valenzuela, Anglica. (2005). Diseo y validez de una propuesta de evaluacin curricular en Educacin superior. Tesis de grado, Edo. De Mxico. Universidad Anhuac. Mxico.

METODOLOGIAS Anlisis de la congruencia interna de los planes de estudio. A partir de estructuras conceptuales y mapas curriculares. Mapas conceptuales Evaluacin curricular a partir del anlisis del Curriculum Real vivido. Desde la elaboracin de Mapas de contenido de los Programas de asignatura. Metodologa con caractersticas: Integral, cualitativo y participativo. Desde tres lgicas: De construccin, de traduccin y de consumo Anlisis del Plan de estudios y sus programas de asignatura a partir de indicadores criterios de: Vigencia, Suficiencia cobertura, Congruencia y Relevancia METODOLOGIAS Plantea cuatro fases del diseo curricular: Anlisis previo, Diseo Curricular, Aplicacin Curricular y Evaluacin Curricular. Anlisis de la evaluacin interna y externa. Atendiendo tanto a actores, procesos, estructura formal del plan de estudios y los resultados del proceso de formacin. Evaluacin de todo el plan de estudios a partir del anlisis, y valoracin de la situacin, tendencia, pertinencia y actualidad de los programas educativos. Describe el proceso pero no la experiencia. Basada en el enfoque de sistemas, Modelo CIPP de Stufflebeam, Planeacin de Ackoff y De la Orden. Indicadores de: Funcionalidad, eficacia y eficiencia

Fuente: Elaborado con la bibliografa de los autores citados Evaluacin de Programas Educativos. El campo de la evaluacin curricular estaba en incipiente desarrollo cuando en la dcada de los noventa fue desplazada por la evaluacin de Programas educativos, con una notable ausencia e indefinicin de referentes conceptuales, ya que se conjuntan dos concepciones modelos de interpretacin con origen y trayectoria distinta, en tanto que la evaluacin curricular surge relacionada con la reestructuracin de programas de estudios en los setentas, la evaluacin de programas acadmicos con fines de acreditacin tienen como antecedente las realizadas en 1910 en Estados Unidos (Mora, Jos-Gins:1991), en donde
contextualmente la responsabilidad de este tipo de actividad recae en las agencias de aseguramiento de la calidad como son los Gobiernos federal y estatal, agencias de acreditacin institucional y especializada; situacin que difiere de las condiciones y practicas que en este sentido se realizan en nuestro pas.

El proceso de desarrollo y conformacin del Campo de la Evaluacin Curricular vio impedido su madurez y consolidacin con la aparicin en la dcada de los noventa de 5

organismos evaluadores y acreditadores de las Instituciones y Programas educativos, los cuales incluyen en sus manuales y guas de evaluacin indicadores y criterios para realizar la Evaluacin curricular de los Programas educativos evaluados. Los Comits interinstitucionales de Evaluacin de la Educacin superior. (CIEES), surgen en 1991, establecidos como nueve comits que atienden diversas disciplinas. Realizan la Evaluacin de Programas educativos a partir de indicadores ya determinados en sus Marcos de Referencia, carentes en la mayora de los casos de fundamentos terico-conceptuales y metodolgicos. Es interesante analizar el manejo conceptual que evidencia las ausencias en la formacin terico-conceptual sobre Evaluacin que en este sentido presentan los responsables de elaborar los Marcos de Referencia de los CIIES; en este caso particular el Comit de Ciencias de la Salud, cuando establecen en la revisin de la COHERENCIA DEL PLAN DE ESTUDIOS CON EL CURRICULO OCULTO En ciencias de la salud los contenidos de los planes de estudio en los que se debe buscar congruencia con el currculo oculto deben ser, principalmente, los que se refieren a los siguientes tres aspectos: la relacin profesional-paciente que se ensea a los alumnos y la relacin de los profesionales con los pacientes en clnicas universitarias y en los servicios de salud a donde acuden los alumnos; el perfil de egreso y la mayora de los atributos que tiene la mayora de los profesores p.20. No presenta ningn apartado de referentes conceptuales que aclaren a los usuarios desde donde establecer la revisin de esta coherencia. El Consejo de acreditacin de programas de Educacin Superior (COPAES), regula a los diversos Organismos acreditadores de Programas educativos, donde las actividades de Evaluacin curricular determinadas en sus Manuales de procedimiento y guas de evaluacin son resueltas en el mejor de los casos en un ejercicio de palomeo de los indicadores establecidos por el organismo acreditador. En la mayora de los casos, trabajan con los indicadores que sobre la Revisin del plan de estudios han establecidos los CIIES. Los planteamientos presentados no agotan la problemtica del Campo de la Evaluacin curricular, un tema relevante ante esta invasin de indicadores y perspectivas tcnicas, es el relacionado con el desconocimiento de la disciplina de la evaluacin (Daz, 2006:57), reflejada en las prcticas emprico-instrumentalistas de los evaluadores de estos organismos. La evaluacin educativa, nos enfrenta con un espacio de conflicto, que debe posibilitar el anlisis de articulaciones, fracturas y tensiones entre supuestos tericos y practicas pedaggicas. BIBLIOGRAFIA: Daz Barriga, A. (1994). La evaluacin curricular. Una aproximacin a elementos centrales de esta disciplina y su ubicacin en Mxico , Mxico, UNAM. 31 pp. Fotocopia. Daz Barriga, A. (1997). La investigacin curricular a fin de siglo. Procesos de globalizacin, demandas educativas y comunidad de investigacin Conferencias magistrales del IV Congreso nacional de investigacin educativa. Yucatn: Consejo Mexicano de investigacin educativa (COMIE), Mxico. Daz Barriga, A. (2003). Currculo. Tensiones conceptuales y prcticas. Revista electrnica de Investigacin Educativa, 5 (2). Consultado el 21 de Feb. 2004 en: http//redie.ens.uabc.mx/vol5no.2/contenido-diazbarriga.html

Daz Barriga, A. (2006). Evaluacin de la educacin superior. Entre la compulsividad y el conformismo en Todd, Luis Eugenio y Arredondo Vctor, La educacin que Mxico necesita. Visin de expertos, Centro de Altos Estudios e Investigacin Pedaggica/Centro de Estudios Cientficos y Tecnolgicosdel Estado de Nuevo Len CECyTE, NL, Mxico. Daz Barriga, . Coord. (1995). Procesos curriculares, institucionales y organizacionales, Consejo mexicano de investigacin educativa (COMIE), Mxico. Daz Barriga, A. coord. (2003). La investigacin curricular en Mxico. La dcada de los noventa. En coleccin investigacin educativa en Mxico 1992-2002. Tomo 5 COMIE, Mxico. Daz Barriga, ngel. (2005) Riesgos de los Sistemas de Evaluacin y Acreditacin de la Educacin Superior. Documento preparado para Seminario Regional: Las nuevas tendencias de la evaluacin y acreditacin el Amrica Latina y el Caribe organizado por la Comisin Nacional de Evaluacin y Acreditacin Universitaria (CONEAU) y el Instituto Internacional para la Educacin Superior en Amrica Latina y el Caribe (IESALCUNESCO) Buenos, Aires. Junio de 2005. Daz Barriga, ngel. (2005). Evaluacin curricular y evaluacin de programas con fines de acreditacin. Cercanas y desencuentros. Conferencia para el Congreso Nacional de Investigacin Educativa. Sonora 2005. www. angeldiazbarriga.com. 20 de abril de 2006. Lewy, Ariel (1976) Luengo, Enrique (2003) Tendencias de la Educacin Superior en Mxico: Una lectura desde la perspectiva de la complejidad. Trabajo elaborado para el Seminario sobre Reformas de la Educacin Superior en Amrica Latina y el Caribe, realizado el 5 y 6 de junio, en Bogot, Colombia. Instituto Internacional para la Educacin Superior en Amrica Latina y el Caribe IESALC-UNESCO y la Asociacin colombiana de Universidades (ASCUN). UNESCO, (1976) Manual de Evaluacin formativa del currculo , Instituto Internacional de planeamiento de la Educacin, Voluntad Editores/Editorial de la UNESCO, Colombia

PROPUESTAS Y EXPERIENCIAS DE METODOLOGIAS EVALUACION CURRICULAR De Alba, Alicia, (1985). Evaluacin de la Anlisis de la congruencia interna de los congruencia interna de planes de planes de estudio. A partir de estructuras

estudio. Estudio de caso. En Revista de Educacin superior No. 054, Abril-Junio de 1985, ANUIES, Mxico. Daz Barriga, Frida. (1990). Metodologa de Diseo curricular para la educacin superior, Trillas, Mxico. Daz Barriga, Frida. (1992) Diseo Curricular I. Aproximaciones metodolgicas. del Mdulo II. Fundamentos del Desarrollo de la Tecnologa Educativa I. PROMESUP OEAILCE, Mxico. Daz Barriga, ngel. (1996) El contenido del Plan de estudios de Pedagoga: Anlisis de los programas de asignatura. Cuadernos del CESU No. 32, 1. Reimpr. 1996. Centro de estudios sobre la Universidad, CESU-UNAM, Mxico. Ruiz L. Estela. (1998). Propuesta de un modelo de Evaluacin curricular para el nivel superior. Una orientacin cualitativa. Cuadernos del CESU No. 35, CESU-UNAM, Mxico. Pacheco Mndez, Teresa y ngel Daz Barriga (2000). Programas de formacin de profesionales universitarios. Un modelo de evaluacin en Evaluacin Acadmica, Fondo de Cultura econmicaCentro de estudios sobre la Universidad, Mxico pp. 90-100. Barrn, Concepcin (2003) Universidades privadas. Formacin en educacin, CESU-UNAM, Mxico.

conceptuales y mapas curriculares. Mapas conceptuales Plantea cuatro fases del diseo curricular: Anlisis previo, Diseo Curricular, Aplicacin Curricular y Evaluacin Curricular. Anlisis de la evaluacin interna y externa. Atendiendo tanto a actores, procesos, estructura formal del plan de estudios y los resultados del proceso de formacin. Evaluacin curricular a partir del anlisis del Curriculum Real vivido. Desde la elaboracin de Mapas de contenido de los Programas de asignatura. Metodologa con caractersticas: Integral, cualitativo y participativo. Desde tres lgicas: De construccin, de traduccin y de consumo Evaluacin de todo el plan de estudios a partir del anlisis, y valoracin de la situacin, tendencia, pertinencia y actualidad de los programas educativos. Describe el proceso pero no la experiencia.

Anlisis del Plan de estudios y sus programas de asignatura a partir de indicadores criterios de: Vigencia, Suficiencia cobertura, Congruencia y Relevancia Valenzuela, Anglica. (2005). Diseo y Basada en el enfoque de sistemas, Modelo validez de una propuesta de evaluacin CIPP de Stufflebeam, Planeacin de Ackoff curricular en Educacin superior. Tesis y De la Orden. de grado, Edo. De Mxico. Universidad Indicadores de: Funcionalidad, eficacia y Anhuac. Mxico. eficiencia Fuente: Elaborado con la bibliografa de los autores citados