Consideraciones en la evaluación de los softwares educativos.

ARTÍCULOS
Consideraciones en la evaluación
de los softwares educativos

Carmen Rodríguez-Ornés
Escuela de Nutrición y Dietética
Facultad de Medicina
Universidad Central de Venezuela
[email protected]

Resumen
El presente trabajo es un análisis descriptivo basado en una revisión bibliográfica, con el fin de identificar
criterios a considerar en el proceso de evaluación de softwares educativos. E n la revisión realizada se
encontraron diversas categorías para realizar la evaluación de los productos de software, entre las que
se cuentan: la tecnología, el contenido y la presentación pedagógica. Usualmente se consideran cada
uno de estos items de manera particular y en ocasiones en forma conjunta para hacer una evaluación
integral. La forma más frecuente de ejecutar y presentar la evaluación de softwares educativos, es a
través de la aplicación de una lista de características preestablecidas lista de cotejo que incluye preguntas
acerca de la flexibilidad, claridad de instrucciones y respuestas, formato de pantalla, y uso apropiado del
sonido, color y gráficos. Este procedimiento prácticamente se ha convertido en un prerrequisito, para
poder identificar y/o acreditar a un software como un producto tecnológico educativo disponible. Una de
las principales reflexiones de esta revisión es que la integración de la informática a la docencia, debe ser
un proceso de cambios progresivos y cuidadosos, por lo que debe realizarse sistemáticamente y no sólo
limitarse a acondicionar un espacio con computadores para que profesores y estudiantes tengan
simplemente acceso a esta tecnología.
Palabras clave:Evaluación, software educativo, criterios, lista de cotejo

Abstract
The present issue is a descriptive analysis on a bibliographies review, with the proposal to identify criteria
to be considerated in the software educational evaluation process. It was founded that diverse categories
exist to release product software evaluation such as: technology, contents, and pedagogic presentation.
Usually each of those items are particularly used and sometimes they are used as an integral form to do
the evaluation. The most frequent way to present the evaluation is through a checklist which includes
aspects about the flexibility, clarity of instructions and answers, print format, and appropriate use of
sound, color and graphics. Been this a prerequisite to permit select the best between all the softwares
available. One principal reflection fron this issue is that the integration of the informatics with the
education should be a progressive and carefully change. It should be a systematic process and not just
limited to create a simple space to computers used by teachers and students to access the technology.
Key words: Evaluation, educational software, criteria, checklist

Agenda Académica Volumen 6, Nº 2, Año 1999 141

Introducción Evaluación de softwares educativos
El software educativo es la más reciente Las formas de evaluación de software han sido
herramienta didáctica, útil para estudiantes e desarrolladas básicamente por grupos profesionales
instructores, pero se requiere del cumplimiento de como MicroSOFT (Microcomputer Software and
ciertos criterios que permitan establecer la calidad Infromation for Teacher), EPIE (Educational
de estos productos de software, ya que es factible Products Information Exchange), MECC (Minnesota
como en el desarrollo de cualquier otro material Educational Computing Consortium), The National
didáctico, que se incurra en algunas fallas al dejarse Council of Teachers of English and The National
llevar por el atractivo de su presentación, dejando de Council of Teachers of Mathematics; como grupos
lado los aspectos curriculares. En este sentido la independientes incluyendo School Microwave
evaluación de softwares educativos es un aspecto Publications y Courseware Report Card. El Instituto
importante dentro del campo de la informática EPIE, establecido desde 1983, mantiene una
educativa. actualización regular de la base de datos descriptiva
de la información evaluativa de los softwares
En la revisión bibliográfica realizada para este virtuales o educativos principalmente del nivel de
trabajo resultó curioso, según la apreciación de la secundaria y pre-universitarios (Heller, 1991).
autora, observar que las investigaciones parecían estar
distribuidas por décadas para este tópico, es decir, Stigleman´s (1988) focalizó su discusión sobre la
hubo una gran cantidad de publicaciones en la década evaluación de softwares bibliográficos. Ella sugirió
de los ochenta entre ellas, Aiken, 1981; Garner, 1982; que los revisores debían publicitar el hecho de que
Hannaford & Taber, 1982; Heck, Johnson & Kansky, una revisión se estaba realizando, además consideraba
1981; Kingman, 1981; lo cual se corresponde con la que debía solicitarse adicionalmente, los
época del auge de la Enseñanza Asistida por el requerimientos de los usuarios para establecer sus
Computador. Luego a comienzo de los noventa, al necesidades, desarrollar criterios de evaluación,
hacer búsqueda de estos artículos se observa menor establecer conductas para la evaluación del software
cantidad (Heller, 1991), pero hacia finales de la y documentar los resultados. Finalmente sugirió que
década de los noventa al parecer hay un resurgimiento para verificar la eficiencia de la revisión y responder
o preocupación nuevamente por el tema (Lee & a un cambiante ambiente de educación, se debía
Mamone, 1995; Lehoux, Polvin & Proulux, 1999) obtener el feedback acerca de la evaluación, después
quizás por el mismo repunte que ha tenido la que el software seleccionado estuviese en uso.
educación a distancia con la implicación de las nuevas
tecnologías (Osin, 1996). En contraposición a la opinión de Stigleman´s,
Heller (1991) consideró que los softwares
Por otra parte, no se observaron acuerdos instruccionales, al igual que todos los materiales
concretos acerca de cuáles debían ser los criterios a educacionales, deben ser evaluados antes de ser
considerar en el proceso de evaluación de software. utilizados en clase o como proyectos de investigación.
Es importante hacer del conocimiento general y
particularmente de las personas productoras de Por su parte, Callison y Haycock (1988) sugirieron
software educativo, los resultados de las que los estudiantes de todos los niveles también deben
investigaciones y revisiones que se han dado respecto tomar un rol activo en el proceso de revisión.
a este tópico, pero más aún de los principios del
desarrollo de cualquier material informático
¿Qué evaluar?
educativo. Por lo tanto se estableció como propósito En líneas generales la evaluación de softwares
para este trabajo presentar un análisis descriptivo educativos varía en detalle, foco y longitud.
sobre la base de las experiencias revisadas, basado Primordialmente la revisión se enfoca en la
en una revisión bibliográfica, con el fin de identificar tecnología, el contenido, y la presentación
criterios a considerar en el proceso de evaluación de pedagógica. La forma más frecuente de presentar
software. estas categorías es a través de una lista de

142 Carmen Rodríguez - Ornés

 Consideraciones en la evaluación de los softwares educativos.

características prestablecidas, incluyendo preguntas aplicación, ya que no sólo participó el grupo de

acerca de la flexibilidad, claridad de instrucciones y especialistas en la materia sino también estudiantes,
respuestas, formato de pantalla, bloqueo de errores quienes aportaron directamente sus demandas como
del sistema y uso apropiado del sonido, color y aprendices, lo que permitió la optimización de las
gráficos. (Heinich, Molenda, Russell, & Smaldino, estrategias de enseñanza (Iglesias, Panigua, Pessacq,
1999) 1997).

Una de las primeras organizaciones en dirigir la Diseño de Instrumentos Eficaces de

evaluación de software fue The National Council of Evaluación de Software
Teachers of Mathematics. En adición a la lista de
chequeo, ellos publicaron un folleto que definía el El hecho de que los productos de softwares
proceso de evaluación (Heck, Johnson & Kansky, educativos estén disponibles para integrarse en el
1981) currículo, no los hace automáticamente adecuados o
eficaces. Los profesores tienen la responsabilidad de
En este sentido, elaborar una lista de control de determinar qué aplicaciones, pueden ser adecuadas
evaluación de software es un prerrequisito, para poder para la clase, aunque para ello tiene que conocer antes
elegir el mejor entre todos los softwares educativos la tecnología informática. (Pool, 1999)
disponibles. Al igual que en todos los materiales de
enseñanza, la elección del software educativo debe Bailey (1989) ha establecido una serie de
estar en concordancia con las características de la recomendaciones que contribuyen a orientar una
población a la que se dirige. La elaboración de la adecuada selección de software de acuerdo a las
lista de control de evaluación del software se debe siguientes características:
hacer de acuerdo con las necesidades particulares de - Debe ser sencillo
cada institución académica o conjunto de ellas,
incorporando además la participación de profesores - Debe ser breve
y alumnos; el resultado conducirá a que el software - Debe ser de fácil comprensión
elegido estará más adaptado a los fines con que se
- Debe ser atractivo y
quiera aplicar.
- Debe estar disponible
La agencia para la Evaluación Tecnológica del
Congreso de los Estados Unidos, U.S. Congress Es ampliamente conocida la demanda por buenos
Office of Technology Assesment, (OTA,1988, citado instrumentos de evaluación de software educativo.
en Pool, 1999) unificó los criterios de evaluación de En general, los criterios que se utilizan para evaluar
software educativo a partir de los instrumentos de software educativo son más bien cualitativos, sin
evaluación utilizados por parte de 36 diferentes presentar una estandarización que permita a los
agencias públicas y privadas de evaluación de especialistas llegar a un consenso sobre los aspectos
software. La lista es sumamente extensa pero la a evaluar y evidenciar criterios mínimos de
intención es que se escojan los criterios que, en la confiabilidad (Flagg, 1990; Bork 1985). Al respecto
opinión del experto, sean los más importantes cabe señalar que, aunque éste es un problema
teniendo en cuenta las circunstancias de la población ampliamente reconocido, existen escasas instancias
a la que está dirigido. de evaluación de software que permitan determinar
la calidad del material de aprendizaje (Campos, F.,
En un estudio realizado para evaluar un software Campos G. & Rocha A., 1996; y Underwood J. &
educativo en el ámbito universitario se categorizaron Underwood G. 1990).
los criterios en tres aspectos básicos: metodología y
contenidos de enseñanza, diseño y características del Asimismo, existen controversias en lo que se
software, y reacciones del usuario; en un cuestionario refiere a determinar cuándo un software se considera
con un total de 24 preguntas a ser aplicado a “educativo”, o qué se debería añadir en un “software
estudiantes de pre-grado de ingeniería. Según los educativo de calidad “ (Campos, F., Campos G. &
autores este método resultó efectivo para dicha Rocha A., 1996; Underwood J. & Underwood G.,

Agenda Académica Volumen 6, Nº 2, Año 1999 143

1990; Sánchez J. & Alonso O., 1998, Olivares A., Etapa de desarrollo: luego de realizar la
1994). Por otro lado existen opiniones que señalan verificación y selección de recursos, el equipo
que la calidad de un software educativo debería informático diseña e implementa las lecciones
responder a un modelo de aprender, un modelo de definidas en la etapa de concepción pedagógica,
aprendiz y un rol de la tecnología en el aula, más quienes previamente han estructurado y ordenado
bien, un modelo curricular (Flagg, 1990; Alessi & lógicamente los componentes del Soporte Didáctico.
Trollip, 1985). Así, no es lo mismo evaluar un En esta etapa se construyen los diálogos asociados a
software que se utilizará como reforzamiento de una las lecciones, se definen las pantallas, se crean y se
clase presencial, que un software de apoyo al trabajo procesan las imágenes, animaciones, se establece la
colaborativo de los aprendices. Por otra parte, las secuencia que deberá seguir la información a
perspectivas pueden ser diferentes si el currículo está presentar, codificación del diálogo y la integración
centrado en el aprendiz que si está centrado en el del código al sistema.
profesor. Lo mismo si el currículo es constructivista
o si su orientación es conductista. Etapa de estudio y prueba del producto: durante
esta etapa se valida el producto obtenido, verificando
Diversos autores (Flagg, 1990; Alessi & Trollip, que cumpla con los objetivos pedagógicos e
1991; Sánchez & Alonso, 1993) piensan que todo informáticos.
software educativo debe considerar en su
construcción un proceso de evaluación formativa y Este método contribuye a simplificar el proceso
sumativa. La evaluación formativa es la evaluación de producción, al sugerir las actividades principales
de proceso y generalmente la realizan los a ser realizadas en cada una de las etapas del proceso
desarrolladores del software. La evaluación sumativa y la distribución de responsabilidades entre los
es la evaluación del producto final y generalmente la integrantes de cada equipo, pedagógico e informático,
realizan equipos distintos a los desarrolladores del pero a su vez, les permite trabajar en forma
software. armonizada e integrada. Lo interesante de este método
para el presente ensayo es la última etapa, Etapa de
Existe un método para el diseño de software estudio y prueba del producto, es decir que de una
educativo que ha sido aplicado por Rodríguez - Ornés vez se contempla la evaluación del producto, lo que
(1999), en el desarrollo de un software para la permite introducir los correctivos antes de la
enseñanza interactiva de las raciones de alimentos. aplicación del software.
El Método de Producción de Soporte Didáctico
conocido como “PROSDOS” (Zambrano J., 1995), Otro diseño novedoso ha sido el presentado por
tiene como principio la traducción de las funciones Sánchez & Alonso (1998) el cual consiste en un
pedagógicas en términos de funciones informáticas instrumento basado en la web, cuestionario
aplicables en el salón de clase a través del sistema de interactivo, para obtener la opinión y reacciones del
Enseñanza Asistida por el Computador (E.A.C). Este usuario o el diseñador (informática educativa,
método comprende cuatro etapas: interfaces y comunicación visual) de forma local y
distribuida, cuando quiera, donde quiera, a partir de
Etapa de concepción pedagógica: en esta etapa una página web. Este estudio no arroja demasiadas
se aportan las ideas, inquietudes, objetivos evidencias acerca de su aplicabilidad, pero no deja
pedagógicos y metas que se persiguen con la de ser novedoso e interesante, sobre todo el hecho de
elaboración del soporte didáctico. Define las su amplia utilidad a través de la web.
estrategias y enfoques pedagógicos que se
implementarán. Conclusión
Para mejorar la calidad de la educación utilizando
Etapa de estudio de la factibilidad de
la informática se debe primero ajustar la visión acerca
realización: aquí se determina la factibilidad de
de cómo la informática educativa debe articularse al
realización del producto, con base en los recursos de
currículo. Integrar la informática a la docencia es un
Hardware y Software con que se cuenta.
proceso de cambios no muy lentos, por lo que debe

144 Carmen Rodríguez - Ornés

 Consideraciones en la evaluación de los softwares educativos.

realizarse cuidadosa y sistemáticamente y, por tanto, Bork A., (1985). Personal Computers for Education.
su papel no debe sólo limitarse a acondicionar un New York: Harper & Row.
espacio con computadores para que profesores y
estudiantes tengan acceso a esta tecnología. Callison D. & Haycock G., (1988). A methodology
for student evaluation of educational
En este sentido, de acuerdo con los planteamientos microcomputer software. Educational Technology
analizados en la revisión realizada, se presenta un 28, 25-32
resumen esquematizado de los principios generales
a considerar en la evaluación de softwares educativos, Campos, F., Campos G. & Rocha A., (1996). Diez
los cuales se indican a continuación: etapas o desenvolvimiento de software
educacional de tipo hipermedia. [En línea]
- Identificar a quien va dirigido el software. Memorias 3er. Congreso Iberoamericano de
- Conocer los requerimientos de los usuarios. Informática Educativa. Barranquilla, Colombia.
http://www.c5.cl/ieinvestiga/actasribie96/
- Establecer el método a seguir en la evaluación PONECOL.html . [Agosto, 2000]
del software.
- Dar a conocer los resultados del software. Flagg B., (1990). Formative evaluation for
educational technologies. New Hillsdale, Jersey:
-Mantener por un período determinado, el Lawrence Erlbaum Associates, Publishers.
monitoreo en cuanto al funcionamiento y
utilización del software, una vez que éste ha sido Garner D., (1982). Educational microcomputing
puesto en ejecución. software for the handicapped: Development and
- Establecer pautas para la incorporación de las evaluation. Exceptional Children 49, 137-142
modificaciones, tomando en cuenta los resultados
de la evaluación. Hannaford A. E., &Taber F.M. (1982).
Microcomputer software for the handicapped:
Igualmente se considera ideal la creación de Development and evaluation. Exceptional
agencias locales u organizaciones consultoras, Children 49, 137-142
conformadas por especialistas pedagógicos e
informáticos que incluyan en sus servicios el proceso Heck W.P. Johnson J. & Kansky R. J. (1981).
de revisión de software como una valiosa herramienta Guidelines for evaluating computerized
en el mejoramiento de la educación, y que a su vez instructional materials. Reston VA: National
se reconozca por parte de las instituciones académicas Council for Teachers of Mathematics
la importancia y el esfuerzo que se le debe dedicar a
esta área. Heinich R., Molenda M., Russell J., & Smaldino S.,
(1999). Instructional Media and technologies for
Referencias learning. 6 th Edition. Columbo, Ohio. USA:
Prentice-Hall, Inc
Aiken R.M., (1981). The golden rule and ten
commandments of computer based education Heller R.S. (1991). Evaluating software: a review of
(CBE). Technological Horizons in Education 8 the options. Computers Educ. Vol 17. Nº 4 pp.
(3) 39-42 285-291. Great Britain.

Alessi S. & Trollip S., (1985). Computer-based Iglesias O.A, Panigua C.N., Pessacq R.A. (1997).
instruction. Englewood Cliffs: Columbus, Ohio: Evaluation of University Educational Software.
Prentice-Hall, Inc. Computer Applications in Engineering Education
v5 n3 p181-88. (Database ERIC. Accession Nº:
Bailey Robert W. (1989). Human performance EJ 550793)
Engineering: Using Human Factors/Ergonomics
to Achieve Computer System Usability. Kingman J.C. (1981). Designing good educational
Englewood Cliffs, N.J.: Prentice-Hall, Inc. software. Creative Computing, 7 (10) 72-81

Agenda Académica Volumen 6, Nº 2, Año 1999 145

Lee W.W. & Mamone R. (1995). The computer bases Pool Bernard J. (1999). Tecnología Educativa.
training handbook. Assesment, Design, Educar para la sociocultura de la comunicación
Development, Evaluation. Columbo, Ohio. USA: y del conocimiento. 2da Edición Mc Graw Hill.
Prentice-Hall, Inc España

Lehoux P., Polvin L. &Proulux M. (1999). Linking Rodríguez-Ornés C. (1999). Enseñanza Interactiva
Users´ Views with utilization processes in the de las Raciones de Alimentos (Trabajo de
evaluation of interactive software. Canadian Ascenso). Escuela de Nutrición y Dietética.
Journal of program Evaluation/La Revue Facultad de Medicina. Universidad Central de
canadienne d´evaluation de programme v14 n1 Venezuela. Caracas
p117-40 Spr. (Database: ERIC. Accession: Nº:
EJ590622) Sánchez J. & Alonso O., (1998). Evaluación
Distribuida de Software Educativo a través de
Olivares A. (1994). Evaluación de software Web. [En línea] http://www.dcc.uchile.cl/
educativo: una propuesta. A LA Carta, 7 p.6 ~oalonso/educacion/ . [Agosto, 2000]
Febrero. En Sánchez J. y Alonso O., (1998).
Evaluación Distribuida de Software Educativo a Stigleman, W (1988). Selection and evaluation of
través de Web. [En línea] http:// software. AslibProcceedings, 45. 3 77-81
www.dcc.uchile.cl/~oalonso/educacion/. [Agosto,
2000] Underwood J. & Underwood G. (1990). Computer
and Learning. Cambridge, MA. Basil Blackwell.
Osin L. (1996). La computadora como instrumento US
para la humanización de la enseñanza. [En línea].
3º Congreso Iberoamericano de informática Zambrano Jesús (1995). Enseñanza Asistida por
Educativa. RIBEI 96. http://www.c5.cl/ieinvestiga/ Computador y Producción de Software Educativo.
actasribie96/PONECOL.html. [Agosto, 2000] U.C.V. Centro de Enseñanza Asistida por
Computador CENEAC Caracas – Venezuela

146 Carmen Rodríguez - Ornés