Mistica | página de entrada Aplicaciones piloto portuguŕs
franšais
english
Su página precedente Presentación del proyecto | Comunidad virtual | Metasitio | Eventos | Evaluaciones | Ciberoteca Su página siguiente

Entrada de la secci´┐Żn
Segundo llamado
Primer llamado
Resultados
Propuestas
Seguimiento
Documentos Relacionados

Proyecto Aplicaciones Piloto MISTICA (Yanapanako)

 

M´┐ŻSTICA / FUNREDES
Proyecto Aplicaciones Piloto MISTICA (Yanapanako)
Aplicaci´┐Żn Piloto: Listas de discusi´┐Żn y sitios web en la salud p´┐Żblica latinoamericana
Responsable: Jos´┐Ż Antonio Iturri


INFORME SINTETICO DE AVANCE
(per´┐Żodo Febrero - Junio / 2000)

Comenzaremos resumiendo las varias fases de la etapa que va hasta Junio: revisi´┐Żn metodol´┐Żgica, exploraci´┐Żn inicial del campo, constataci´┐Żn de dificultades para reunir la muestra originalmente programada de sitios web y listas, redefinici´┐Żn de la muestra, recolecci´┐Żn de informaciones, inicio del an´┐Żlisis.

El balance de esa etapa muestra que el dise´┐Żo original se modific´┐Ż principalmente en dos sentidos:

  • Una profundizaci´┐Żn y mejor definici´┐Żn de los aspectos estudiados en cada uno de los sitios web y listas analizados (antes restringidos a aquellos relacionados con
  • Una restricci´┐Żn de la muestra estudiada, enfatiz´┐Żndose en general, sitios y listas brasile´┐Żas y de organizaciones regionales y disminuyendo la presencia de sitios y listas de otros pa´┐Żses de la regi´┐Żn.

Constatamos la escasez relativa de referencias bibliogr´┐Żficas sobre metodolog´┐Żas para la evaluaci´┐Żn del tipo de producto que estudiamos. No es que no existan pero a´┐Żn son dif´┐Żciles de encontrar y no hay todav´┐Ża "obras de referencia" en este campo. Es de esperarse que esto suceda para casi cualquier tema relacionado con Internet y a´┐Żn m´┐Żs con estudios de tipo evaluaci´┐Żn que tienen menos de 10 a´┐Żos (en el caso de la evaluaci´┐Żn de sitios web) o poco mas de 10 a´┐Żos (en el caso de listas electr´┐Żnicas de discusi´┐Żn).

Lo interesante, y que nos dejo una impresi´┐Żn de vino a´┐Żejo en botella nueva, ha sido notar que la mayor´┐Ża de los problemas que este tipo de evaluaci´┐Żn plantea tienen equivalentes en la experiencia de evaluaci´┐Żn de proyectos y de instituciones en general. Por ejemplo la importancia que tiene para una evaluaci´┐Żn conocer los criterios con los cuales fue dise´┐Żado un proyecto; las dificultades de definir par´┐Żmetros objetivos de evaluaci´┐Żn. As´┐Ż como los paralelos con la investigaci´┐Żn de ciencias sociales en general, en especial en antropolog´┐Ża; por ejemplo la permanencia y reactualizaci´┐Żn de las cuestiones cl´┐Żsicas sobre "objetividad", el papel del "observador" en relaci´┐Żn al objeto de estudio, "representatividad" de muestras y universos, y "control de resultados" as´┐Ż como las cuestiones y dudas relacionadas a la observaci´┐Żn de espacios de comunicaci´┐Żn como las listas de discusi´┐Żn

Pero lo m´┐Żs importante en esto de hallar viejos problemas en relaci´┐Żn a nuevos objetos fue confirmar la necesidad de esforzarse en tener alguna creatividad, en especial en las alternativas metodol´┐Żgicas, analizando propuestas ya publicadas, combin´┐Żndolas cuando fuera pertinente.

En relaci´┐Żn a nuestros dos objetos espec´┐Żficos de inter´┐Żs (listas y sitios) resumimos los avances y dificultades as´┐Ż:

1. Listas electr´┐Żnicas de discusi´┐Żn acad´┐Żmica en salud p´┐Żblica: En nuestra primera tentativa de localizaci´┐Żn de estas listas distribuimos un total de 310 mensajes de correo electr´┐Żnico (incluyendo entre estos, mensajes distribuidas en las listas de noticias de dos instituciones acad´┐Żmicas). Nuestro mensaje ped´┐Ża que nos informasen sobre listas de discusi´┐Żn definidas como "-------". Obtuvimos una tasa de respuesta extremamente baja: 29 mensajes de respuesta, refiriendo 5 listas que se aproximaban a nuestra definici´┐Żn; 4 eran brasile´┐Żas y 1 de un organismo regional.

La cuesti´┐Żn de la baja tasa de respuesta continua a´┐Żn sin una explicaci´┐Żn definitiva. Nuestra primera hip´┐Żtesis es un error metodol´┐Żgico (y en realidad existir´┐Żan un n´┐Żmero significativamente mayor de listas que todav´┐Ża no conseguimos localizar) y/o una deficiencia intr´┐Żnseca de las t´┐Żcnicas de b´┐Żsqueda de informaci´┐Żn a trav´┐Żs de solicitudes escritas (Oppenheim, 1991) y por correo electr´┐Żnico ( . La segunda es que la baja tasa de respuesta sea un reflejo de la realidad (y en realidad existir´┐Żan pocas listas de discusi´┐Żn propiamente cient´┐Żfica en esta ´┐Żrea). En realidad las b´┐Żsquedas del siguiente per´┐Żodo ayudar´┐Żn a resolver esta cuesti´┐Żn o por lo menos esperamos que nos ayuden a se´┐Żalar una de las hip´┐Żtesis como la m´┐Żs probable.

Existe, sin embargo, un tipo especial de lista de discusi´┐Żn cuyo estudio permite esbozar algunas explicaciones: Adem´┐Żs de las listas localizadas a trav´┐Żs de las respuestas a nuestro mensaje, identificamos en 4 de los sitios web analizados (2 brasile´┐Żos y 2 de organismos internacionales) que la instituci´┐Żn responsable por el sitio propone debates sobre temas espec´┐Żficos, nombra un o m´┐Żs responsables para la conducci´┐Żn de la discusi´┐Żn, ofrece sus computadoras para hospedar la lista y en algunos casos invita especialistas a los debates. Los mensajes del debate se publican en una p´┐Żgina del sitio web, as´┐Ż, la discusi´┐Żn est´┐Ż permanentemente a disposici´┐Żn de los participantes de la lista y de aquellos que deseen revisarla. En estos casos, aparentemente algunas de las condiciones b´┐Żsicas para el desarrollo de una discusi´┐Żn en medio electr´┐Żnico estar´┐Żan cubiertas. Hasta el momento, nuestro seguimiento de estas 4 listas indica un bajo n´┐Żmero total de mensajes y de frecuencia de mensajes si comparadas con otras listas internacionales de salud p´┐Żblica. Es posible que el medio electr´┐Żnico y en red no consiga estimular el debate cient´┐Żfico, en un ´┐Żrea que no tiene una tradici´┐Żn de debate? Es posible que las listas electr´┐Żnicas de discusi´┐Żn no ofrezcan un espacio de comunicaci´┐Żn que responda a los intereses de los que ser´┐Żan sus supuestos usuarios (investigadores, profesores, alumnos, p´┐Żblico interesado)?. Estas cuestiones solo pueden responderse con los datos que faltan recopilar.

2. Sitios web de instituciones acad´┐Żmicas de salud p´┐Żblica: En lo referente a referenciales te´┐Żrico-metodol´┐Żgicos para la evaluaci´┐Żn de los sitios web decidimos revisar y mejorar la metodolog´┐Ża que se utiliz´┐Ż en el servicio "HiperV´┐Żnculos de Sa´┐Żde P´┐Żblica"1 (el anexo 1 presenta la propuesta original). En base a esta revisi´┐Żn incorporamos en la metodolog´┐Ża inicial t´┐Żcnicas descritas en el m´┐Żtodo de evaluaci´┐Żn de sitios por "benchmarking funcional" (Johnson & Misic, 1999); este abordaje se basa en la identificaci´┐Żn de sitios de instituciones competidoras e instituciones con intereses en com´┐Żn (aunque no competidoras) y define medidas "absolutas" y "relativas" en las caracter´┐Żsticas de un web, proponiendo un conjunto de t´┐Żcnicas para medirlas 2 .

Para el an´┐Żlisis final ser´┐Żn de utilidad los conceptos espec´┐Żficos para evaluaci´┐Żn de sitios acad´┐Żmicos desarrollados por McClure & Lopata (1996).

En este punto, definimos mejor nuestro estudio como un an´┐Żlisis de la oferta de informaci´┐Żn que los sitios presentan para sus usuarios; definimos entonces 3 "focos principales de inter´┐Żs" para usuarios de este tipo de sitios que son producidos por instituciones acad´┐Żmicas (inter´┐Żs en informaciones sobre educaci´┐Żn de post-graduaci´┐Żn, inter´┐Żs en informaciones sobre investigaci´┐Żn, inter´┐Żs en informaci´┐Żn sobre la gesti´┐Żn de servicios y sistemas de salud 3). Combinando las metodolog´┐Żas HiperV´┐Żnculos, "benchmarking" y Sandoval definimos 4 aspectos de evaluaci´┐Żn:

A. Aspectos de funcionalidad y facilidad de "navegaci´┐Żn":

  • Facilidad de encontrar el sitio en los principales mecanismos de b´┐Żsqueda
  • Velocidad de cargamento de la pagina inicial del sitio
  • L´┐Żgica de navegaci´┐Żn (aplicando el criterio de los "3 clicks": debe encontrarse una informaci´┐Żn considerada importante en los "focos de inter´┐Żs" siguiendo un m´┐Żximo de 3 links )
  • Presencia de un mecanismo de b´┐Żsqueda dentro del sitio
  • B. Aspecto de contenido:
    Se definieron espectros para los niveles de informaci´┐Żn para cada uno de los siguientes usuarios:

    • Con foco de inter´┐Żs en investigaci´┐Żn: Desde el m´┐Żs superficial (nombre de las ´┐Żreas de investigaci´┐Żn desarrolladas por la instituci´┐Żn) hasta el m´┐Żs profundo (informaciones sobre resultados, preliminares o finales, de las investigaciones)
    • Con foco de inter´┐Żs en educaci´┐Żn: Desde el m´┐Żs superficial (nombre de las cursos) hasta el m´┐Żs profundo (res´┐Żmenes de los contenidos de cada disciplina dada en los diversos cursos). Servicios de matricula via Internet en los cursos.
    • Con foco de inter´┐Żs en gesti´┐Żn: (en definici´┐Żn)

    Adem´┐Żs de esa informaci´┐Żn se analiza la informaci´┐Żn ofrecida sobre los responsables de las actividades en esos tres focos de inter´┐Żs (desde la menci´┐Żn del nombre hasta resumen de curriculum e informaci´┐Żn para contacto de los interesados).

    C. Aspectos relacionados a la comunicaci´┐Żn con la sociedad:

    • Presencia de ´┐Żreas espec´┐Żficamente destinadas a esta funci´┐Żn
    • Espacios de consulta o asesor´┐Ża a comunidades
    • Presencia de contenidos relacionados a hechos con repercusi´┐Żn en la opini´┐Żn p´┐Żblica en los 3 meses previos a la recopilaci´┐Żn de la informaci´┐Żn.

    D. Aspectos complementares:

    • Coherencia entre contenidos anunciados y ofrecidos
    • Interactividad (posibilidad del usuario agregar sus comentarios y contenidos)
    • Uso de hipertexto en los documentos finales (los contenidos del nivel m´┐Żs profundo, por ejemplo res´┐Żmenes de investigaciones, ofrecen links para sitios relacionados con el tema?)
    • Uso adecuado de multimedios en el sitio

    As´┐Ż como en el caso de las listas de discusi´┐Żn, en el primer per´┐Żodo nos fue dif´┐Żcil encontrar un n´┐Żmero significativo de sites de instituciones fuera del Brasil, a lo que se sumaba la dificultad de evaluar su peso relativo en cada pa´┐Żs. En el caso brasile´┐Żo este ´┐Żltimo punto se resolvi´┐Ż usando el criterio de clasificaci´┐Żn de programas de post-graduaci´┐Żn implantado por el organismo federal CAPES (Coordena´┐Ż´┐Żo de Aperfei´┐Żoamento de Pessoal de N´┐Żvel Superior) que atribuye una calificaci´┐Żn para cada programa; se eligieron los programas que tuvieran una puntuaci´┐Żn igual o mayor a 3. Se present´┐Ż una dificultad adicional, que no conseguimos superar, en lo referente a la identificaci´┐Żn de "hechos con repercusi´┐Żn en la opini´┐Żn p´┐Żblica" que dependen de la opini´┐Żn de observadores de cada pa´┐Żs (incluyendo el seguimiento comunicacional de la coyuntura) que no conseguimos contactar (y en lo que reconocemos que no aprovechamos la oportunidad que ofrece el espacio MISTICA para encontrar esos contactos).

    Adem´┐Żs de instituciones acad´┐Żmicas incluimos en nuestra muestra los sitios web de organismos regionales de salud (Organizaci´┐Żn Pan-Americana de la Salud, UNICEF regional).


    HiperV´┐Żnculos fue un proyecto desarrollado por la Escola Nacional de Sa´┐Żde P´┐Żblica / Funda´┐Ż´┐Żo Oswaldo Cruz (http://www.ensp.fiocruz.br) y la Asociaci´┐Żn Latinoamericana y del Caribe de Educaci´┐Żn en Salud P´┐Żblica (ALAESP) entre 1996 y 1998 en el sitio web de la ENSP. Era un servicios de informaci´┐Żn, con el formato de una gu´┐Ża comentada de recursos sobre salud p´┐Żblica disponibles en Internet, que permit´┐Ża a los usuarios tener una visi´┐Żn panor´┐Żmica de la calidad de los sitios web y servicios de informaci´┐Żn disponibles (por ejemplo, mecanismos de b´┐Żsqueda en Internet especializados en el tema de salud). Los comentarios eran las evaluaciones hechas por especialistas que analizaban sitios web usando la metodolog´┐Ża mencionada.
    Posteriormente, nos fue de utilidad el documento de Victor Sandoval divulgado en la lista MISTICA el 06/07/00 (Sandoval, 2000), por que nos permiti´┐Ż discutir de nuevo la propuesta de "benchmarking", ahora considerando las propuestas de Sandoval sobre dos metodologias de evaluaci´┐Żn (una usando un modelo general de evaluaci´┐Żn y otra usando un modelo espec´┐Żfico adaptado al tipo de site)... adem´┐Żs de permitirnos conocer el nombre del creador del "principio de los 3 clicks".
    El Sistema ´┐Żnico de Sa´┐Żde (SUS) en el Brasil integra los servicios p´┐Żblicos y privados en los diferentes niveles de complejidad de la atenci´┐Żn de salud. El SUS tiene niveles de gobierno y gesti´┐Żn que corresponden a los niveles de organizaci´┐Żn pol´┐Żtica del pa´┐Żs (federal, estadual y municipal) con gestores espec´┐Żficos para salud en cada nivel. En los ´┐Żltimos a´┐Żos estos gestores, en especial los municipales, han participado de proyectos de formaci´┐Żn para ejercer sus funciones de control social y seguimiento de los servicios de salud y necesitan de informaciones para ejercerlas mejor.
    Este criterio es mencionado en diversos manuales y recomendaciones para el desarrollo de sitios web, por ejemplo: Timpone (1996), Cambridge Media Lab (2000)


    BIBLIOGRAFIA Abels, E., White, M.D., & Karla Hahn, 1997. Identifying user-based criteria for Web pages. Internet
    Research: Electronic Networking Applications and Policy, 7 (4). (documento disponible en
    Internet en: http://www.emerald-library.com/brev/17207db1.htm , archivo consultado en
    May/2000)

    Bauer, C. & Scharl, A., 2000. Quantitive evaluation of Web site content and structure. Internet Research:
    Electronic Networking Applications and Policy, 10(1). (documento disponible en Internet en:
    http://www.emerald-library.com , archivo consultado en May/2000).

    Cambridge Media Lab, 2000. Primer (a clear lexicon of web design and technique). (documento
    disponible en Internet en: http://www.camlab.com/n.htm , archivo consultado en
    Jun/2000)

    Johnson, K. & Misic, M., 1999. Benchmarking: a tool for Web site evaluation and improvement. Internet
    Research: Electronic Networking Applications and Policy, 9 (5). (documento disponible en
    Internet en: http://www.emerald-library.com/brev/17209ee1.htm , archivo consultado en
    May/2000)

    McClure, C.R. & Lopata, C., 1996. Assessing the Academic Networked Environment: Strategies and
    Options. School of Information Studies. Syracuse University. (documento disponible en Internet
    en: http://istweb.syr.edu/~mcclure/network/toc.html , archivo consultado en May/2000)

    Oppenheim A N. Questionnaire design, interviewing & attitude measurement. London: Pinter, 1991.
    Sandoval, V., 2000. "Sandoval's Evaluation Web Site Methodology". (documento disponible en Internet en:
    http://funredes.org/mistica/bdd/attachements/364-WebEvalVSen.rtf , archivo consultado en
    Jun/2000)

    Timpone, D., 1996. Is your help system usable?. WinHelp "How to". (documento disponible en
    Internet en: http://www.stc.org/pics/online/hyperviews/archive/PrintHPV/344.htm ,
    archivo consultado en Jun/2000)

    Wyatt, J.,1997. British Medical Journal, 314 (7098). Commentary: Measuring quality and impact of the
    world wide web. Information in practice.




Su página precedente Encabezado Su página siguiente
B´┐Żsqueda | Cr´┐Żditos | Mapa del sitio | Correo: <[email protected]>
http://funredes.org/mistica/castellano/aplicaciones_pilotos/iturri.html
Última modificación: 09/11/2000