Professional Documents
Culture Documents
RESUMEN
Este trabajo presenta un estudio de las propuestas de evaluacin de fuentes de informacin publicadas
en Internet, llevadas a cabo tanto por estudiosos de la materia como por instituciones cientficas y aca-
dmicas. El anlisis de la evolucin de las propuestas, desde las ms pioneras hasta las ms cercanas
a nuestros das, se complementa con el contexto pragmtico de las mismas, con productos como el
Current Web Contents del ISI o los directorios temticos de las agencias de evaluacin como Sosig. Se
establecen las lneas maestras de un nuevo protocolo de evaluacin propio que, siendo heredero de la
propuesta metodolgica del ISI, nace con la intencin de ser una herramienta de calidad y de valor
aadido a los servicios de referencia en Internet. Caminando hacia la normalizacin y sistematizacin
de las fuentes y recursos de informacin en la Red.
Palabras clave: Protocolo de evaluacin. Calidad. Recursos Web. Internet. Fuentes de informacin.
Agencias de evaluacin. Directorios temticos. Auditorias. Referencia.
una metodologa propia, y que guarda cierta relacin con la informacin bibliogr-
fica del propio recurso. En ella, el documentalista no solamente identifica y recu-
pera informacin de Internet, sino que proporciona una descripcin de valor aadi-
do a unos recursos digitales que por su naturaleza requieren de un control docu-
mental.
Parece lgico, por tanto, que se desarrollen mtodos eficaces para evaluar una
fuente de informacin en la Red. Disponer de una teora de base como la que se va
a presentar en esta introduccin proporciona ayuda para, al menos, tres tareas muy
diversas relacionadas con las publicaciones digitales en general, y con las cientfi-
co-acadmicas en particular. Groso modo, proporciona un marco conceptual desde
el cual puede hacerse ms fcil la comprensin y el anlisis de la informacin digi-
tal a los estudiosos sobre el tema. Adems, identifica algunos parmetros (compo-
sicin y propiedades de un hipertexto) que ayudan en la evaluacin crtica de la cali-
dad de los recursos digitales. Y por ltimo, proporciona ideas para estructurar pro-
yectos de desarrollo de publicaciones digitales, lo que establece unas perspectivas
muy interesantes en este sector.
La demanda creciente de informacin cientfica fuera del mbito acadmico-
cientfico, junto a la necesidad de un alto nivel de calidad, ha hecho de Internet el
principal mecanismo de comunicacin cientfica en la actualidad. Si al crecimiento
exponencial de la informacin cientfica publicada en la web se le aade su falta de
estructura, heterogeneidad formal y diversidad de calidad en los contenidos, se
obtiene como resultado el reto de la calidad, uno de los principales problemas que
se afrontan ante la incapacidad de diferenciar entre los diversos componentes, pro-
ductos y servicios contenidos en la Red. La cuestin es bien sencilla, y solamente
exige del evaluador la definicin de los contenidos que realmente pertenecen al
mbito de su actividad, de tal forma que slo ser objeto de tratamiento aquella
informacin que cumpla unos requisitos mnimos de calidad.
La aproximacin del analista puede realizarse mediante una evaluacin indivi-
dualizada de los recursos informativos, tarea que se presenta como un quehacer dis-
tinto al habitual, que habr de sustentarse en una metodologa que surja de las carac-
tersticas de la informacin digital. Por ello se hace indispensable un acercamiento
integral a las caractersticas de las fuentes digitales de informacin, como corpus
conceptual a partir del cual se defina una metodologa de evaluacin, basada en
parmetros e indicadores previamente establecidos. La definicin de stos implica
el anlisis de la recuperacin y organizacin de esta informacin en la web, la eva-
luacin de calidad de los contenidos, y un tercer grupo de tareas, orientadas a los
tcnicos de descripcin de los recursos web, con la finalidad de proporcionar un
mayor valor aadido al producto final.
El nuevo paradigma de la edicin digital en Internet ha trado consigo nuevas
formas de consulta y nuevos servicios para las fuentes y recursos. La edicin cien-
tfica se ha visto alterada por la aparicin de la edicin electrnica de distintas for-
mas, no solamente en lo que respecta al formato de las publicaciones, sino tambin
en el papel que stas desempean en la comunicacin cientfica del nuevo siglo. Un
caso muy representativo al respecto son las revistas electrnicas, en cuya edicin
digital se han explotado las posibilidades que les brinda la Red, ofreciendo los
denominados servicios de valor aadido, que permiten ampliar la oferta informati-
va al usuario o investigador. Pueden citarse entre ellos:
Servicios de DSI (Difusin selectiva de la informacin), o de alerta informa-
tiva: Ofrecen al usuario informacin puntual sobre los nuevos nmeros de la
revista, y en especial sobre lo publicado por un autor, o sobre un tema, e
incluso algunos alertan al investigador de cundo y quin ha citado un deter-
minado artculo.
Integracin de la coleccin de un sistema de informacin o base de datos: Las
revistas electrnicas pueden integrar su coleccin en un sistema mayor, como
puede ser una base de datos, que ayuda a gestionar la coleccin hemerogr-
fica, y enriquece notablemente las opciones de bsqueda de documentacin
relacionada.
Bsqueda de artculos: Se crea y mantiene un archivo digital que permite al
investigador buscar un artculo dentro de la propia revista, mediante la con-
sulta del sumario, a partir de ndices auxiliares de autores, materias, o bien
utilizando un motor de bsqueda.
Guas de recursos: Directorios de URLs relacionadas con el tema que intere-
sa al lector, como por ejemplo un directorio temtico sobre revistas electr-
nicas que publican investigaciones en el rea de trabajo de nuestro usuario.
Como ejemplo de directorio de revistas electrnicas podemos citar Electronic
Journal Miner2.
Foros de discusin: Foros de discusin que aumentan la interaccin de los
autores, con los investigadores, e incluso con los propios editores.
2 Electronic Journal Miner. [Fecha de acceso 7 mayo 2004]. Disponible en el documento web:
<http://ejournal.coalliance.org>.
3 En la bibliografa final del artculo se ofrece una relacin bibliogrfica sobre evaluacin.
4 STOKER, David y COOKE, Alison: Evaluation of Networked Information Sources. En, Ahmed
H. Heal & Joachim W. Weiss (eds.), Information Superhighway: the Role of Librarians, Information Scien-
tist and Intermediaries: Proceedings of the 17 th International Essen Symposium 24th-27th October 1994.
Essen: Universitatsbibliothek Essen, 1995, p. 287-312.
que con el que se aborda el tema, presentando la evaluacin de las pginas web
como fuentes de referencia, y con especial atencin a la labor de referencia de los
servicios bibliotecarios. En esta propuesta los autores consideran ocho caractersti-
cas a tener en cuenta para la evaluacin de fuentes de informacin en lnea y en Cd-
Rom. Estas caractersticas o cualidades de las fuentes son: autoridad, genealoga u
origen de la fuente, alcance y tratamiento (propsito de la obra, cobertura, actuali-
zacin, exactitud, objetividad, y audiencia), formato, ordenacin, consideraciones
tcnicas, precio y disponibilidad, y ayuda al usuario.
Cinco aos ms tarde, Alison Cooke5 public en solitario una gua para evaluar
la informacin publicada en Internet. La autora organiza en diez parmetros la eva-
luacin de cualquier fuente de informacin, para luego desarrollar o proponer para
cada tipologa de fuente un listado especfico de indicadores con su cuestionario o
checklist, segn se trate de una base de datos, un sitio FTP, una web institucio-
nal, un directorio temtico, etc. Los parmetros propuestos por Cooke son los
siguientes: propsito, cobertura, autoridad y reputacin, exactitud, actualidad y
mantenimiento, accesibilidad, presentacin y organizacin, facilidad de uso, com-
paracin con otras fuentes y calidad global de recurso.
Esta obra del ao 1999 comprende una aportacin de especial inters, al afirmar
Cooke que el estudio de la calidad de las nuevas formas de comunicacin cientfica
en la Red pasa necesariamente por la evaluacin de stas como fuentes de informa-
cin digitales. En este sentido la autora ofrece una metodologa de evaluacin en la
que contempla una variada tipologa de formas de comunicacin cientfica en
Internet que constituyen el nuevo espacio de la literatura gris digital. Dicha meto-
dologa presta especial atencin a las caractersticas y propiedades de la fuente de
informacin digital frente a la analgica, y a la estructura del recurso en lnea, nove-
dades que aporta en la organizacin, consulta y difusin de la informacin.
Destacan tres propiedades de las fuentes digitales que las dotan de identidad propia:
el acceso aleatorio, la interaccin y la creacin, propiedades todas ellas que han
paliado notablemente los retrasos de publicacin en papel, ofreciendo a la comuni-
dad cientfica una opcin de difusin y accesibilidad universal y econmica a los
resultados de la investigacin cientfica de calidad, como respuesta vlida a las cr-
ticas en los retrasos de las publicaciones impresas inherentes al proceso de peer
review.
Carolyn Caywood6 es otra de las estudiosas ms tempranas del tema. Su pro-
puesta se basa en presentar la evaluacin de las pginas web como fuentes de refe-
rencia, tal y como hemos descrito en los trabajos de David Stoker y Alison Cooke.
Su escenario de trabajo es el bibliotecario, y tal y como indica la propia autora en
la introduccin de su propuesta, para la identificacin de los criterios de evalua-
5 COOKE, Alison: A guide to finding quality information on the Internet: selection and evaluation
strategies. Library Association Publishing, 1999.
6 CAYWOOD, C.: Library selection criteria for WWW resources. En, Public libraries, may/june
1996, p. 169 y ss.
7 GURNS, Robert M.: Measuring Service on the Internet. En, Computer in libraries, 1995. [Fecha
de acceso 14 mayo 2000]. Disponible en el documento <<web>>: <http://www.infi.net/CSotDFAQ.html>.
8 SNYDERS, Joel: Good, Bad, and Ugly Pages. En, Internet World, april, 1996, p. 26-7.
9 CIOLEK, Matthew: The six quests 1. The untrustworthiness of the WWW. Australian National
University, Canberra. [Fecha de acceso 22 abril 1998]. Disponible en el documento <<web>>:
<http://www.ciolek.com/PAPERS/QUEST/Quest1.html>.
10 TILLMAN, Hope: Evaluating quality on the Net. Babson College. [Fecha de acceso 18 mayo
1998]. Disponible en los documentos <<web>>: <http://www.tiac.net/users/hope/findqual.html>,
<http://www.hopetillman.com/findqual.html>.
11 GRASSIANS, Esther: Thinking critically about World Wide Web resources. University of
California at Los Angeles/UCLA. [Fecha de acceso 20 abril 1998]. Disponible en el documento <<web>>:
<http://www.library.ucla.edu/libraries/college/instruct/web/critical.htm>.
Thiking critically about discipline-based World Wide Web resources. University of California at Los
Angeles/UCLA [Fecha de acceso 20 abril 1998]. Disponible en el documento <<web>>:
<http://www.library.ucla.edu/libraries/college/instruct/web/discp.htm>.
12 ALASTAIR, Smiths: Testing the Surf: Criteria for evaluation of Internet Information Resources.
En, The Public-Access Computer Systems Review, 1997, 8, nm. 3, [Fecha de acceso 10 abril 2000].
Disponible en el documento <<web>>: <http://info.lib.uh.edu/pr/v8/n3/smit8n3.html>.
13 AUER, N.: Bibliography on evaluating Internet resources. Virginia Polytechnic Institute and State
University. [Fecha de acceso 10 marzo 2000]. Disponible en el documento web: <http://www.lib.vt.edu/rese-
arch/libinst/evalbiblio.html>.
Bibliography on Evaluating Internet Resources. En, Emergency Librarian 25 (5), May-June 1998,
p. 23-24.
14 WILKINSON, G. L., BENNET, L. T., y OLIVER, K.: Evaluating the Quality of Internet
Information. Virginia Tech. [Fecha de acceso 17 octubre 2000]. Disponible en el documento web:
<http://www.edtech.vt.edu/edtech/kmoliver/webeval/webeval.htm>.
15 KAPOUN, Jim: Teaching Undergrads WEB Evaluation. En, College and Research Libraries
News 59(7), July/August 1998, p. 522-523. Also at the ACRL website [Fecha de acceso 22 diciembre 2002].
Disponible en el documento web: <http://www.ala.org/acrl/undwebev.html>.
16 ALEXANDER, Janet, y ANN TATE, Ann: Web Wisdom: How to evaluate and create information
quality on the web. Lawrence Erlbaum Associates, 1999.
17 CAYWOOD, C.: Library selection criteria for WWW resources. Op.cit., p. 169 y ss.
18 NIELSEN, J.: Usabilidad: Diseo de sitios Web. Madrid: Prentice Hall, 2000.
NIELSEN, J. y TAHIR, M.: Usabilidad de pginas de inicio: anlisis de 50 sitios web. Madrid: Pearson
Educacin, 2002.
19 ESCHENFELDER, K. R.; BEACHBOARD, J. C.; MCCLURE, C. R.; WYMAN, S. K. (1997):
Assessing US Federal Government Websites. En, Government Information Quaterly, 14 (2), p. 173-189.
MCCLURE, C.R.; SPREHE, J.T.; ESCHENFELDER, K.: Performance measures for federal agency
websites: Final report 2000. [Fecha de acceso 2 enero 2001]. Disponible en el documento <<web>>:
<http://fedbbs.access.gpo.gov/library/download/MEASURES/measures.doc>.
20 SMITH, A. G.: Applying evaluation criteria to New Zealand government websites. En,
International Journal of Information Management, 2001, 21 (2), p. 137-149.
21 Eduardo MERCOVICH es especialista en diseo de interfaces, usabilidad, y organizacin de infor-
macin. Fundador de GaiaSur, una de las mayores consultoras en tecnologas de la informacin y de la
comunicacin de Amrica Latina. GaiaSur. [Fecha de acceso 12 enero 1999]. Disponible en el documento
<<web>>: <http://planeta.gaiasur.com.ar/gaiasur/>.
segunda parte el artculo del grupo de Tmale se centra en los criterios de conteni-
do (validez, precisin, autoridad y reputacin de la fuente, singularidad, acabado, y
cobertura) y de forma (caractersticas de navegacin, ayuda al usuario, y uso de tec-
nologas apropiadas), haciendo una referencia especial a las investigaciones ante-
riores del propio grupo de investigacin24.
En el panorama espaol existen diferentes trabajos que aportan datos sobre los
indicadores ms pertinentes para una correcta evaluacin que contribuya al control
de calidad de este tipo de publicaciones. En este sentido, hemos escogido algunas
de las experiencias ms interesantes, aunque existen otros, a modo indicativo de los
trabajos llevados a cabo por autores espaoles.
En primer lugar, es obligada una referencia al proyecto DARWIN25, coordinado
desde la Universidad de Salamanca, por ser un trabajo pionero en Espaa para la
constitucin de un directorio analtico de recursos web informativos. El directorio
se hizo pblico a la comunidad acadmica espaola durante el curso 1999-2000, y
en el mismo participan las siguientes universidades: Universidad de Barcelona,
Complutense de Madrid, Extremadura, Len, Politcnica de Valencia, Salamanca, y
Valencia. Actualmente Darwin se encuentra en una etapa de rediseo, que guiar los
futuros desarrollos de este directorio.
La metodologa analtica de un recurso web de Darwin se organiza en un anli-
sis descriptivo y cualitativo. En el primero, los analistas indican brevemente los
datos bsicos del recurso seleccionado, describiendo solamente los aspectos que se
precisan para identificar el recurso: ttulo del recurso, URL, responsable, pas de
origen, idioma, tipo de recurso, fecha de la ltima actualizacin, clasificacin y
materia a partir de una adaptacin de la Clasificacin Decimal Universal (CDU). El
anlisis cualitativo, por su parte, se centra en los aspectos relativos a la calidad de
la informacin contenida en el recurso, y estructurada alrededor del acceso, diseo,
y contenido. Los mbitos de este ltimo anlisis toman como punto de referencia la
propuesta de Carolyn Caywood26.
En las Jornadas Espaolas de Documentacin del ao 2000, se ofrece una pano-
rmica del estado de la cuestin en materia de localizacin, identificacin y des-
cripcin de documentos web. Se reflexiona en torno a los distintos proyectos de nor-
malizacin de la informacin distribuida en Internet, tanto para la identificacin de
los recursos, como para su estructuracin, acceso y referencia. En este sentido, y
aunque el trabajo no presenta una metodologa para la evaluacin de fuentes de
informacin publicadas en Internet, resulta muy clarificador para algunos de los
24 TOMAL, M. et al.: Criterios para avaliar fontes de informao na internet. En, Anais, 3.
Simposio Internacional de Biblioteconoma. Prof. Dr. Paula Tarcsio Mayrink. Marlia, 1 al 3 de set. 1999.
Marlia, pp. 271-280.
Fuentes de informacin en la Internet. Cd-rom. En, Anais, 11. Seminrio Nacional de Bibliotecas
Universitarias de la Amrica Latina. Florianpolis, 2000.
25 DARWIN. [Fecha de acceso 24 octubre 2002]. Disponible en el documento web: <<http://exli-
bris.usal.es/merlo/darwin/material/guia.htm>.
26 CAYWOOD, C.: Library selection criteria for WWW resources. Op.cit., p. 169 y ss.
indicadores a tener en cuenta en una metodologa que atienda los parmetros rela-
cionados con el encaje de la fuente en el contexto web, y en concreto con su visibi-
lidad.
As han sido los trabajos de Isidro F. Aguill, presentados en las citadas jorna-
das, y los de Llus Codina de la Universidad Pompeu Fabra27. Las investigaciones
de Aguill28 se caracterizan por el empleo de tcnicas cibermtricas, procurando un
modelo de evaluacin de sedes web muy cercano al modelo de Ingwersen. Su meto-
dologa se basa fundamentalmente en las dos principales caractersticas de las sedes
web, esto es, su cobertura global y su naturaleza hipertextual. Caractersticas que
permiten desarrollar indicadores que miden la visibilidad e impacto de la presencia
de un grupo de organizacin en Internet teniendo en cuenta la semejanza entre los
enlaces hipertextuales y las citas. Segn esto, el autor apuesta por una evaluacin de
calidad de las sedes web como valor aadido, siguiendo criterios cuantitativos.
Por su parte, los trabajos de Codina29 apuestan por la evaluacin cualitativa de
los recursos digitales, identificando los parmetros esenciales que pueden ser obje-
to de evaluacin. En su artculo Evaluacin de recursos digitales en lnea: concep-
tos, indicadores, y mtodos, nos conduce al anlisis de los parmetros: autora,
contenido, ergonoma, y representacin de la informacin. Y establece procedi-
mientos de anlisis para cada grupo de indicadores con los que se evaluarn los
parmetros anteriores, junto con criterios de inclusin y exclusin, prioridades y
niveles de trabajo, y una rica apuesta por la descripcin de recursos digitales
desde la norma Dublin Core que comprende los siguientes elementos: ttulo, tipo
de recurso, responsabilidad, lugar, editor, nmero normalizado, URL, descripcin,
lengua, relacin con otros recursos, cobertura y fuente.
La publicacin de trabajos posteriores ha ido enriqueciendo la propuesta inicial
del autor, y dotndola a la vez de mayor exhaustividad, en cuanto campo de traba-
jo o mbito de aplicacin, y de mayor especificidad, en cuanto al desarrollo de cues-
tionarios de evaluacin, procedimientos de anlisis, y criterios de trabajo. En defi-
nitiva, podemos afirmar que la propuesta metodolgica de Llus Codina es una pro-
30 JIMNEZ PIANO, Mara: Evaluacin de sedes web. En, Revista Espaola de Documentacin
Cientfica, 2001, 24, 4, p. 405-433.
31 Traduccin, AYUSO GARCA, M Dolores: Bibliografa, informacin y conocimiento. Del mto-
do bibliogrfico a la normalizacin y evaluacin de recursos electrnicos. Hacia la sistematizacin de las
fuentes del conocimiento. En, Homenaje a Juan Antonio Sagredo Fernndez. Estudios de Bibliografa y
Fuentes de Informacin. (Coordinadora: Isabel Villaseor). Madrid: Universidad Complutense, Escuela
Universitaria de Biblioteconoma y Documentacin, 2001, p. 19-51.
Formando parte del ISI Current Contents Connect, la versin web de Current
Contents ofrecida desde la plataforma ISI Web of Knowledge, se encuentra el
Current Web Contents, un directorio de sitios web acadmicos evaluados, avalado
por la autoridad cientfica y acadmica de su editor, el ISI, y del entorno documen-
tal en el que se ofrece. La cobertura de este directorio es muy amplia, de hecho en
enero de 2004 contaba con 3500 sitios web evaluados, abarcando casi 200 discipli-
nas en las ciencias, ciencias sociales, artes y humanidades.
La funcionalidad de bsqueda denominada Current Contents eSearch emplea un
proceso de indexacin avanzado de Internet y una tecnologa de recuperacin para
localizar informacin en la Red que sea relevante a la bsqueda planteada por el
investigador. Esta tecnologa extiende an ms el proceso de seleccin de Current
Web Contents, dado que lleva la bsqueda fuera de la base de datos de Current
Contents y rastrea en el texto completo de los sitios web. Esos sitios web, del
Current Web Contents, han sido evaluados por editores del ISI y han pasado el rigu-
roso sistema de seleccin. Segn esto, Current Contents eSearch emplea una avan-
zada tecnologa de clasificacin y localizacin de informacin en la web para
encontrar informacin pertinente a la bsqueda del investigador y abarca la siguien-
te tipologa de contenidos:
Preprints: textos completos de publicaciones preliminares, especialmente
artculos, disponibles en Internet antes de su publicacin formal.
Funding: sedes web que ofrecen informacin sobre financiamiento, becas,
y premios.
Research activity: resmenes de actividades de investigacin en forma de
artculos, resmenes de reuniones, actas, resultados de un proyecto de inves-
tigacin, etc.
Segn muestra la figura, el Current Web Contents ofrece de cada sitio web inde-
xado los siguientes datos:
La denominacin de la web: el ttulo del sitio web que aparece en la pgina
principal de acceso al recurso, y que se muestra en la barra de navegador.
Una breve descripcin de la sede web, llevada a cabo por los editores del ISI.
Las palabras clave asignadas por los editores a partir de la clasificacin Web
Contents.
El autor de la sede web, el editor, y el idioma o idiomas de la misma.
Tipologa del sitio web, segn una amplia clasificacin entre la que se
encuentran las bibliografas, las pginas web de institucionales gubernamen-
tales, bases de datos profesionales, etc.
Formato de presentacin de la informacin, que mayoritariamente es texto en
html con imgenes giff o jpeg, aunque tambin incluye pginas multimedia
con archivos wap, etc.
Finalmente indicar que los resultados son clasificados segn su relevancia, aque-
llas palabras que son poco comunes en el ndice sern ms ponderadas que aquellas
palabras que aparecen con mayor frecuencia.
Junto al trabajo del ISI resulta preciso considerar, entre las propuestas institu-
cionales, las brillantes aportaciones metodolgicas realizadas por las agencias de
evaluacin (information gateways) ms significativas de Estados Unidos y del
Reino Unido. De stas se ha llevado a cabo una rigurosa seleccin, con el objeto de
ofrecer aqu una muestra lo ms significativa posible, teniendo en cuenta la exclu-
sividad, relevancia y oportunidad del proyecto en su mbito temtico de actuacin,
y como no el nivel de anlisis de sus protocolos. Cuestin esta ltima que ha esta-
do en funcin de la publicacin de los mismos en sus sedes web, y por no ser sta
una constante de la informacin que nos ha facilitado cada una de las agencias de
evaluacin.
La bibliografa final recoge los protocolos de las agencias consideradas, sirvien-
do ahora de muestra y antesala al protocolo de evaluacin de las autoras de este tra-
bajo el directorio temtico Sosig32.
SOSIG (The Social Science Information Gateway) es uno de los ejemplos ms
representativos de directorio temtico de inters acadmico. Se public en el ao
1995, y se trata de un servicio accesible a travs de Internet que proporciona acce-
so a recursos de informacin de calidad, publicados en la Red, y especializados en
Ciencias Sociales y Humanidades. Forma parte de la RDN y esta financiado por el
ESRC (Economic and Social Research Council) y el JISC del Reino Unido.
Como otras agencias de evaluacin, SOSIG dispone de un protocolo que aplica
a todo recurso que se incluye en su catlogo. El protocolo de SOSIG evala los
recursos web en trminos de contenido, forma y proceso:
Criterios de contenido: validez; autoridad y reputacin de la fuente; substan-
tividad de la informacin, valor aadido y exactitud; exactitud; comprensin;
unicidad; y composicin y organizacin.
Criterios de forma (evaluacin del medio): facilidad de navegacin; disposi-
cin de la ayuda del usuario; uso de estndares reconocidos; uso de la tecno-
loga apropiada; y esttica.
Criterios de proceso (evaluacin del sistema): integridad de la informacin;
integridad del sitio; e integridad del sistema.
32 Al que las autoras ya han dedicado otros trabajos presentados por la Dra. Ayuso en la Universidad
Pontificia de Colombia, Bogot y en la Universidad de la Habana.
SOSIG. [Fecha de acceso 27 junio 2003]. Disponible en el documento web: <http://sosig.esrc.bris.ac.uk/>.
til y prctico, constituido sobre dos bases de datos diferentes: un catlogo que cla-
sifica las direcciones web, y un motor de bsqueda de Ciencias Sociales. El catlo-
go referencia las direcciones web seleccionadas, evaluadas, y descritas por biblio-
tecarios o especialistas en cualquier rea temtica relacionada con las Ciencias
Sociales. Y el motor de bsqueda de Ciencias Sociales est separado del catlogo y
contiene ms direcciones que ste recopiladas automticamente por un robot, aun-
que de forma selectiva. Estas direcciones no estn organizadas ni analizadas, por lo
que tan slo se puede acceder a ellas a travs de un formulario de bsqueda ms
simple que el avanzado que permite consultar el catlogo.
Las consultas ms ricas, en trminos documentales, son las realizadas sobre el
catlogo de Sosig, y especialmente aquellas llevadas a cabo desde la opcin del
tesauro, o mejor dicho, de tres tesauros temticos que incluye. Dichos tesauros con-
tienen los trminos utilizados como palabras clave para describir el contenido del
recurso web. Para realizar una bsqueda utilizando este tipo de herramienta es pre-
ciso pinchar en la pgina principal sobre la opcin thesauri, momento a partir del
cual se contar con un formulario de bsqueda en el que el usuario habr de preci-
sar el tesauro que quiere activar y el trmino que desea localizar. Inmediatamente
despus aparecern los diferentes trminos que contienen las palabras escritas,
pudindose seleccionar entre ellas y lanzar la bsqueda directamente al catlogo.
SOSIG trabaja con tres tesauros para asignar trminos controlados a los recur-
sos web que cataloga, y para proveer al usuario de trminos alternativos en sus bs-
quedas. Estos tesauros son: HASSET: tesauro de Ciencias Sociales en general;
IBSS: tesauro especializado en Gobierno, Poltica, y Antropologa; CareData:
tesauro especializado en Trabajo y Bienestar Social.
Los tesauros pueden ser de gran ayuda al usuario al aumentar la exactitud de sus
bsquedas, si sus tentativas iniciales recuperan pocos o ningn recurso relevante en
su consulta inicial. La consulta de un tesauro puede llevarse a cabo buscando direc-
tamente y los trminos admitidos con respecto a nuestro trmino de bsqueda,
mediante el formulario dispuesto para tal fin; o bien, el usuario puede navegar por
el tesauro para conocer las relaciones semnticas entre los trminos de su inters
antes de lanzar la bsqueda al catlogo. En la consulta del tesauro, las relaciones se
muestran como ofrece la figura siguiente, de tal forma que cada trmino es un hiper-
vnculo que muestra su red de relaciones semnticas, figurando el trmino actual
(Current term) que ha guiado la consulta en la parte superior. Adems, cada tr-
mino admitido dispone de una casilla de marcado que permite al usuario seleccio-
nar las palabras clave por las que va a llevar a cabo la bsqueda, e incluso de una
opcin de inclusin de todos los trminos relacionados al trmino en cuestin.
les se centran en los aspectos formales y en la calidad de los contenidos del recur-
so. Se trata pues de una tarea que requiere una metodologa propia, y que guarda
cierta relacin con la informacin bibliogrfica del propio recurso. En ella el profe-
sional de la documentacin, suma o aade a la ya tradicional identificacin y recu-
peracin de informacin en Internet, una descripcin de valor aadido a unos recur-
sos digitales que por su naturaleza requieren de un control documental que ha de
considerar necesariamente:
Las propiedades o caractersticas del recurso digital a evaluar: Parmetros.
Los elementos del recurso digital que se van a considerar para cada una de
las caractersticas anteriores: Indicadores.
Y en tercer lugar aquellos medios por los que se procede a determinar la cali-
dad del recurso digital: Procedimientos.
Parece lgico, por tanto, que antes de presentar los parmetros e indicadores se
recuerde aqu y ahora la necesidad de stos en la metodologa de evaluacin que nos
concierne. Para cada parmetro, hay varios indicadores. O lo que es lo mismo, para
cada propiedad de la fuente digital, se considerarn una serie de elementos en la
evaluacin de cada una de las caractersticas o propiedades de la misma, al objeto
de proceder a determinar la calidad de sta. En cada indicador el evaluador ha de
contemplar los siguientes elementos:
Definicin: La presentacin del indicador.
Examen: La pregunta o preguntas que debe hacerse al analista para adoptar
decisiones sobre el indicador.
Ejemplos: Aclaraciones o ejemplos de recursos digitales en lnea que ayudan
a entender la evaluacin del indicador.
Procedimiento: Orientaciones, cuando sea oportuno, sobre cmo proceder a
la evaluacin del indicador.
Puntuacin: La escala de puntuacin recomendada.
33 Codina, Llus: El libro digital y la www. Madrid: Tauro, 2000, p. 189 ss.
Seccin de Micronavegacin
Seccin de Macronavegacin
5. Parmetro: Luminosidad.
5.1. Enlaces a recursos externos.
5.2. Contexto del anclaje: Contexto de presentacin de los anclajes que acti-
van los enlaces.
5.3. Anticipacin: Informacin anticipada ofrecida por el anclaje.
5.4. Oportunidad o adecuacin de los enlaces externos.
5.5. Calidad de los enlaces externos.
5.6. Actualizacin de los enlaces externos.
5.7. Tratamiento de los enlaces externos.
6. Parmetro: Visibilidad.
6.1. Ttulo: Ttulo de la fuente en las etiquetas de la seccin HEAD.
6.2. Transparencia: Informacin textual sobre la temtica principal del
recurso.
6.3. Metainformacin: Metadatos en la seccin HEAD.
6.4. Metadatos Dublin Core.
6.5. Popularidad: Nmero de citaciones que recibe la fuente.
Seccin de Usabilidad
7. Parmetro: Procesos.
7.1. Visin de estatus: Visin no ambigua del proceso de transaccin.
7.2. Uso de convenciones.
8. Parmetro: Errores.
8.1. Deshacer errores o ltimas acciones.
8.2. Mensajes del sistema en caso de error.
8.3. Consecuencias de los errores para el usuario especialmente.
9. Parmetro: Adaptacin.
9.1. Adaptacin o personalizacin: Capacidad de adaptacin de la fuente a
cada usuario.
9.2. Redundancia: Posibilidad de realizar las mismas acciones por distintos
medios.
9.3. Polticas y normas de uso.
4.2. PROCEDIMIENTO
4.2.1. Generalidades
rsticas comunes y que a los elementos que se van a considerar para cada una de las
caractersticas o propiedades se les puede asignar una puntuacin para cada sitio
web particular. De esta forma, con la tarea de la puntuacin de un recurso, tarea que
el evaluador lleva a cabo en la elaboracin de la Ficha de Anlisis, que se presenta-
r en el prximo epgrafe, se pretende valorar en qu medida la situacin del recur-
so, en relacin con el indicador evaluado en ese momento, es ptima, o requiere
alguna correccin, en el sentido de ser objeto de posibles mejoras. Segn lo ante-
rior, se aconseja aplicar una puntuacin de 0 a 3 segn las siguientes pautas:
0 Puntos: El indicador evaluado presenta un error grave en la fuente de infor-
macin. Sera la situacin contraria a la ideal.
1 Punto: El indicador evaluado presenta un error en la fuente de informacin.
Sera un error subsanable.
2 Puntos: El indicador evaluado es correcto, aunque el evaluador puede pro-
poner una medida de mejora del mismo.
3 Puntos: El indicador evaluado alcanza la mxima puntuacin, esto es, se
ajusta perfectamente al estndar recomendado.
Ttulo y URL.
Tema.
Pblico.
Autor / Fuente.
Evaluador, datos de identificacin.
Fecha de evaluacin.
2. Parmetro Contenido
Indicadores Observaciones Puntuacin
2.1. Temapblico-objetivos
2.2 Inters Intrnseco
2.3 Originalidad-Oportunidad
2.4 Cantidad
2.5 Rigor
2.6 Edicin
Puntuacin global del parmetro:
5. RESULTADOS Y CONCLUSIONES
dad con un claro valor informativo aadido, trtese de un directorio de pginas web,
un catlogo o un ndice temtico. Y todo ello, sin dejar a un lado las propuestas y
anlisis del estado de la cuestin de los estudiosos de la materia. A tenor de todo lo
anterior, los resultados y conclusiones de este trabajo ponen de manifiesto que nos
encontramos ante una compleja realidad, por la proliferacin de las metodologas,
que persigue encontrar un mtodo que permita seleccionar el mejor modo de eva-
luacin dada la necesidad de informacin especializada y de calidad del usuario
cientfico y acadmico. Este es el ncleo central de toda la cuestin, sobre el que
radica la evaluacin de fuentes de informacin digitales.
Por tanto, recordemos ahora brevemente que ante la necesidad de un protocolo
de evaluacin de fuentes de informacin digitales en el contexto de la informacin
cientfica y tcnica, como medio para acreditar la calidad y validez de la informa-
cin facilitada por los profesionales de la documentacin cientfica, se ha llevado a
cabo una revisin bibliogrfica del estado de la cuestin, que nos ha llevado hasta
la vertiente pragmtica de las propuestas de evaluacin ms relevantes, algunas de
ellas puestas ya en marcha desde los primeros aos de la dcada de los noventa,
tanto de estudiosos de la materia como de agencias de evaluacin.
El panorama ha resultado muy alentador, aunque el avance y el crecimiento de
las nuevas formas de publicacin de la informacin cientfica en Internet, est defi-
niendo da a da un nuevo reto para las propuestas de evaluacin. stas han de ten-
der necesariamente hacia la estandarizacin de los parmetros que consideran, de
sus procedimientos y criterios de trabajo empleados.
Las autoras llevan a cabo una propuesta de protocolo de evaluacin, como una
herramienta de calidad y de valor aadido a los servicios de referencia en Internet.
Procurando un acercamiento a la normalizacin y sistematizacin de las fuentes y
recursos de informacin en la Red. Este protocolo supone un reto a las metodolog-
as revisadas, pues se centra en los aspectos formales y en la calidad de los conteni-
dos del recurso digital. Por esto nace del estudio de la recuperacin y organizacin
de la informacin cientfica en la web, para la definicin de una evaluacin de cali-
dad de los contenidos, como tarea orientada a los tcnicos de descripcin de los
recursos web, con la finalidad de proporcionar un mayor valor aadido al producto
final.
Segn lo anterior, el protocolo parte de la siguiente premisa: una fuente de infor-
macin digital de calidad es aquella que combina un buen contenido y una buena
forma, o una buena organizacin de dicho contenido. Evaluar estos dos aspectos
implica un conocimiento de las caractersticas, ya mencionadas, de las fuentes
publicadas en Internet: recuperabilidad, capacidad, e hipertextualidad. Ciertamente
conviene sealar que se trata de un protocolo para la evaluacin crtica de la calidad
de las fuentes de informacin cientfico-acadmicas, proporcionando ideas para
estructurar proyectos de desarrollo de publicaciones digitales.
Y por ltimo, apuntar que desde la propuesta de las autoras, se definen dos esce-
narios bsicos de trabajo para la evaluacin de una fuente de informacin en
Internet:
BIBLIOGRAFA Y FUENTES
Robin BISHOP: Alberca University. [Fecha de acceso 2 mayo 2002]. Disponible en el docu-
mento web: <http://www.slis.ualberta.ca/598/robin/pap598.htm>
Shawn PATTERSON y Robert SCHROEDER: University of Detroit Mercy. [Fecha de acce-
so 20 junio 2002]. Disponible en el documento web:
<http://www.udmorcy.edu/htmls/Academics/library/webog>
Susan E. BECK:New Mexico State University. [Fecha de acceso 7 abril 2002]. Disponible
en el documento web: <http://lib.nmsu.edu/staff/susabeck/checsref.html>
THE SOUTHEAST AND ISLANDS REGIONAL TECHNOLOGY IN EDUCATION
CONSORTIUM(SEIR*TEC). [Fecha de acceso 24 marzo 2002]. Disponible en el docu-
mento web: <http://www.serve.org/seir_tec/k12/webresources.html>
Toni GREER; Donna HOLINGA; Christy KINDEL y Melissa NETZ: University of Illinois.
[Fecha de acceso 10 mayo 2002]. Disponible en el documento web:
<http://Irs.Ed.uiuc.edu/wp/credibility/bib.html>
VALPARAISO UNIVERSITY: [Fecha de acceso 2 octubre 2002]. Disponible en el docu-
mento web: http://www.valpo.edu/library/evaluation.html.>