2007 Cap 04 PDF

107
4
Mtodo e tcnicas de pesquisa
4.1
Palavras iniciais sobre o mtodo
O mtodo cientfico o processo seguido na obteno de conhecimentos.

Ele compreende os seguintes passos bsicos: observaes preliminares; problema;
fundamentao terica; amostragem; instrumentos; coleta de dados; organizao
PUC-Rio - Certificao Digital N 0410920/CA
dos dados; anlise, inferncias e concluses.

Para GRESSLER (2003), concepes filosficas e epistemolgicas
diferentes sustentam paradigmas metodolgicos diferentes. Tomando-se uma
classificao bem ampla, poder-se-ia dizer segundo o autor , que existem duas
grandes abordagens: a quantitativa e a qualitativa.
Abordagem quantitativa caracteriza-se pela formulao de hipteses,
definies operacionais de variveis, quantificao nas modalidades de coleta de
dados e de informaes, e utilizao de tratamentos estatsticos. O modelo
quantitativo estabelece hipteses que exigem uma relao entre causa e efeito e
apia suas concluses em dados estatsticos, comprovaes e testes. Os critrios
de cientificidade so a verificao, a demonstrao, os testes e a lgica
matemtica.
Abordagem qualitativa difere da abordagem quantitativa na medida em
que no emprega instrumentos estatsticos como base para a anlise. Essa
abordagem utilizada quando se busca descrever a complexidade de determinado
problema no envolvendo manipulao de variveis ou estudos experimentais.
Ela contrape-se abordagem quantitativa, uma vez que busca levar em
considerao todos os componentes de uma situao e suas interaes e
influncias recprocas, numa viso holstica.
108
Segundo RICHARDSON (1999), os mtodos quantitativos so criticveis.

As principais crticas so as seguintes:
relacionam-se a uma concepo positivista, que insiste na aplicao de modelos
das cincias naturais s cincias sociais;
derivam de uma reduo da cincia ao campo do observvel e separao entre
fatos e contextos;
eles indicam uma nfase exagerada no dado e sua reificao (objetizao);
pressupem uma cincia livre de valores. Por meio de mtodos quantitativos, o
positivismo tenta eliminar avaliaes polticas, morais ou ideolgicas;
as cincias naturais vem o mundo como objeto que deve ser controlado
tecnologicamente pelo ser humano, mas isto no se aplica s cincias sociais.
De acordo com SENRA (1989) a medida, quando supervalorizada em si

mesma, conduz inexoravelmente sua fico; com ela no se alcanaria a
essncia da realidade, apenas uma imagem dela.
H domnios quantificveis e outros qualificveis. De acordo com

RICHARDSON (1999), podemos afirmar que as investigaes que se voltam para
uma anlise qualitativa tm como objeto de estudo situaes complexas ou
bastante particulares (como o caso do objeto de estudo deste trabalho). Estudos
que empregam a metodologia qualitativa podem descrever melhor a complexidade
dos problemas. Entretanto, haver sempre possibilidades de aporte do potencial do
mtodo quantitativo ao mtodo qualitativo. Em nosso caso, a nfase dada no
mtodo de anlise qualitativo, pois devemos analisar um problema de grande
complexidade.
Importa lembrar ainda que sendo atividades humanas e sociais
pesquisas trazem consigo, inevitavelmente, a carga de valores, preferncias,
interesses e princpios que orientaram o pesquisador. Para RICHARDSON
(1999), todo pesquisador tem sua ideologia, que influir em seu trabalho de
pesquisa.
Cabe mencionar o papel da usabilidade enquanto um tipo de ideologia.
Segundo NIELSEN (2005), a ideologia da usabilidade representa a crena em
certos tipos de direitos especficos do ser humano como:
o direito a ser superior tecnologia;
109
o direito ao empoderamento (os usurios devem compreender o que est

acontecendo e devem poder controlar o computador e seus resultados);
o direito simplicidade (os usurios devem encontrar seu caminho nos
sistemas, sem esforos cognitivos demasiados); e
o direito a ter seu tempo pessoal respeitado.
4.2
O mtodo qualitativo em estudos de usabilidade
Segundo NIELSEN (2004), existem dois tipos principais de pesquisas com

usurios: a pesquisa quantitativa (estatsticas) e a pesquisa qualitativa (insights). A
pesquisa qualitativa apresenta melhores resultados. Alm disso, estudos
quantitativos so reducionistas demais para serem teis e podem gerar

interpretaes enganosas.
O benefcio dos estudos quantitativos seria que eles reduzem uma situao
complexa a um nmero fcil de ser compreendido e discutido. Entretanto, um
erro acreditar que a pesquisa estatstica seria de algum modo mais cientfica ou
crvel do que os insights de ensaios observacionais qualitativos. A pesquisa em
usabilidade de interfaces no a mesma coisa que a cincia mdica; os estudos
etnogrficos seriam a sua analogia mais prxima no campo das cincias
tradicionais.
Os estudos sobre interfaces e usabilidade so conceituais e dependem da
compreenso sobre o comportamento humano. Questes que so to especficas, a
ponto de uma frmula estatstica poder resumi-las, so irrelevantes para o Design
de interfaces. O emprego de estatsticas pode levar a anlises simplistas,
resultados aleatrios ou mensuraes distorcidas, afirmou NIELSEN (2004).
Quanto ao tamanho da amostra de participantes, o autor afirma que
pequenos e rpidos estudos com usurios so superiores aos estudos amplos e que
testar aproximadamente cinco usurios seria o suficiente. Atualmente, a maioria
das pessoas que aplicam testes com os usurios concordam com esta proposio
sobre o nmero de participantes: cinco usurios o suficiente.
110
Em artigo publicado na revista da Usability Professionals Association

(UPA), profissionais de usabilidade discutiram sobre o nmero de usurios
necessrio para compor uma amostra para testes de usabilidade e como lidar com
o nmero limitado de participantes para validar problemas encontrados
(SNYDER, 2005). Segundo TAUBER, STANFORD & KLEIN (2005), raro o
estudo de usabilidade que requer muitos dados quantitativos para gerar
informaes. Os autores recomendam no mais que oito usurios e, em geral,
cinco participantes. Diversos testes com trs a oito usurios, durante todo o ciclo
de design/redesign, conformariam a situao ideal para gerar informaes.
4.2.1
O mtodo empregado nesta pesquisa
Definiremos o mtodo escolhido para esta pesquisa como hipottico-

dedutivo, com emprego de abordagem qualitativa. Sua amostragem foi do tipo
intencional (amostragem no probabilstica subordinada a objetivos especficos do
pesquisador), conforme detalhes apresentados adiante neste captulo.
4.3
Tema e objeto
AZEVEDO (1999) nos ensina que o tema deve ser relevante cientfica e
socialmente, situado dentro de um quadro metodolgico ao alcance do
pesquisador e com reas novas a explorar. Concordando com as suas colocaes,
explicitaremos o tema geral desta pesquisa da seguinte forma: "Usabilidade e
Arquitetura de Informao em portais de e-Gov no Brasil.
Para RUIZ (1996), no o objeto material o que caracteriza uma cincia.

O que caracterizaria a cincia seu objeto formal isto , a maneira peculiar, o
111
aspecto, ou o ngulo sob o qual atinge seu objeto material. Concordando com o
enunciado proposto, define-se o objeto desta pesquisa como:
"A usabilidade e a Arquitetura de Informao do portal de disseminao

de informaes do IBGE (www.ibge.gov.br) na World Wide Web
(Internet), com nfase no seu usurio e em contraste com os conceitos
gerais que orientam os programas de e-Gov."
Com relao aos limites auto-impostos desta pesquisa, observa-se que o

seu recorte relaciona-se com a linha de investigao em Ergonomia da Interao
Humano-Computador (IHC), em contraposio discusso sobre o papel poltico
do governo eletrnico (e-Gov) e sobre as mudanas organizacionais relacionadas
(encaradas a partir de uma viso crtica das organizaes modernas). Outros temas
que embora inter-relacionados , fujam ao exposto no pertencem ao recorte
temtico desta pesquisa, embora possam vir a ser objeto de futuras investigaes
acadmicas.
Observa-se que a Ergonomia uma disciplina cientfica que trata da

interao entre os homens e a tecnologia. Segundo MORAES & MONTALVO
(1998), o objeto da Ergonomia seja qual for a sua linha de atuao ou as
estratgias e mtodos que utiliza o homem no seu trabalho trabalhando. Esse
trabalho real e concreto, e compreende desde o trabalhador ou operador at o
usurio, no seu local de trabalho, num determinado ambiente.
4.4
Pesquisa de Arquitetura de Informao
Na Arquitetura de Informao, de acordo com ROSENFELD &

MORVILLE (2002), a parte central da pesquisa a sesso face a face com o
usurio. Retira-se maior proveito dessas sesses combinando diferentes tcnicas.
A pesquisa requer um bom quadro conceitual do ambiente. Para isso, o
pesquisador pode se guiar pelo esquema da figura a seguir, que mostra uma
abordagem equilibrada da pesquisa de Arquitetura de Informao.
112
Contexto Objetivos da organizao,

polticas, cultura, tecnologia e
recursos humanos
Documentos, Contedo Usurios Audincias, tarefas,

formatos/tipos, necessidades, comportamento de
objetos, metadados, busca de informao,
estrutura existente experincia, vocabulrio
Figura 4.1 A abordagem da pesquisa da Arquitetura de Informao,

segundo ROSENFELD & MORVILLE (2002).
Contexto A investigao sobre o contexto da organizao o melhor

comeo para uma pesquisa que envolva Arquitetura de Informao. fator crtico
comear o projeto de Arquitetura de Informao com um entendimento claro
sobre os objetivos da empresa e sobre o seu ambiente poltico. Ao mesmo tempo,
devem-se considerar fatores como cultura organizacional, objetivos de curto e de
longo prazos, plano de negcios, recursos humanos, a viso de formadores de
opinio e de stakeholders, e infra-estrutura tecnolgica. Nesta dimenso da
pesquisa, utilizamos a aproximao terica sobre o comportamento das
organizaes (com base na Cincia das Organizaes) e um levantamento
bibliogrfico sobre e-Gov, alm de entrevistas de histria oral.
Contedo A compreenso do que o contedo fundamental. Os

usurios devem ser capazes de localizar o contedo antes de us-lo. A
encontrabilidade (findability) precede a usabilidade, segundo ROSENFELD &
MORVILLE (2002) e para se criar objetos encontrveis, deve-se investir tempo
de pesquisa para estudar esses objetos. O contedo de um site poder incluir
documentos, dados, aplicativos, servios, imagens, arquivos de udio e de vdeo,
pginas pessoais, e-mails arquivados e demais contedos atuais e futuros. Nesta
dimenso da pesquisa, empregamos a tcnica das entrevistas de histria oral,
conforme relatado mais adiante.
113
Usurios H diversas tcnicas para se estudar as populaes de usurios.

Nenhuma abordagem nica ser suficiente para captar necessidades, prioridades,
comportamentos, modelos mentais ou estratgias de busca de informao do
usurio. Trata-se de um desafio multidimensional que poder envolver diversas
tcnicas para formar uma idia do conjunto necessrio observar o problema
sob diversos pontos de vista. Nesta dimenso da pesquisa, recorremos aplicao
de testes de usabilidade com representantes da audincia-alvo, conforme
explicado adiante.
De acordo com KUNIAVSKY (2003), o nvel mais abstrato da experincia
em um site a sua Arquitetura de Informao. Cabe ao arquiteto fazer com que a
arquitetura implcita se torne explcita, para refletir necessidades, expectativas e a
compreenso do pblico. O fundamental para a Arquitetura de Informao
conhecer a audincia (dimenso dos usurios), como ela aborda as tarefas, que
vocabulrio utiliza e se a arquitetura existente faz algum sentido. Desse modo,
conhecer quem utilizar o produto a etapa crtica da Arquitetura de Informao.

Isso pode significar o levantamento de algumas caractersticas como idade, nvel
de escolaridade, renda etc. Em sites, deve-se considerar o perfil de uso da Web. O
estudo da terminologia utilizada o segundo mais importante elemento da
pesquisa, j que a maior parte das interfaces contm muitas palavras. O modelo
mental da audincia a terceira pea-chave para a pesquisa dos usurios.
Tais consideraes sobre Arquitetura de Informao completam os
conceitos que orientaram o mtodo empregado do presente trabalho.
4.5
Problema de pesquisa
O problema uma questo no resolvida, algo para o qual vai-se buscar

uma resposta, atravs de pesquisa. Pode estar referido a alguma lacuna
epistemolgica ou metodolgica percebida, a alguma dvida quanto sustentao
de uma afirmao geralmente aceita, necessidade de pr prova uma suposio,
a interesses prticos ou vontade de compreender e explicar uma situao do
cotidiano (VERGARA, 1997).
114
Para RUDIO (1998), formular o problema consiste em defini-lo de

maneira explcita, clara, compreensvel e operacional. O objetivo da formulao
do problema torn-lo individualizado, especfico e inconfundvel.
Definimos da seguinte forma o problema desta pesquisa:
O portal IBGE um site emblemtico para os servios de governo
eletrnico (e-Gov). Publica informaes estatsticas que embasam
polticas e aes sociais do Estado e da sociedade civil. Porm, segundo
o prprio IBGE, os usurios do portal tm dificuldades em encontrar as
informaes disponibilizadas. Isto se configura num problema de
usabilidade de interfaces e de Arquitetura de Informao.
4.6
Hiptese
De acordo com RUDIO (1998), hiptese uma suposio que se faz na

tentativa de explicar o que se desconhece. Para CERVO & BERVIAN (2002), a
hiptese pode ser a suposio de uma causa ou de uma lei destinada a explicar
provisoriamente um fenmeno, at que apaream fatos que a contradigam ou a
reafirmem.
Definiremos assim a nossa hiptese de trabalho:
Devido a sua alta complexidade informacional, a Arquitetura de
Informao do portal IBGE no espelha as expectativas dos usurios.
Isto dificulta o acesso de pesquisadores e de cidados comuns, que no
conhecem previamente a estrutura de produo e divulgao das
pesquisas do IBGE, gerando problemas de encontrabilidade de
informaes. O fato est em desacordo com princpios nacionais e
internacionais aceitos para os portais de governo eletrnico (e-Gov).
115
4.7
Objetivos da pesquisa
Segundo ANDRADE (1997), toda pesquisa deve ter objetivos claros e

definidos, pois assim torna-se mais fcil conduzir a investigao. Os objetivos
podem ser gerais e especficos (particulares).
O objetivo geral da nossa pesquisa :
Contribuir para o aprimoramento do portal IBGE e do e-Gov, levando em
considerao questes prticas relacionadas usabilidade e Arquitetura de
Informao.
Para CERVO & BERVIAN (2002), definir objetivos especficos significa
aprofundar as intenes expressas no objetivo geral. Nossos objetivos especficos
com o presente trabalho so:
Apresentar um olhar sobre o modo como a tecnologia de informao est sendo
absorvida no contexto das organizaes do Estado e o seu impacto real, a partir de

um estudo de caso.
Relacionar as recomendaes de usabilidade e de Arquitetura de Informao
estudadas com as recomendaes gerais para portais de e-Gov, visando a
transparncia do Estado e a incluso digital.
Gerar uma contribuio para a linha de pesquisa de Ergonomia e Usabilidade de
Interfaces Humano-Computador do programa de Ps-graduao em Design da
PUC-Rio.
Apresentam-se tambm os objetivos operacionais:
Introduzir debates a respeito do Design e da gesto da tecnologia da informao
nas organizaes do Estado.
Descrever teoricamente como a introduo da tecnologia da informao nas
organizaes do Estado pode contribuir para a transformao destas, no sentido da
desburocratizao e melhoria do atendimento aos cidados.
Questionar como a racionalidade tcnica facilita ou dificulta a ocorrncia de
transformaes profundas nas organizaes do Estado.
Pesquisar aspectos atuais relativos agenda de implantao de servios do e-
Gov no Brasil e no mundo.
Identificar diretrizes e recomendaes nacionais e internacionais de usabilidade,
acessibilidade e gesto para portais de e-Gov.
116
Identificar pblicos-alvos do portal IBGE a partir de entrevistas com

informantes qualificados.
Aprofundar referncias tericas em Interao Humano-Computador (IHC) e
Arquitetura de Informao.
Verificar a aplicao dos conceitos de usabilidade e acessibilidade no portal
IBGE.
Levantar as necessidades, opinies e sugestes de usurios em relao
Arquitetura de Informao do portal IBGE, a partir de testes.
Explicitar dificuldades e constrangimentos dos usurios no referido portal
quanto a aspectos ergonmicos das interfaces.
Aplicar tcnicas de pesquisa para levantamento de dados qualitativos.
Observar representantes do pblico-alvo do portal e registrar seu
comportamento e opinies durante a interao com a interface avaliada.
Gerar recomendaes especficas para a melhoria das interfaces do IBGE
considerando as recomendaes gerais para e-Gov.
4.8
Tcnicas de pesquisa
Nesta pesquisa, foram empregadas tcnicas de entrevistas de histria oral,

avaliaes assistemticas com usurios e testes de usabilidade cujos roteiros de
aplicao so descritos a seguir.
4.8.1
Histria oral
A difuso da histria oral deu-se no incio da dcada de 1970, a partir dos

EUA e Europa, e resultou na implantao de vrios programas em organizaes.
De acordo com ALBERTI (2004), a histria oral pode ser definida como
mtodo de investigao cientfica, como fonte de pesquisa, ou ainda como tcnica
117
de produo e tratamento de depoimentos gravados. Presta-se a diversas

abordagens, movendo-se num terreno multidisciplinar. Neste trabalho acadmico,
utilizou-se a histria oral como tcnica.
Segundo CERVO & BERVIAN (2002), recorre-se s entrevistas quando
h necessidade de obter dados que no podem ser encontrados em registros e
fontes documentais e que podem ser fornecidos por pessoas. Segundo ALBERTI
(2004), a histria oral privilegia a realizao de entrevistas com pessoas que
participaram de acontecimentos, conjunturas e vises de mundo. Estudam-se
acontecimentos, instituies, grupos sociais ou categorias profissionais, luz de
depoimentos de pessoas que os testemunharam.
Seu emprego se justifica no contexto de uma investigao cientfica e
pressupe um projeto de pesquisa. Na presente pesquisa, a tcnica de histria oral
subordina-se ao projeto de investigao especfica da rea de Ergonomia da
Interao Humano-Computador (IHC) e Arquitetura de Informao.
A peculiaridade da histria oral privilegia a recuperao do vivido

conforme concebido por quem o viveu. Para ALBERTI (2004), no fator
negativo o fato de o depoente poder distorcer a realidade, ter falhas de
memria ou errar em seu relato. Trata-se de um dilogo entre entrevistado e
entrevistadores, de uma construo e de uma interpretao do passado, atualizada
atravs da linguagem falada.
As entrevistas podem ser aplicadas a uma amostra tpica de respondentes
ou a determinados informantes-chave, como os gerentes ou administradores. As
entrevistas realizadas com profundidade podero adicionar novos dados ao
problema, assim como auxiliar na consolidao de hipteses explica
OPPENHEIM (1992)
4.8.1.1
A escolha dos entrevistados
Segundo ALBERTI (2004), a escolha de entrevistados no deve ser

orientada por critrios quantitativos (por uma preocupao com amostragens),
mas pela posio do entrevistado no grupo ou por sua experincia. Selecionam-se
118
os entrevistados entre aqueles que participaram, viveram, presenciaram ou se

inteiraram de ocorrncias e que possam fornecer depoimentos significativos. Esta
orientao geral foi seguida nesta pesquisa.
O processo de seleo de entrevistados se aproxima da escolha de
informantes em antropologia, tomados no como unidades estatsticas mas como
unidades qualitativas.
Nesta pesquisa, realizaram-se 16 entrevistas, entre dezembro de 2004 e
janeiro de 2007. So os seguintes os nomes e as posies dos funcionrios do
IBGE entrevistados (pela ordem de realizao):
1 Jorge Tadeu Borges Leal 53 anos. Analista de publicidade da Coordenao

de Marketing do IBGE (COMAR), do Centro de Documentao e Disseminao
de Informaes (CDDI), desde 2002, quando entrou por concurso. responsvel
pela abertura do Workshop de Ferramentas Digitais do IBGE para o
Planejamento Empresarial, evento voltado a instituies pblicas e privadas,

ONGs, consultorias, meio acadmico etc. Graduado em Comunicao Social pela
FACHA (1975) e Ps-graduado em Docncia Superior pela Universidade
Candido Mendes (2003). Entrevistas concedidas em dezembro de 2004 e
dezembro de 2006.
Por que foi escolhido Ministra cursos para os usurios do portal IBGE.
2 Marcio Imamura 38 anos. Analista de sistemas e gerente da Gerncia Online

(GEON), departamento do IBGE responsvel pela gesto tcnica do portal de
Internet, no Centro de Documentao e Disseminao de Informaes (CDDI).
Trabalha no IBGE desde 1988. Em seu perodo na chefia da GEON, o portal
recebeu o prmio IBEST. Entrevista concedida em fevereiro de 2005.
Por que foi escolhido Gerente do portal IBGE na Internet.
3 Luiz Paulo do Nascimento 34 anos. Formado em Desenho Industrial

Programao Visual pela Universidade Federal do Rio de Janeiro, em 1999. Ps-
graduando em Design de Interfaces pelo Centro Universitrio Carioca. Faz o
desenvolvimento de layouts visuais e atualizao do contedo do portal IBGE, na
Gerncia Online (GEON), do Centro de Documentao e Disseminao de
119
Informaes (CDDI). Trabalha na Instituio desde 2003, quando entrou por

concurso pblico. Entrevista concedida em fevereiro de 2005.
Por que foi escolhido designer de interfaces do portal IBGE.
4 Maria Helena Neves Souza 50 anos. Formou-se em Arquitetura pela

Universidade Santa rsula (1976). Em 1979, entrou para o IBGE. No Centro de
Documentao e Disseminao de Informaes (CDDI), assumiu a chefia da
Diviso de Planejamento e Superviso (DPS) e concebeu o primeiro ncleo de
atendimento aos usurios da Instituio. No perodo 1994-1999, exerceu a chefia
da Diviso de Promoo e Marketing (DIPOM) e hoje atua na rea de Projetos
Especiais. Entrevista concedida em fevereiro de 2005.
Por que foi escolhida Testemunhou a entrada da tecnologia da
informao na rea de Design.
5 Aglaia Pereira Tavares de Almeida 34 anos. Formada pela PUC-Rio em

Comunicao Social, com habilitao em Jornalismo, em 1992. mestre em
Sociologia pela UFRJ (1996). Atuou como chefe interina da Coordenao de
Marketing do IBGE, no Centro de Documentao e Disseminao de Informaes
(CDDI), e hoje trabalha na assessoria do gabinete. Foi efetivada a partir 2002,
quando passou em concurso pblico. Entrevista concedida em fevereiro de 2005.
Por que foi escolhida Chefiou a diviso de marketing do IBGE.
6 Taissa Abdalla Filgueiras de Sousa 27 anos. Formada em Desenho

Industrial pela PUC-Rio, em 1999. designer da Gerncia Online (GEON), onde
desenvolve interfaces visuais. Ps-graduada em Anlise, Projeto e Gerncia de
Sistemas pela PUC-Rio, em 2003. Aps o perodo destas entrevistas, assumiu a
gerncia do departamento de Web. Entrevistas concedidas em maro de 2005 e
dezembro de 2006.
Por que foi escolhida designer de interfaces do portal IBGE.
7 Paulo Cesar Quintslr 47 anos. Bacharel, em 1979, em Cincias Estatsticas

pela Escola Nacional de Cincias Estatsticas (ENCE) e ps-graduado, em 1999,
em Administrao Pblica pela Fundao Getlio Vargas (FGV), tendo
ingressado no IBGE em 1980. Exerceu, de 1992 a 1995, a funo de coordenador
120
do Centro de Documentao e Disseminao de Informaes (CDDI) e, de 1995

at 2005, a funo de chefe do Departamento de Atendimento Integrado (DEATI).
A partir de 2005, assumiu a funo de coordenador da Coordenao de
Atendimento Integrado (COATI), do CDDI, responsvel pela promoo da
disseminao adequada s necessidades dos usurios. Entrevistas concedidas em
maro de 2005 e janeiro de 2007.
Por que foi escolhido Conhece as demandas dos usurios do IBGE.
8 Cristina Maria Castanheira 37 anos. tecnloga em Anlise de Sistemas

pelas Faculdades Integradas Anglo Americano (1990), com ps-graduao em
Marketing pela Escola Superior de Propaganda e Marketing (ESPM). Fez
concurso pblico para o IBGE em 2002. a responsvel pela publicao de
pesquisas e de releases no portal IBGE. Entrevista concedida em junho de 2005.
Por que foi escolhida analista de sistemas do portal IBGE.
9 Tarsus Magnus Pinheiro 31 anos. designer formado pela Escola Superior

de Desenho Industrial (ESDI). Em 2002, fez concurso pblico e trabalha na
Gerncia Online (GEON) do Centro de Documentao e Disseminao de
Informaes (CDDI). Entrevista concedida em junho de 2005.
Por que foi escolhido designer do portal IBGE.
10 Edna Campello 48 anos. formada em Anlise de Sistemas pela PUC-Rio

(1979) e em Direito pela Universidade Gama Filho (1990). Entrou no IBGE em
1978. Em 1999, assumiu a coordenao da Gerncia Online (GEON), do Centro
de Documentao e Disseminao de Informaes (CDDI). Em seu perodo, o
portal da Instituio recebeu o prmio IBEST. Entrevista concedida em julho de
2005.
Por que foi escolhida Gerenciou o portal IBGE na Internet.
11 Cesar de Carvalho Nuez 48 anos. Designer formado pela Escola Superior

de Desenho Industrial (ESDI/UERJ), em 1980. Trabalhou na TV Globo, com
produo de aberturas e vinhetas. De 1996 at hoje, tem trabalhado como
webdesigner, inclusive para o portal IBGE. Desde 2002, analista de tecnologia
da informao da Dataprev. Cursa o mestrado em Cincias da Computao na
121
Universidade Federal Fluminense (UFF). Entrevista concedida em outubro de

2005.
Por que foi escolhido Designer de interfaces do portal IBGE.
12 Alcides Alves Braga 47 anos. Formado em administrao de empresas,

cursa graduao em Marketing. Entrou no IBGE em 1982, quando participou de
coletas de campo para pesquisas. H 10 anos, coordena projetos na rea de
disseminao de informaes e atualmente gerente de comrcio eletrnico do
IBGE. Entrevista concedida em novembro de 2005.
Por que foi escolhido Gerencia a Loja Virtual do IBGE na Internet.
13 Francisco de Assis Alchorne 42 anos. Jornalista, formado em Comunicao

Social e ps-graduado em Reengenharia de Recursos Humanos. Entrou na
Instituio h 18 anos e gerente de Disseminao de Informaes da Diretoria de
Pesquisas. Entre as suas responsabilidades esto a produo e o acompanhamento

da disseminao de resultados de pesquisas na Internet, a alimentao do portal
IBGE e atendimento especfico aos usurios. Entrevista concedida em dezembro
de 2005.
Por que foi escolhido Facilitador do dilogo entre pesquisa e
disseminao no IBGE.
14 Roberto Muller 42 anos. Formado em Administrao de empresas e ps-

graduado em Reengenharia de Recursos Humanos. Entrou no IBGE em 1978,
quando trabalhou na base operacional geogrfica do Censo. tecnologista da
gerncia de disseminao de informaes da Diretoria de Pesquisas. Entrevista
concedida em dezembro de 2005.
Por que foi escolhido Facilitador tcnico do dilogo entre pesquisa e
disseminao no IBGE.
15 Aldo Victorio Filho 49 anos. Entrou para o IBGE em 1981 como

codificador do Censo Demogrfico. Entre 1990 e 2000, exerceu a funo de chefe
da Diviso de Criao do Centro de Documentao e Disseminao de
Informaes (CDDI), que desenvolvia Design visual e artes grficas. Completou
122
seu doutorado em Educao pela Universidade do Estado do Rio de Janeiro

(UERJ), em 2005. Entrevista concedida em dezembro de 2005.
Por que foi escolhido Chefiou a equipe de Design do IBGE, durante a
introduo dos microcomputadores.
16 Reynaldo Jos Monteiro dos Santos 56 anos. Engenheiro civil, entrou no

IBGE em 1975, comeando como analista de sistemas. Chefiou o departamento de
sistemas de informaes. Atua junto Gerncia de Atendimento, que atende aos
usurios do IBGE, atravs de call-center, e-mails, cartas etc. Entrevista concedida
em janeiro de 2006.
Por que foi escolhido Atende usurios e conhece suas demandas de
informaes.
4.8.1.2
A tcnica das entrevistas de histria oral
possvel escolher o tipo de entrevista a ser realizada: temticas ou de

histria de vida. As entrevistas desta pesquisa foram temticas. Visaram levantar
informaes sobre os diversos tipos de contedos e formatos do portal IBGE, seus
pblicos-alvo especficos, tcnicas de produo, impresses pessoais e o processo
de introduo da tecnologia da informao no IBGE.
O trabalho do entrevistador no propriamente um trabalho de coleta de
dados, mas sim um trabalho de coleta de idias, explica OPPENHEIM (1992). O
objetivo coletar idias e contribuir para a conceituao do problema. Deve-se
criar uma atmosfera livre para poder captar as idias aparentemente contraditrias
ou sem lgica, emitidas pelo entrevistado.
Para OPPENHEIM (1992), a aplicao de entrevistas uma tarefa com
grande grau de complexidade, que exige do entrevistador muitas habilidades
interpessoais. Segundo GIL (2002), pode se caracterizar como informal, quando
se distingue da conversao apenas por ter como objetivo a coleta de dados. Pode
ser focalizada quando embora livre enfoca tema especfico. parcialmente
estruturada, quando guiada por pontos de interesse. totalmente estruturada
123
quando tem uma relao fixa de perguntas. As entrevistas realizadas para esta
pesquisa acadmica se caracterizaram como sendo focalizadas e parcialmente
estruturadas.
Segundo THIOLLENT (1982), na entrevista guiada, o pesquisador
conhece os aspectos que deseja pesquisar e, com base neles, formula pontos a
tratar na entrevista. As perguntas dependem do entrevistador e o entrevistado tem
a liberdade de expressar-se como quiser.
Segundo GRESSLER (2003), recursos visuais como fotografias, desenhos,
bonecos, entre outros podem ser introduzidos na situao de uma entrevista.
Como recurso visual de apoio s entrevistas, utilizamos a apresentao em um
notebook, de imagens print-screens (capturas de telas) das principais reas do
portal IBGE.
Para as gravaes, foi utilizado um pequeno gravador convencional, de
mo, que ficava geralmente sob o controle do entrevistado. A transcrio das fitas
foi realizada com o auxlio de uma profissional de digitao experiente, que

seguiu as orientaes do pesquisador. A correo das transcries e o copidesque
foram realizados pelo prprio pesquisador, seguindo as diretrizes propostas em
ALBERTI (1990 e 2004).
Na histria oral, o copidesque no modifica a entrevista, como acontece no
caso de artigos de jornais ou revistas. Mantm as perguntas e respostas tais quais
foram proferidas, no substitui palavras por sinnimos, respeita a correspondncia
entre o que foi dito e o que est escrito. A ao do copidesque limita-se a corrigir
erros de portugus, a ajustar o texto a normas de uniformizao e a adequar a
linguagem escrita ao discurso oral. Na linguagem falada, aceitam-se repeties de
palavras, frases inconclusas e expresses informais. Ou seja, os critrios de
elegncia de um texto escrito no se aplicam.
O mesmo princpio de copidesque pode no se aplicar quando a entrevista
editada visando a publicao nesse caso, pode haver tratamentos
diferenciados: cortes de passagens repetidas ou pouco claras, a diviso por
assuntos, modificando-se a ordem em que foram tratados, assim como a seleo
de trechos e a articulao do texto com documentos escritos e iconogrficos.
Tambm pode ser publicada uma sucesso de trechos de depoimentos diferentes
que tratam do mesmo tema (foi o caso da apresentao deste trabalho).
124
Os entrevistados do presente trabalho de pesquisa assinaram termos de

autorizao, dando ao pesquisador a licena para a divulgao dos depoimentos.
A tcnica das entrevistas de histria oral foi empregada, nesta pesquisa,
com o propsito de levantar informaes bsicas a respeito dos canais do portal
IBGE, seus pblicos-alvo, suas tecnologias, seus contedos e formatos e um
pouco da histria de sua elaborao segundo as palavras, recordaes e vises
dos profissionais que participaram de sua criao, produo e gesto. O resultado
dessas entrevistas ser apresentado no prximo captulo deste trabalho, quando os
diferentes depoimentos sero confrontados entre si observando-se o foco nos
temas da pesquisa em Ergonomia.
4.8.2
Testes de usabilidade
O termo teste de usabilidade significa o processo que envolve o

feedback vivo de usurios operando tarefas reais (RUBIN, 1994; DUMAS &
REDISH, 1994; BARNUM, 2002). o processo emprico de aprender a partir dos
usurios, sobre a usabilidade de um produto, observando-os durante a sua
utilizao. Define se os usurios podem encontrar e utilizar os recursos, dentro do
tempo e com o esforo que desejam despender (BARNUM, 2002). Os testes de
usabilidade so instrumentos indicados para a observao das tarefas do usurio,
com a finalidade de obter dados que permitam medir o rendimento, a freqncia
de sucesso, a capacidade ou o comportamento de indivduos, de forma
quantitativa e tambm qualitativa.
Os primeiros testes de usabilidade foram aplicados no centro de pesquisas
Xerox PARC, pela equipe que desenvolveu o computador ALTO e visaram
determinar quantos botes deveriam ser colocados em um mouse (PREECE,
ROGERS e SHARP, 2002). Registrados em vdeo ou gravaes de udio,
usurios interagem com o sistema, em condies controladas, para checar o
sucesso das interfaces, observando dados comportamentais. A tendncia hoje em
dia a simulao dos ambientes originais de uso como salas de aula e
residncias e no mais o emprego de frios laboratrios (AGNER, 2006).
125
Os objetivos especficos de cada teste vo definir quais sero os

participantes e quais as tarefas que sero executadas. Como regra, os participantes
devem representar usurios reais. Devem ser membros do grupo que utiliza ou que
vai utilizar o produto. Alm disso, os participantes do teste devem executar
tarefas reais. Devem ser as tarefas que os usurios vo executar em seu trabalho
ou em suas casas.
Um nmero grande de participantes seria desejvel para realizar testes de
interfaces. Mas, por questes de custos e de tempo, adota-se na prtica um nmero
bem menor para viabilizar as avaliaes, conforme proposto por NIELSEN
(2005). A abordagem tradicional era custosa, pois os experimentos envolviam
entre 30 e 50 participantes. Entretanto, este pesquisador props uma mudana de
paradigma ao sugerir testes com melhor relao custo-benefcio, utilizando entre
quatro e cinco usurios. Tambm props a dispensa de laboratrios, para que os
testes pudessem se encaixar dentro dos oramentos das empresas.
4.8.2.1
Fase preliminar observaes assistemticas
Na fase preliminar desta pesquisa, realizamos observaes assistemticas

com a participao de estudantes de graduao em Desenho Industrial. Essas
observaes mostraram que os alunos tiveram muitas dificuldades para encontrar
respostas a perguntas simples sobre caractersticas da populao brasileira,
utilizando o portal IBGE. Isso evidencia que h problemas de usabilidade e de
Arquitetura de Informao.
Com objetivo de avaliar a adequao das interfaces do portal do IBGE e a
usabilidade das informaes estatsticas por ele disseminadas, realizamos ensaios
de interao junto a estudantes de graduao em Desenho Industrial na
UniverCidade (Rio de Janeiro, RJ), no laboratrio de informtica da instituio. A
pesquisa foi realizada em trs ocasies, durante os anos 2004 e 2005 (primeiro e
segundo semestres), com turmas diferentes, submetidas realizao mesma tarefa
e apresentadas ao mesmo cenrio tpico.
126
Os estudantes de Design, todos com boa experincia em navegao na

Internet e em uso de computadores foram colocados diante do seguinte cenrio
possvel:
Cenrio Voc trabalha em um escritrio de Design que est desenvolvendo a
embalagem de um novo produto de beleza dirigido populao de cor negra e
que ser comercializado na regio Sudeste do Pas. Voc dever justificar as
solues de projeto para o seu cliente e precisar de dados estatsticos sobre a
fatia de mercado a ser alcanada pelo novo produto.
Diante de tal cenrio, foi-lhes apresentada a seguinte tarefa, a ser
completada utilizando o site do Instituto Brasileiro de Geografia e Estatstica
(IBGE):
Tarefa Encontre a porcentagem da populao de cor negra, residente na
regio Sudeste do Brasil.
Nos trs ensaios preliminares, ocorridos entre 2004 e 2005, as seguintes
variveis foram controladas para todos os participantes: a velocidade de acesso

Iinternet (banda larga via Rede Rio), o desempenho de hardware (todos os
computadores eram padronizados em um mesmo laboratrio), o desempenho de
software (a verso dos navegadores era padro em todas as mquinas), os nveis
de iluminao e de rudo do ambiente (laboratrio de informtica, testes
simultneos) e tarefas a serem desempenhadas (iguais para os trs grupos).
O resultado dessas avaliaes apresentado no captulo a seguir, sob a
forma de tabela resumida, juntamente com as impresses relatadas pelos
participantes.
4.8.2.2
Planejando os testes de campo
Segundo BARNUM (2002), testar interfaces com usurios um processo

intenso, exaustivo e fascinante. Por isso, grande parte do seu sucesso vai depender
da exatido do planejamento. O planejamento de testes de usabilidade pode
envolver as seguintes etapas:
estabelecer a equipe;
127
definir as caractersticas do teste e a audincia-alvo;

estabelecer objetivos e mtricas;
estabelecer o perfil do usurio;
selecionar tarefas;
determinar como categorizar os resultados;
escrever o plano.
Ao definir a equipe, deve-se levar em considerao a possibilidade de que

sejam preenchidos os papis de facilitador, logger, operador de vdeo, narrador,
help desk e administrador. DUMAS & REDISH (1994) acreditam que o ideal ter
trs pessoas na equipe: dois especialistas e o cliente. Entretanto, o teste pode ser
conduzido por uma s pessoa. Nesse caso, ela ter de desempenhar diversos
papis e, muito provavelmente, ter de decidir, de antemo, informaes que tero
de ser sacrificadas. Uma boa sada para esses casos ter uma filmadora
registrando aquilo que no conseguir captar. Para compensar a impossibilidade
de anotar todas as observaes, ser bom planejar um tempo maior para assistir s
gravaes. Nesta pesquisa, todos os papis foram assumidos pelo pesquisador,
com simplificao desses papis.
Ao planejar um teste de usabilidade, deve-se decidir se ser um teste em
laboratrio, em campo, ou um teste remoto (uma abordagem que surgiu mais
recentemente). O teste de campo o mais indicado para avaliaes somativas
(para determinar como o produto trabalha no mundo real). O teste de laboratrio
funciona para avaliaes formativas (para diagnosticar problemas durante o
desenvolvimento), possibilitando alteraes durante o processo. Nos testes em
laboratrio, deve-se procurar simular o ambiente real de uso, seja um escritrio,
uma linha de montagem ou uma loja. Os testes remotos esto se tornando uma
opo, quando os usurios esto em locais distantes ou em outros pases.
As vantagens dos testes de campo so: o pesquisador vai ao usurio em
vez de convid-lo a vir at ele; o pesquisador observa o ambiente real onde o
usurio trabalha ou vive; o pesquisador observa o usurio com todas as
interrupes e distraes do ambiente; o pesquisador verifica os artefatos criados
pelos usurios para as tarefas; o usurio pode acessar documentaes especficas.
As desvantagens dos testes de campo so: no se pode controlar o ambiente; o
pesquisador no pode ser removido do ambiente; a ateno do usurio pode ser
128
perturbada por fatores fora do teste; talvez no seja possvel testar um nmero
grande de usurios; o teste de campo no incorpora alteraes durante o
desenvolvimento. Nas observaes estruturadas, o usurio convidado a
completar as tarefas que poderia realizar em um laboratrio. uma tcnica
adequada para avaliar a interao em um determinado ambiente, uma vez que as
influncias causadas por este podem ser crticas para a usabilidade de um produto.
Para esta pesquisa, optamos por aplicar testes de campo, dentro dos seus
ambientes de uso: a residncia ou local de trabalho do pesquisador e o campus
universitrio.
Os objetivos devem ser mensurveis e baseados em tarefas. Segundo
BARNUM (2002), a melhor forma de determin-los definir um objetivo geral e
depois operacionaliz-lo em termos especficos e mensurveis. As mtricas de um
teste de usabilidade podem incluir, entre outras:
O tempo da tarefa.
A porcentagem de tarefas completadas.

A porcentagem de tarefas no completadas.
Tempo de navegao em busca da informao.
Nmero de erros.
Nmero de passos.
Quantidade de informaes encontradas.
Quantidade de acessos ajuda.
Pode-se procurar mensurar a satisfao do usurio. Embora as percepes

e a satisfao sejam dados qualitativos (subjetivos), a equipe pode quantific-los
por meio de questionrios. Estes podem solicitar a atribuio de notas para:
Facilidade de uso.
Facilidade de navegao.
Utilidade.
Facilidade de aprendizado.
Facilidade de se recuperar de erros.
Ajudas online ou offline.
Aspectos positivos relembrados.
129
A equipe de testes dever definir quais sero os valores aceitos como

medidas de sucesso, tanto em relao s tarefas quanto em relao s reas
subjetivas.
Antes de recrutar participantes para os testes, alguns documentos de apoio
devem ser preparados. Os seguintes foram selecionados para esta pesquisa:
Questionrio de pr-teste para definir o perfil dos participantes.
Questionrio ps-teste para aplicao aps o teste.
Declarao de cincia e autorizao consentimento para gravaes e sua
utilizao e outras informaes.
Os documentos de apoio definidos para esta pesquisa esto relacionados

nos Anexos ao final da tese.
Os locais tpicos para selecionar participantes so: listas de clientes, listas
de usurios potenciais, organizaes profissionais, associaes de usurios,
agncias de emprego, empresas de pesquisa de mercado, anncios em jornais,
campi universitrios, colgios, listas de amigos ou de colegas. No caso desta

pesquisa, procuramos os usurios dentro dos campus universitrio da PUC-Rio,
UFRJ e na unidade Ipanema da UniverCidade, pois a poderiam ser encontrados
representantes do pblico-alvo (pesquisadores: mestrandos e doutorandos). Com o
objetivo de ampliar a amostra contemplando reas diversificadas foram
considerados tambm os que defenderam dissertaes ou teses recentemente. Os
participantes foram recrutados por meio de telefone, e-mail e contatos diretos.
4.8.2.3
Cenrios e tarefas
Segundo DUMAS & REDISH (1994), os cenrios so usados para

informar aos participantes o que ns queremos que eles faam durante o teste. Um
cenrio descreve as tarefas de uma maneira que retira a artificialidade do teste.
Um bom cenrio deve ser pequeno; redigido nas palavras do usurio e no do
produto; deve ser claro, para que no haja dvidas. Deve dar as informaes
130
necessrias (nem demais ou de menos) para as tarefas e estar relacionado

diretamente com os interesses.
O plano de testes deve conter cenrios escritos. Os cenrios devem ser
sempre apresentados da mesma forma e com o mesmo contedo (DUMAS e
REDISH, 1994).
Na gerao de cenrios para os testes de usabilidade, BARNUM (2002)
enumera dois desafios: (1) evitar criar cenrios com passo a passo (instrues); e
(2) evitar redigi-los na linguagem do produto. O vocabulrio dever ser o do
usurio.
O cenrio definido para os testes de usabilidade da presente pesquisa foi o
seguinte:
Cenrio Voc est realizando uma pesquisa para o seu curso de ps-
graduao (mestrado ou doutorado). A sua pesquisa envolver o estudo do
comportamento de consumo da populao idosa no Brasil. Para completar a
redao do captulo inicial, voc dever incluir alguns dados demogrficos atuais
sobre a distribuio da populao idosa no Pas.
Uma tarefa requer mais de uma operao fsica ou mental para ser
completada. uma atividade no-trivial e, em alguns casos, complexa, tendo um
objetivo definido.
No contexto do cenrio acima, a primeira tarefa definida para o teste foi a
seguinte:
Tarefa 1 A partir da home page do portal IBGE, identifique em que Estado do
Brasil reside a maior concentrao de pessoas idosas (com mais de 60 anos).
Aponte o nmero atual, em termos absolutos.
Para os participantes, foi apresentada ainda uma segunda tarefa, um pouco
mais complexa:
Tarefa 2 A partir da home page do portal IBGE, descubra em que bairro da
cidade de Recife reside a maior concentrao de cidados da terceira idade.
Aponte o nmero atual, em termos absolutos.
Para cada cenrio e tarefa, pode-se aplicar um questionrio ps-tarefa ou
ps-teste e obter um feedback imediato do participante. Modelos dos questionrios
utilizados aparecem nos Anexos desta tese.
131
4.8.2.4
Walkthroughs e testes-piloto
As preparaes preliminares ao teste devem incluir o walkthrough e o

teste-piloto. O walkthrough a primeira chance de testar o equipamento e checar
os materiais (documentos, roteiros e questionrios), os cenrios, a terminologia, o
tempo previsto e as perguntas. Um usurio tolerante (no necessariamente do
pblico-alvo) selecionado para a participao no walkthrough. O teste-piloto
um teste do teste e o seu participante deve ser recrutado dentro do grupo de
usurios-alvo (BARNUM, 2002).
Figura 4.2 Teste de usabilidade realizado em campo (2007).
Dois walkthroughs foram aplicados, na lanchonete do andar trreo da

UniverCidade, Rio de Janeiro, com a participao de usurios tolerantes (com e
sem experincia no portal IBGE). Os walkthroughs indicaram a necessidade de
ajustes na documentao e nas perguntas dos questionrios, alm de modificao
na segunda tarefa e do posicionamento da cmera. Tambm deram a certeza de
que o aparato tcnico funcionava a contento no campus e uma estimativa realista
do tempo total de durao do teste.
Puderam-se observar ainda as interferncias dos ambientes, tpicas dos
estudos de campo. As fontes de disperso no ambiente incluram: nvel alto de
rudo, som e imagens de TV, conversas e risadas, toques de celulares, alunos
132
trabalhando em locais prximos, passagem ou aproximao de grupos de estudantes

ou de professores, podendo causar breves interrupes. Tendo sido bem-sucedidos,
os walkthroughs forneceram parmetros para o registro e anlise dos dados. Aps
os walkthroughs foram aplicados dois testes-piloto.
Na prtica, os testes de campo (figura 4.2) tambm foram realizados nas
residncias dos usurios e em seus escritrios, introduzindo variveis como: rudos
de vizinhos, animais domsticos, empregados, crianas, familiares, interferncias de
colegas de trabalho e dificuldades na conexo. Os testes de campo foram
desenvolvidos entre dezembro de 2006 e fevereiro de 2007, no Rio de Janeiro.
4.8.2.5
Equipamentos, roteiro e abordagem
Os seguintes equipamentos integraram o laboratrio de usabilidade porttil

que foi utilizado nos testes de campo:
Notebook Pentium 4 com 512 Mb de memria e Windows XP.
Navegador Internet Explorer 6.
Webcam USB.
Mouse USB.
Headphone e microfone de cabea.
Software de captura de telas TechSmith Camtasia Studio 3.
Cmera digital de 6 megapixels, com carto de memria flash de 1Gb.
Gravador analgico de udio (para backup de udio).
Acesso sem fios Internet com placa PCMCIA (servio de dados Vivo Zap).
Questionrios e documentao impressos (ver Anexos).
O roteiro de aplicao dos testes incluiu os seguintes passos: chegar ao

campus meia hora antes para escolher o local e montar o aparato, receber de modo
corts o participante, oferecer um pequeno lanche, descrever o aparato tcnico,
apresentar exemplo anterior gravado, informar sobre o tempo de durao, solicitar
a leitura e assinatura do termo de cincia e autorizao, explicar que no o
participante que testado e sim a interface, auxiliar na colocao do microfone,
133
descrever os protocolos de verbalizao, perguntar se h dvidas, falar sobre ajuda

e finalizao, solicitar o preenchimento do questionrio de pr-teste, acionar o
software e verificar o seu funcionamento, apresentar o cenrio e a primeira tarefa
por escrito, iniciar a gravao anotando os tempos, estimular o uso do protocolo
verbal durante a tarefa, ao fim da primeira tarefa desligar a cmera e salvar os
arquivos, quando a tarefa estiver completa apresentar a segunda tarefa, estimular o
uso do protocolo verbal durante a segunda tarefa, solicitar o preenchimento do
questionrio de ps-teste, solicitar ao participante que revise o seu vdeo, realizar
entrevista aberta gravada em udio, solicitar que o participante avalie o mtodo.
Ao trmino, agradecer e oferecer-lhe um pequeno presente.
O trabalho de coleta e registro de observaes de um teste de usabilidade
gera normalmente um grande nmero de informaes. O desafio do pesquisador
organiz-las para report-las e interpret-las. Ao descrever como classificar esses
dados, BARNUM (2002) apresenta-nos duas possibilidades tpicas de abordagem:
a top-down e a bottom-up.
A primeira abordagem prov maior consistncia na anlise das
observaes e comea a partir de uma gama de heursticas consolidadas. A
segunda abordagem assemelha-se a uma tcnica de card sorting (organizao de
cartes) em que a equipe de pesquisa identifica a posteriori as categorias dos
problemas observados e o modo como sero agrupados.
As diferentes abordagens de anlise apresentam vantagens e desvantagens,
e funcionam melhor em situaes diversas. A vantagem da abordagem top-down
comear por uma gama de princpios estabelecidos, com uma linguagem comum
para os problemas observados em grande parte dos testes de usabilidade. Esta
abordagem gera maior consistncia na anlise e na sua interpretao,
independentemente de quem est reportando os problemas. Sua desvantagem
empregar um mtodo prescrito. A vantagem do processo bottom-up construir um
consenso da equipe atravs do envolvimento dos seus membros, e analisar as
observaes de modo inovador e especfico. A abordagem bottom-up funciona
melhor com a participao de um facilitador com experincia.
Nesta pesquisa, a abordagem de anlise adotada foi a de tipo bottom-up,
inspirada nos critrios heursticos apresentados por NIELSEN (2007), BASTIEN
& SCAPIN (1993) e ROSENFELD (2007).
134
Aps o registro e a categorizao das descobertas, procurou-se determinar

a causa dos problemas de usabilidade, avaliou-se seu impacto individual e
recomendaram-se solues. O resultado do processo levou ao estabelecimento de
um conjunto de critrios heursticos especficos para a avaliao da usabilidade e
da Arquitetura de Informao do portal IBGE.
Esses critrios foram consubstanciados em uma lista de verificao
(checklist), apresentada na seo de Anexos deste trabalho.
4.8.2.6
Protocolos de verbalizao
Protocolos de verbalizao de pensamentos so protocolos utilizados

durante os testes de usabilidade. Os usurios so incentivados a exteriorizar seus

pensamentos em voz alta, enquanto trabalham nas tarefas e so gravados.
Acredita-se que o mtodo tenha grande validade j que os dados obtidos refletem
o uso real do artefato e no julgamentos dos participantes sobre a sua usabilidade.
importante estabelecer a diferenciao entre os seguintes conceitos: protocolo
retrospectivo (PR) e protocolo concorrente (PC).
Segundo BARNUM (2002), no caso do protocolo retrospectivo, o
participante termina a sua tarefa e, logo aps, rev as aes gravadas em vdeo.
Em seguida, discute com a equipe a razo das aes e descreve os problemas que
teve. O protocolo retrospectivo tambm conhecido como teste retrospectivo
ou protocolo verbal subseqente auxiliado difere dos protocolos verbais
concorrentes ou simultneos (PC). Nele, em vez de verbalizar os pensamentos
durante a realizao da tarefa, os participantes do teste completam as tarefas
silenciosamente e verbalizam os pensamentos depois aps terem assistido a um
vdeo com a gravao da sua performance. Embora esta tcnica possa fazer a
situao de teste se tornar mais natural, pode dobrar ou triplicar o seu tempo de
durao.
Para HAAK, JONG & SCHELLENS (2003), o protocolo concorrente (PC)
resulta em um nmero maior de problemas observados. O protocolo retrospectivo
(PR) se mostra eficiente para detectar problemas que s poderiam ser encontrados
135
atravs da verbalizao. O protocolo concorrente (PC) mais til para os

problemas estritamente orientados s tarefas.
O protocolo retrospectivo (PR) adequado para problemas de natureza
abrangente. Os participantes de testes com PR em geral fornecem explicaes e
sugestes; os participantes sob a condio de PC se limitam a dar descries.
Nos testes planejados para esta pesquisa, empregamos o protocolo de
verbalizao concorrente (PC) seguido do uso do retrospectivo (PR), resultando
em uma tcnica mista que se mostrou adequada pesquisa.
4.9
Concluses deste captulo
Este captulo definiu o objeto da pesquisa como sendo a usabilidade e a

Arquitetura de Informao do portal de disseminao de informaes do IBGE
(www.ibge.gov.br) na World Wide Web (Internet), em contraposio aos
conceitos gerais e polticas que orientam os programas de e-Gov. As trs
dimenses desta pesquisa incluem o Contedo, o Contexto e os Usurios.
Quanto ao problema de pesquisa, relata-se que os usurios do portal IBGE
tm dificuldades em encontrar as informaes disponibilizadas, fato que se
configura num problema de usabilidade de interfaces e de Arquitetura de
Informao.
A hiptese da pesquisa foi assim descrita: Devido a sua alta complexidade
informacional, a Arquitetura de Informao do portal IBGE no espelha as
expectativas dos seus usurios. Isto dificulta o acesso de pesquisadores e de
cidados comuns, que no conhecem previamente a estrutura de produo e
divulgao das pesquisas do IBGE, gerando problemas de encontrabilidade de
informaes.
Nesta pesquisa, foram empregadas tcnicas de entrevistas de histria oral,
avaliaes assistemticas com usurios e testes de usabilidade cujos roteiros de
aplicao foram detalhadamente explicados. A peculiaridade da histria oral
privilegia a recuperao do vivido conforme concebido por quem o viveu. Na
presente pesquisa, a tcnica de histria oral subordina-se ao projeto de
136
investigao em Ergonomia da Interao Humano-Computador e Arquitetura de

Informao.
Por teste de usabilidade entende-se o processo emprico de aprender sobre
a usabilidade de um produto, observando os usurios durante a sua utilizao.
Nesta pesquisa, so utilizadas avaliaes assistemticas e testes de campo com
emprego de protocolo de verbalizao misto e abordagem de anlise bottom-up.
Aps o registro e a categorizao das descobertas, procurou-se determinar
a causa dos problemas de usabilidade observados e recomendaram-se solues
possveis. O resultado do processo nos levou ao estabelecimento de um conjunto
de critrios heursticos especficos para a avaliao da usabilidade e Arquitetura
de Informao do portal IBGE.
O objetivo desta pesquisa contribuir para o aprimoramento do portal IBGE
e de portais do governo eletrnico (e-Gov), alm de discutir seus problemas,
levando em considerao fatores como a usabilidade e a Arquitetura de
Informao em funo da possibilidade de otimizao do dilogo com os

usurios/cidados.
4.10
Referncias bibliogrficas
AGNER, Luiz. Ergodesign e Arquitetura de Informao: Trabalhando com o

usurio. 1. ed. Rio de Janeiro: Quartet, 2006. 176 p.
ALBERTI, Verena. Histria oral; a experincia do CPDOC. Centro de

Pesquisa e Documentao de Histria Contempornea do Brasil. 1. ed. Rio de
Janeiro: FGV, 1990. 202 p.
______ . Manual de histria oral. 2.ed. Rio de Janeiro: FGV, 2004. 236 p.
ANDRADE, Maria Margarida de. Como preparar trabalhos para cursos de

ps-graduao. So Paulo: Atlas, 1997.
AZEVEDO, Israel Belo de. O prazer da produo cientfica. 7. ed. Piracicaba:

UNIMEP, 1999. 208p.
137
BASTIEN, Christian.; SCAPIN, Dominique. Ergonomic criteria for the

evaluation of human-computer interfaces Critres ergonomiques pour
lvaluation dinterfaces utilisateurs. Version 2.1. Programme 3 Artificial
intelligence, cognitive systems, and man-machine interaction. Technical report n
156. May 1993. Roquencourt: INRIA Institut National de Recherche en
Informatique et en Automatique, 1993. 83p.
BARNUM, Carol M. Usability testing and research. New York: Pearson

Education, 2002. 428p.
CERVO, Amado; BERVIAN, Pedro A. Metodologia cientfica. So Paulo:

Prentice Hall, 2002. 242 p.
DUMAS, Joseph; REDISH, Janice C. A practical guide to usability testing.

Norwood, NJ; Ablex Publishing, 1994.
FERREIRA, Marieta de Moraes (Coord.). Entre-vistas; abordagens e usos da

histria oral. Rio de Janeiro: FGV, 1994.
GRESSLER, Lori Alice. Introduo pesquisa: projetos e relatrios. So Paulo:

Loyola, 2003.
GIL, Antonio Carlos. Como elaborar projetos de pesquisa. 4. ed. So Paulo:

Atlas, 2002. 176p.
HAAK, Maaike; JONG, Menno; SCHELLENS, Peter. Retrospective vs.

concurrent think aloud protocols: testing the usability of an online library
catalogue. Behavior & Information Technology, [ London ], Taylor & Francis, v.
22, n. 5, p. 339-351, set./ out. 2003.
KUNIAVSKY, Mike. Observing the user experience: a practitioners guide to

user research. San Francisco, CA: Morgan Kaufmann, 2003. 560p.
MORAES, Anamaria; MONTALVO, Claudia R. Ergonomia: Conceitos e

Aplicaes. Rio de Janeiro: 2AB, 1998. 119 p.
NIELSEN, Jakob. Risks of quantitative studies. Disponvel em: <http: / / www.

useit.com/alertbox.> Acesso em: 15 mar. 2004.
______ . Ten usability heuristics. Disponvel em: <http: / / www.

useit.com/papers/heuristic/.> Acesso em: 24 abr. 2007.
______ . Usability: empiricism or ideology? Disponvel em: <http: / / www.

useit.com/alertbox.> Acesso em: 15 jun. 2005.
______ . Why you only need to test with 5 users? Disponvel em: <http: / / www.
useit.com/alertbox.> Acesso em: 08 abr. 2005.
OPPENHEIM, A. N. Questionnaire design, interviewing and attitude

measurement. London: Pinter Publishers, 1992. 303 p.
138
PREECE, Jennifer; ROGERS, Yvonne; SHARP, Helen. Interaction design

beyond human computer interaction. Hoboken, NJ; J. Wiley, 2002. 519 p.
RICHARDSON, Roberto J. Pesquisa social: mtodos e tcnicas. So Paulo:

Atlas, 1999. 334 p.
ROSENFELD, L; MORVILLE, P. Information architecture for the World

Wide Web. Sebastopol, CA: OReilly, 2002. 519 p.
ROSENFELD, L. Information architecture heuristics. Disponvel em: <http: / /

louisrosenfeld.com/home/ bloug_archive/> Acesso em: 24 abr. 2007.
RUBIN, Jeffrey. Handbook of usability testing: how to plan, design, and

conduct effective tests. New York: Wiley Technical Communication Library,
1994. 330 p.
RUDIO, Franz Victor. Introduo ao projeto de pesquisa cientfica. 22.ed.

Petrpolis: Vozes, 1998. 120p.
RUIZ, Joo lvaro. Metodologia cientfica: guia para eficincia nos estudos. 4.
ed. So Paulo: Atlas, 1996.
SENRA, Nelson de Castro. O cotidiano da pesquisa. So Paulo: tica, 1989.

72p.
TAUBER, Ellen; STANFORD, Julie; KLEIN, Laura. How many users are
really enough? When to test and when to hold off. User Experience. Usability
ProfessionalsAssociation UPA. V. 4, n. 4, p 7-8, 2005.
THIOLLENT, Michel. Crtica metodolgica, investigao social e enquete

operria. So Paulo: Polis, 1982. 270 p.
VERGARA, Sylvia Constant. Projetos e relatrios de pesquisa em

administrao. So Paulo: Atlas, 1997.
SNYDER, Carolyn. How many users are really enough? Designing tests to get
what you need. User Experience. Usability ProfessionalsAssociation UPA. V.
4, n. 4, p 9-11, 2005.
WICHANSKY, Anna. Usability testing in 2000 and beyond. Ergonomics,

[S.l.].v. 43, n. 7, p. 998-1006, jul. 2000.

2007 Cap 04 PDF

Uploaded by

Document Information

Original Title

Copyright

Available Formats

Share this document

Share or Embed Document

Sharing Options

Did you find this document useful?

Is this content inappropriate?

Copyright:

Available Formats

2007 Cap 04 PDF

Uploaded by

Copyright:

Available Formats

107

O mtodo cientfico o processo seguido na obteno de conhecimentos.

dos dados; anlise, inferncias e concluses.

Segundo RICHARDSON (1999), os mtodos quantitativos so criticveis.

De acordo com SENRA (1989) a medida, quando supervalorizada em si

H domnios quantificveis e outros qualificveis. De acordo com

o direito ao empoderamento (os usurios devem compreender o que est

Segundo NIELSEN (2004), existem dois tipos principais de pesquisas com

quantitativos so reducionistas demais para serem teis e podem gerar

Em artigo publicado na revista da Usability Professionals Association

Definiremos o mtodo escolhido para esta pesquisa como hipottico-

Para RUIZ (1996), no o objeto material o que caracteriza uma cincia.

"A usabilidade e a Arquitetura de Informao do portal de disseminao

Com relao aos limites auto-impostos desta pesquisa, observa-se que o

Observa-se que a Ergonomia uma disciplina cientfica que trata da

Na Arquitetura de Informao, de acordo com ROSENFELD &

Contexto Objetivos da organizao,

Documentos, Contedo Usurios Audincias, tarefas,

Figura 4.1 A abordagem da pesquisa da Arquitetura de Informao,

Contexto A investigao sobre o contexto da organizao o melhor

Contedo A compreenso do que o contedo fundamental. Os

Usurios H diversas tcnicas para se estudar as populaes de usurios.

conhecer quem utilizar o produto a etapa crtica da Arquitetura de Informao.

O problema uma questo no resolvida, algo para o qual vai-se buscar

Para RUDIO (1998), formular o problema consiste em defini-lo de

De acordo com RUDIO (1998), hiptese uma suposio que se faz na

Segundo ANDRADE (1997), toda pesquisa deve ter objetivos claros e

absorvida no contexto das organizaes do Estado e o seu impacto real, a partir de

Identificar pblicos-alvos do portal IBGE a partir de entrevistas com

considerando as recomendaes gerais para e-Gov.

Nesta pesquisa, foram empregadas tcnicas de entrevistas de histria oral,

A difuso da histria oral deu-se no incio da dcada de 1970, a partir dos

de produo e tratamento de depoimentos gravados. Presta-se a diversas

A peculiaridade da histria oral privilegia a recuperao do vivido

Segundo ALBERTI (2004), a escolha de entrevistados no deve ser

os entrevistados entre aqueles que participaram, viveram, presenciaram ou se

1 Jorge Tadeu Borges Leal 53 anos. Analista de publicidade da Coordenao

Planejamento Empresarial, evento voltado a instituies pblicas e privadas,

2 Marcio Imamura 38 anos. Analista de sistemas e gerente da Gerncia Online

3 Luiz Paulo do Nascimento 34 anos. Formado em Desenho Industrial

Informaes (CDDI). Trabalha na Instituio desde 2003, quando entrou por

4 Maria Helena Neves Souza 50 anos. Formou-se em Arquitetura pela

5 Aglaia Pereira Tavares de Almeida 34 anos. Formada pela PUC-Rio em

6 Taissa Abdalla Filgueiras de Sousa 27 anos. Formada em Desenho

7 Paulo Cesar Quintslr 47 anos. Bacharel, em 1979, em Cincias Estatsticas

do Centro de Documentao e Disseminao de Informaes (CDDI) e, de 1995

8 Cristina Maria Castanheira 37 anos. tecnloga em Anlise de Sistemas

9 Tarsus Magnus Pinheiro 31 anos. designer formado pela Escola Superior

10 Edna Campello 48 anos. formada em Anlise de Sistemas pela PUC-Rio

11 Cesar de Carvalho Nuez 48 anos. Designer formado pela Escola Superior

Universidade Federal Fluminense (UFF). Entrevista concedida em outubro de

12 Alcides Alves Braga 47 anos. Formado em administrao de empresas,

13 Francisco de Assis Alchorne 42 anos. Jornalista, formado em Comunicao

Pesquisas. Entre as suas responsabilidades esto a produo e o acompanhamento

14 Roberto Muller 42 anos. Formado em Administrao de empresas e ps-

15 Aldo Victorio Filho 49 anos. Entrou para o IBGE em 1981 como

seu doutorado em Educao pela Universidade do Estado do Rio de Janeiro

16 Reynaldo Jos Monteiro dos Santos 56 anos. Engenheiro civil, entrou no

possvel escolher o tipo de entrevista a ser realizada: temticas ou de

foi realizada com o auxlio de uma profissional de digitao experiente, que

Os entrevistados do presente trabalho de pesquisa assinaram termos de

O termo teste de usabilidade significa o processo que envolve o

Os objetivos especficos de cada teste vo definir quais sero os