WiP iTV - Work in Perspective interactive television

universidade de aveiro
departamento de comunicao e arte novas tecnologias da comunicao

#6 testes

unidade curricular Projeto

WiP iTV
docentes Benjamim Junior Helder Caixinha Ivo Daniel Pedro Amado coordenador Jorge T. Ferraz de Abreu colaboradores Pedro Almeida Ricardo Pinto Rita Oliveira elementos 49722 - lus melo 50766 - marina silva 8 de Junho de 2012, Aveiro

Projecto WIP iTV

DeCa UA 2012

.ndice
.Introduo .................................................................................................................................... 3 .Resumo da elaborao dos testes ............................................................................................... 4 1. Planeamento dos testes de usabilidade................................................................................ 5 1.1.1 1.1.2 1.1.3 1.1.4 1.1.5 1.1.6 1.1.7 1.1.8 1.1.9 1.1.10 Objectivos .............................................................................................................. 5 Funcionalidades a testar ....................................................................................... 6 Guio de teste ....................................................................................................... 7 Caracterizao dos participantes .......................................................................... 8 Tcnicas de teste ................................................................................................... 8 Tcnicas de recolha de dados ............................................................................... 9 Contexto dos testes............................................................................................. 10 Instrumentos a construir e definio de prioridades das correces ................. 11 Calendarizao dos testes ................................................................................... 11 Calendarizao para correco de bugs .............................................................. 11

2. Anlise dos resultados e reflexo final................................................................................ 12 2.1 Bugs encontrados e possveis solues ................................................................... 20

.Anexos ........................................................................................................................................ 24

Projecto WIP iTV

DeCa UA 2012

.Introduo
Aps o desenvolvimento da verso Beta da aplicao WIP iTV, necessrio compreender o impacto que esta ter aquando da sua utilizao por parte do utilizador final. Devido ao carcter interactivo e das limitaes do dispositivo de input da aplicao (telecomando), muito importante que sejam desenvolvidos alguns testes em situaes reais de utilizao para que haja uma maior conscincia acerca dos problemas da aplicao e entender quais as melhores solues. Este documento pretende descrever os vrios passos efectuados pelos responsveis do WIP iTV de modo a que se cumpram todos os objectivos delimitados inicialmente aquando do estado de arte e briefing do projecto. Sero apresentados os vrios testes efectuados, os seus principais objectivos, tcnicas e mtodos utilizados para que se possa, atravs desses dados concretos, proceder, da forma mais adequada, aos respectivos melhoramentos.

Projecto WIP iTV

DeCa UA 2012

.Resumo da elaborao dos testes

Os responsveis pelo WIP iTV pretendiam de certa forma perceber qual seria o impacto cognitivo provocado nos seus participantes de modo a que seja evitado o mximo de esforo possvel aquando da utilizao da aplicao, tendo em conta que o dispositivo de interaco utilizado possui algumas limitaes. Para isso, foram elaborados, essencialmente, testes de usabilidade, complementados tambm com testes de user-experience atravs dos questionrios finais de modo a entendermos quais os sentimentos que o participante teve aquando da experincia.

1. Planeamento dos testes de usabilidade 1.1 Testes de usabilidade 1.1.1 Objectivos do teste 1.1.2 Funcionalidades a testar 1.1.3 Guio de teste 1.1.4 Caracterizao dos participantes 1.1.5 Tcnicas de teste 1.1.6 Tcnicas de recolha de dados 1.1.7 Contexto dos testes 1.1.8 Calendarizao dos testes 1.1.9 Instrumentos a construir de definio de prioridades de correces 1.1.10 Calendarizao da correco de bugs 2. Anlise dos resultados 2.1 Bugs encontrados e possveis solues
4

Projecto WIP iTV

DeCa UA 2012

1. Planeamento dos testes de usabilidade

1.1 Testes de usabilidade

1.1.1 Objectivos: Com a elaborao dos testes de usabilidade, o grupo pretende obter resultados claros e objectivos que permitam a correco de eventuais problemas que surjam no que diz respeito ao paradigma de interaco que utilizamos. Assim, iremos executar um conjunto de testes para compreender o comportamento dos vrios utilizadores e quais as dificuldades que estes iro enfrentar na utilizao da aplicao. Pretendemos de certa forma tornar a nossa aplicao o mais user-friendly possvel, minimizando assim o esforo cognitivo necessrio para uma boa experincia. Com isto, iremos tentar perceber se as opes de navegao criadas foram as mais correctas e quais as limitaes das mesmas. Em suma, queremos ter em conta a eficincia, eficcia e satisfao que a aplicao proporciona nos demais utilizadores.

Projecto WIP iTV

DeCa UA 2012

1.1.2 Funcionalidades a testar: A tabela que seguidamente apresentada resume os vrios mdulos que iro ser percorridos pelos participantes e qual o objectivo da utilizao desses mesmos mdulos:

Tabela 1 Mdulos da aplicao testados

Mdulo Login na aplicao Ecr principal (landing-page) Ofertas recomendadas

Descrio Verificar se o utilizador consegue efectuar o login sem dificuldades. Verificar o nvel de satisfao do utilizador relativamente ao paradigma de navegao. Verificar o nvel de dificuldade na execuo das aces disponveis neste ecr. Verificar o nvel de satisfao do utilizador relativamente navegao e a sua facilidade na execuo das aces disponveis neste ecr. Verificar se o utilizador consegue aceder ao perfil da empresa atravs do detalhe das ofertas ou do ecr correspondente s empresas. Verificar se o utilizador consegue aceder galeria de fotografias das empresas. Verificar se o utilizador entende que a sua conta foi guardada sem necessitar de novo login e que pode eliminar a sua conta da aplicao.

Detalhes das ofertas

Detalhes das empresas Detalhes das empresas (galeria de fotografias) Ecr de Avatars

Projecto WIP iTV

DeCa UA 2012

1.1.3 Guio de teste: De modo a que os participantes percorram os mdulos da aplicao por ns definidos, foram criadas um conjunto de tarefas que permitissem a utilizao do mximo de funcionalidades disponveis de modo a entendermos as dificuldades que surgiram:

Tabela 2 Guio de teste entregue aos participantes

N 1 2 3 4 5 6 7 8 9 10

Descrio Abra a aplicao e efectue login (username e pin registados anteriormente na web) Aceda s suas ofertas recomendadas (realizado previamente no teste da web) Marque uma das ofertas para se candidatar mais tarde Aceda ao menu de todas as ofertas Filtre as ofertas pela rea de Recursos Humanos Pesquise uma oferta da empresa Cofina Aceda a uma das ofertas resultantes Aceda ao perfil da empresa Cofina Visualize a galeria de fotografias da empresa Cofina Faa logout, elimine a sua conta e saia da aplicao

Projecto WIP iTV

DeCa UA 2012

1.1.4 Caracterizao dos participantes: Segundo Virzi (1992) e Nielsen (2000) so apenas necessrios 5 utilizadores para detectar a grande maioria (80%) dos problemas de usabilidade. Dessa forma, foi criada uma caracterizao dos participantes dos testes. Em relao ao nmero de participantes e s suas caractersticas, iremos recorrer a 5 pessoas com idades compreendidas entre os 18 e os 35 anos, sendo que esta faixa etria est includa na populao activa bem como de possveis desempregados. Queremos recorrer a participantes com estas caractersticas pois so os que mais se assemelham ao nosso pblico-alvo, acabando assim por tornar o teste mais realista e o mais aproximado possvel dos utilizadores finais.

1.1.5 Tcnicas de teste: Observao De modo que seja feito um acompanhamento de todo o processo que ir estar a decorrer, o grupo recorreu tcnica de Observao, de forma participativa e directa em laboratrio, ou seja, o grupo acompanhou o participante ao longo do percurso pelos mdulos e foi, de forma participativa, recolhendo alguns dados relativamente aos pensamentos e dvidas que os participantes estavam a ter. Os observadores estavam junto aos participantes para tornar o ambiente mais social e confortvel sem que sentissem alguma espcie de controlo. Todo este processo foi feito tendo por base um ambiente controlado em laboratrio. Cognitive Walkthroughts No que diz respeito s tarefas em si, iremos recorrer tcnica Cognitve Walkthroughs com o objectivo de que os utilizadores percorram um determinado mdulo e realizar um conjunto de tarefas especficas desse mesmo mdulo (por exemplo, inserir dados de login, procurar uma oferta, efectuar a filtragem, visualizar fografias de uma empresa, etc.). Thinking-Aloud Protocol Na tcnica Thinking-Aloud Protocol (pensar alto), o participante convidado a verbalizar todos os seus pensamentos durante a sesso de utilizao de modo a que seja feito um registo e posterior anlise de todas as verbalizaes, ajudando-nos a perceber quais as suas frustraes aquando da utilizao da aplicao bem como a sua satisfao de determinada funcionalidade ou relevncia da mesma para utilizao futura.

Projecto WIP iTV

DeCa UA 2012

1.1.6 Tcnicas de recolha de dados: Como tcnicas de recolha de dados, iremos recorrer a: - Gravao udio/vdeo de forma a ter um registo permanente dos testes, no que diz respeito s interaces e verbalizaes dos participantes; - Checklists/grelhas de observao de modo a que se possa fazer o registo das vrias dificuldades que os utilizadores enfrentaram; - Questionrios/inquritos que iro ser preenchidos no incio e final da experincia pelos participantes. O questionrio inicial ir estar direccionado para o estudo da amostra, de modo a entendermos alguns aspectos cognitivos e pessoais dos participantes, como por exemplo, os seus hbitos televisivos. O questionrio final ir ser muito relevante principalmente para entendermos qual a user-experience do utilizador ao testar a aplicao. As questes sero maioritariamente fechadas de excluso (sim, no) e de escolha mltipla, tornando os questionrios de fcil preenchimento e evitando tambm respostas em branco, existo apenas uma questo abertas em que o participante poder dar a sua opinio pessoal em relao aplicao e experincia, nomeadamente sugestes para futuras melhorias. Resumidamente, os questionrios sero: a) Questionrio pr-teste (anexo 1): obteno de informao pessoal e cognitiva que caracterize o participante, de modo a ser feito um diagnstico do seu perfil; b) Questionrio ps-teste (anexo 2): obteno do nvel de satisfao do utilizador, quais os aspectos que achou mais interessantes na aplicao e que futuras melhorias poderiam ser feitas.

Projecto WIP iTV

DeCa UA 2012

1.1.7 Contexto dos testes: Uma vez que a aplicao desenvolvida tem como objectivo integrar um sistema televisivo, utilizado em casa, pretendemos, assim, simular esse mesmo ambiente caseiro com a utilizao de alguns objectos utilizados no ambiente natural de um televisor. Assim conseguimos tornar toda a experincia mais realista, uma vez que os participantes se sentem mais confortveis e includos numa sala tal como no seu lar. Para todo este processo, foram utilizadas um conjunto de ferramentas essenciais tanto para o teste em si, como para a anlise posterior: 1. Sala (laboratrio) para a elaborao dos testes; 2. Guio com as tarefas a serem executadas, entregue ao participante; 3. Computador porttil e televisor para a execuo da aplicao; 4. Telecomando para efectuar a interaco com o computador; 5. Questionrios pr e ps-teste para posterior anlise; 6. Sof para simular o conforto de uma casa; 7. Elementos do grupo e respectivos instrumentos de observao.

Figura 1 Disposio dos elementos principais de uma sala para simulao de um ambiente real de utilizao

10

Projecto WIP iTV

DeCa UA 2012

1.1.8 Instrumentos a construir e definio de prioridades das correces: Depois de efectuados os testes, ir ser criada uma tabela com a respectiva descrio e prioridade dos erros detectados e a respectiva calendarizao da correco dos mesmos. Para isso, ir ser utilizada uma escala tendo como nmero um(1) prioridade mxima. De acordo com a especificidade do erro, a sua calendarizao ir variar, uma vez que a dificuldade de correco diversifica-se, pelo que os erros mais crticos sero corrigidos em primeiro lugar, caso no surja imprevistos.
1.1.9

Calendarizao dos testes: Data 04-06-2012 04-06-2012 05-06-2012 05-06-2012 06-06-2012 07-06-2012 08-06-2012 Hora 15:00h 15:30h 15:30h 17:00h 14:00h 14:30h 14:30h 19:00h 9:00h 13:00h 9:00h 13:00h 9:00h 19:00h Descrio Configurao da sala para simulao do ambiente de utilizao Simulao dos testes Planeamento dos testes e preparao da sala para recepo dos participantes Elaborao dos testes Reviso dos testes e incio da insero dos dados em Excel Criao dos grficos correspondentes aos testes Anlise dos grficos e criao de documento de especificao

Tabela 3 Calendarizao dos testes

1.1.10 Calendarizao para correco de bugs: Data 06-06-2012 07-06-2012 08-06-2012 Hora 9:00h 13:00h 9:00h 19:00h Descrio Identificao dos vrios bugs e a sua priorizao Incio da correco dos bugs encontrados Finalizao da correco dos bugs

Tabela 4 Calendarizao da correco dos bugs

11

Projecto WIP iTV

DeCa UA 2012

2. Anlise dos resultados e reflexo final

Aps efectuados os testes aos 5 participantes, e recolhidos os respectivos dados atravs das vrias tcnicas de teste e de recolha de dados, conseguimos agora reunir um conjunto de informao que nos permite averiguar quais os problemas encontrados na aplicao e as possveis solues a implementar. Para tal, o grupo decidiu que seria essencial a criao de grficos e tabelas que nos permitam resumir esses mesmos dados e facilitar a sua anlise. Para alm disso, foi construda uma tabela onde esto discriminados os vrios pensamentos dos participantes bem como os apontamentos efectuados pelos observadores.

Questionrio inicial Como j referido anteriormente nas tcnicas de recolha de dados, de forma a compreendermos o perfil de cada participante, foram realizados questionrios iniciais da amostra.

Figura 2 Gnero dos participantes

Figura 3 Idade dos vrios participantes

Para a realizao dos testes, recorremos a cinco participantes, sendo dois do sexo masculino e trs do sexo feminino. Por nos ser mais acessvel, optmos por pessoas conhecidas com hbitos televisivos e com alguma literacia tecnolgica, principalmente porque os testes foram realizados juntamente com o projecto WIP Web. Depois de recolhidas as idades dos participantes, conclumos que a mdia de 26 anos, enquadrando-se na faixa etria do nosso pblico-alvo final.

12

Projecto WIP iTV

DeCa UA 2012

Figura 4 Grfico referente aos motivos pelos quais os participantes vm televiso

De acordo com as respostas pergunta 3.4 do questionrio inicial, em que pedimos os trs principais motivos pelos quais o participante v televiso, compreendemos que estes so Para me distrair/divertir(80%), Para ocupao de tempos livres(40%) e Para estar informado/actualizado(80%). Nesta medida, compreendemos que a aplicao consegue unir estes trs desejos da populao, uma vez que, para alm de permitir a visualizao de nova informao, como o caso das ofertas de emprego, permite, tambm, uma constante visualizao dos contedos televisivos j escolhidos.

Figura 5 Grfico relativo aos servios de televiso utilizados pelos participantes

Atravs da figura 5, conseguimos compreender quais os servios de televiso por subscrio mais utilizados pelos nossos participantes. Embora esta informao no seja nova para os elementos do grupo WIP iTV, estes dados apenas vieram reforar
13

Projecto WIP iTV

DeCa UA 2012

que a ZON e a MEO so as empresas lderes deste tipo de servio, constituindo assim potenciais compradores e fornecedores desta aplicao.

Grelhas de observao Atravs dos dados recolhidos nos testes de usabilidade e registados na grelha de observao (anexo 3), conseguimos elaborar os dois seguintes grficos que incluem as principais dificuldades na utilizao da aplicao, bem como os sucessos atingidos: Anlise - Cognitive Walkthrough

Figura 6 Grfico correspondente anlise da tcnica Cognitive Walkthrough

Pelo grfico da figura 3, conseguimos perceber quais as funcionalidades que constituram maiores dificuldades na sua execuo, nomeadamente a filtragem, que incluiu no s a representao metafrica do cone em si, mas tambm da representao visual do estado activo/inactivo das checkboxes, e o acesso galeria de imagens, uma vez esta galeria se encontra ao mesmo nvel das estrelas de rating. No entanto, todos os participantes consideraram a navegao perceptvel, completando tambm todas as tarefas propostas.

14

Projecto WIP iTV

DeCa UA 2012

Anlise Thinking-Aloud

Figura 7 Grfico correspondente anlise da tcnica Thinking-Aloud

De acordo com o grfico da figura 4, conseguimos obter de forma espontnea as opinies dos participantes acerca da corrente utilizao da aplicao. Com o registo dessas mesmas opinies, depreendemos que todos os participantes sentiram dificuldades na utilizao do telecomando, uma vez que as teclas de navegao no estavam a funcionar correctamente, sendo este um problema de hardware que o grupo no conseguiu resolver. Outro aspecto referido pelos beta testers surgiu aquando mencionado a tarefa de Limpar ou Desfazer a filtragem feita anteriormente, uma vez que a palavra Restaurar no os induzia para essa funo.

15

Projecto WIP iTV

DeCa UA 2012

Questionrio final Com o questionrio final, conseguimos obter dados importantes acerca da user-experience, nomeadamente o interesse das funcionalidades para o participante, a sua opinio em relao utilizao destas, sensaes experienciadas ao longo da utilizao e a opinio geral acerca do sistema WIP iTV. Funcionalidades
Efectuar login Utilizar teclado virtual Utilizar telecomando Entrar na aplicao Mudar de utilizador Apagar utilizador Sair da aplicao

Facilidade de utilizao
Funcionalidades gerais Muito fcil Fcil Difcil Fcil Fcil Fcil Fcil Funcionalidades das ofertas

Interesse
Muito Muito Mdio Mdio Mdio Muito Muito

Pesquisar oferta Filtrar as ofertas Ordenar as ofertas Ver info detalhada de uma oferta Candidatar-se a uma oferta

Fcil Difcil Difcil Fcil Fcil Funcionalidades das Empresas

Mdio Muito Mdio Muito Muito

Pesquisar uma empresa Filtrar empresas Ordenar empresas Ver info detalhada de uma empresa Visualizar as fotografias da empresa

Fcil Difcil Difcil Fcil Fcil

Muito Muito Mdio Muito Mdio

Tabela 5 Classificao das funcionalidades da aplicao de acordo com a facilidade de utilizao e interesse por parte dos participantes

De acordo com a tabela 5, conseguimos chegar mdia da classificao feita s funcionalidades testadas tendo por base quatro nveis. Para melhoria do actual estado da aplicao, realcemos ento as classificaes negativas:

16

Projecto WIP iTV

DeCa UA 2012

No que diz respeito filtragem e ordenao das ofertas e empresas, em mdia, os participantes consideraram a utilizao difcil, uma vez que, aspectos como confuso do estado activo/inactivo das checkboxes e as metforas correspondentes aos cones das aces referidas, constituram um obstculo na execuo da tarefa; Mais uma vez, como referido anteriormente nas grelhas de observao, o telecomando foi um factor de frustrao para a experincia, tendo em conta que este no estava em correcto funcionamento.

Figura 8 - Grfico referente aos trs principais sentimentos obtidos durante a utilizao da aplicao pelos participantes

Visto a aplicao WIP iTV ser feita para decorrer num ambiente caseiro, nos diferentes lares do pblico-alvo, a questo referente aos sentimentos obtidos tem grande impacto na compreenso da recepo desta nova aplicao. Com isto, e de acordo com as respostas recolhidas, os trs principais sentimentos foram interesse, conforto e curiosidade. Estes sentimentos vo ao encontro das nossas expectativas pois tentmos construir um ambiente positivo para a realizao dos testes, o mais aproximado possvel situao real de utilizao, e no geral, construir uma aplicao que satisfaa necessidades urgentes e da actualidade. Em relao ao sentimento de confuso, experienciado por dois dos participantes, consideramos que este est relacionado com factores como: problemas com as teclas de navegao do telecomando, confuso com o estado activo/inactivo das checkboxes e metforas dos cones filtrar e ordenar.

17

Projecto WIP iTV

DeCa UA 2012

Figura 9 Grfico relativo ao interesse dos participantes em adquirir o sistema WIP iTV

Perante a possibilidade do sistema WIP iTV se integrar no mercado televisivo, tentmos perceber qual o interesse dos participantes em adquirir o servio. Face a esta questo, 60% dos inquiridos disse que adquiria a aplicao, e 40% disse que talvez adquiria. No entanto, colocando-se a hiptese do WIP iTV ser fornecido de forma gratuita por um servio de subscrio de televiso, esses 40% passam a ser 100%, ou seja, estariam dispostos a utilizar o sistema. Ainda no que diz respeito satisfao na utilizao da aplicao, foi questionado se aconselhariam o sistema WIP iTV a outra pessoa. Todos os participantes responderam que sim, que aconselhariam, nomeadamente familiares indirectos, amigos, vizinhos e outros, com as idades compreendidas entre os 20 e os 60 anos.

18

Projecto WIP iTV

DeCa UA 2012

Opinio dos utilizadores

Achei o sistema WIP iTV fcil de usar Acho que precisaria de ajuda para utilizar o sistema Achei o sistema demasiado complexo Acho que gostaria de utilizar o sistema com frequncia Acho que as funcionalidades do sistema esto bem organizadas dentro de cada rea Acho que existe algumas funcionalidades que eram fceis de usar mas outras demasiado difceis Acho que a maior parte das pessoas aprenderia a utilizar o sistema muito rapidamente Senti-me bastante confiante ao utilizar o sistema Necessitaria de aprender muitas coisas antes de comear a usar o sistema
Tabela 6 Tabela de dados referentes usabilidade da aplicao

Mdia
Concordo Nem concordo nem discordo Discordo Concordo Concordo

Concordo

Concordo totalmente Concordo Discordo

No que diz respeito apenas usabilidade da aplicao, importante compreendemos o que os participantes acharam relativamente utilizao da mesma. Tendo por base os dados da tabela 6, em mdia e de forma sucinta, os utilizadores consideraram o sistema WIP iTV fcil de utilizar sem grandes complexidades, afirmando apenas que existem ainda algumas funcionalidades que constituem alguma dificuldade, que depreendemos ser resultados dos factores j enunciados anteriormente.

19

Projecto WIP iTV

DeCa UA 2012

Figura 10 Grfico relativo aos benefcios do sistema WIP iTV

De forma a compreender se os objectivos da aplicao foram realmente transmitidos aos participantes durante a utilizao da aplicao, foi importante question-los dos benefcios/vantagens da mesma. Assim, e de acordo com os dados recolhidos e apresentados na figura 10, 100% considerou que duas das vantagens o acesso personalizado informao da sua preferncia, bem como o facto de ser um sistema que est ligado a mais duas plataformas, nomeadamente web e mobile. De seguida, 80% considerou ser vantajoso existir detalhe na informao acerca de uma oferta de emprego bem como a da respectiva empresa. Com 60%, os inquiridos consideraram importante o facto de os amigos/subscritores poderem recomendar ofertas de emprego. Por fim, 40% surge como benefcio para os participantes as possibilidade de procurar emprego sem sair do seu sof. Com estes dados, podemos verificar que o objectivo do grupo WIP iTV est a ser cumprido de acordo com o estipulado inicialmente. Comentrios/sugestes Atravs da questo aberta colocada no questionrio final, os comentrios realizados resumem-se melhoria do telecomando ou das suas teclas de navegao. 2.1 Bugs encontrados e possveis solues: Aps efectuada a anlise aos testes de usabilidade efectuados, -nos possvel detectar um conjunto de problemas que, ao serem resolvidos, iro melhorar a experincia dos nossos utilizadores finais. importante referir que alguns dos bugs foram detectados por elementos desvinculados aos participantes definidos para a elaborao dos testes. Como mtodo
20

Projecto WIP iTV

DeCa UA 2012

de planeamento para os testes, o grupo pediu a alguns elementos do projecto Filgud (http://filgud.blogs.ua.sapo.pt/) para efectuarem pr-testes de forma a verificarmos se estvamos realmente preparados. Ao longo dos pr-testes, foram encontrados erros que se vieram a confirmar aquando dos testes de usabilidade. Para isso, foi elaborada uma lista com esses mesmos problemas com a devida correco, a sua priorizao e origem, para que se distinga a situao cujo bug foi detectado. Prioridade 1 Descrio Alterao grfica do preenchimento das checkboxes Alterar metfora do boto Filtrar Alterar metfora do boto Ordenar Colocar o Rating no ecr Mais informao, no perfil das empresas, uma vez que no local actual dificulta a navegao Criar um boto Ofertas no perfil das empresas para visualizar as ofertas da empresa respectiva Adicionar o sector das empresas na lista das mesmas Alterao da informao correspondente ao local das ofertas para o nome da empresa (lista de ofertas) Alterao do Candidatar mais tarde para Remover candidatura, caso j tenha sido submetida anteriormente Origem Filgud/ Testes de usabilidade Testes de usabilidade Testes de usabilidade Calendarizao 07-06-2012 Correco

2 3

07-06-2012 07-06-2012

Testes de usabilidade

07-06-2012

Testes de usabilidade

07-06-2012

Testes de usabilidade

07-06-2012

Filgud

07-06-2012

Filgud

07-06-2012

21

Projecto WIP iTV

DeCa UA 2012

Alterao do feedback visual da aco Ordenar para mudana de cor, invs de variao de visibilidade Alterao do boto Restaurar para Limpar Alinhar a caixa da Galeria de fotografias de modo a que corresponda ao boto de Voltar

Testes de usabilidade

08-06-2012

10

Testes de usabilidade Testes de usabilidade

08-06-2012

11

08-06-2012

Tabela 7 - Bugs encontrados ao longo dos testes e as respectivas correces

Com o quadro anterior, nos possvel perceber que existem um conjunto de problemas detectados ao longo dos testes que devem ser corrigidos para uma experincia de utilizao agradvel e com o mnimo esforo cognitivo e fsico. Pode-se tirar assim as seguintes concluses mais relevantes: Uma das questes essenciais na aplicao est relacionada com a seleco de mltiplas opes para escolha, por exemplo, dos distritos e categorias a filtrar nos vrios ecrs correspondentes lista das ofertas e das empresas. A cor que estava a ser utilizada para os estados destas checkboxes (azul para seleccionada e branco para desseleccionada) no permitiu aos vrios participantes fazer essa mesma distino, sendo um problema grave pois pode levar a que o utilizador final tenha receito de efectuar qualquer alterao durante a utilizao da aplicao, sendo esse um factor de afastamento dos mesmos. Para isso o grupo encontrou uma soluo, tambm referida pelo grupo Filgud, que consiste na alterao dessas mesmas cores. Assim, sempre que a checkbox esteja preenchida, esta ir ser representada com um fundo e border branco, ficando mais realado. No caso de estar desseleccionada, o fundo ir estar transparente, dando uma sensao de vazio que representa melhor este estado; Aquando da tarefa que correspondia filtragem das ofertas por uma determinada categoria, os utilizadores tiveram alguma dificuldade em perceber qual dos cones representaria essa mesma aco, acabando por descobrir a correcta simplesmente pelo facto de percorrerem os vrios cones, por curiosidade prpria, e pelo feedback textual (tools tips). A mesma situao aplicou-se ao boto Ordenar, uma vez que este se confundia com a funo de Filtrar. Dessa forma, o grupo procedeu alterao das metforas de ambos os botes, pelo que o boto de Filtrar assemelha-se a um funil, aproximando22

Projecto WIP iTV

DeCa UA 2012

se de certa forma da representao da funo correspondente. J a metfora correspondente ordenao foi alterada para duas setas, sendo que cada uma ir estar direccionada para sentidos opostos na vertical; Uma outra questo preocupou o grupo no que diz respeito navegao no ecr do perfil das empresas. O principal problema corresponde localizao das opes de rating, uma vez torna a navegao mais confuso quando esto disponveis os vdeos ou as fotografias da empresa, pois, sabendo que o rating localiza-se ao mesmo nvel das mesmas, induz o utilizador a navegar at ao rating, percorrer todas as estrelas e depois seleccionar uma das fotografias ou vdeos. Para evitar este problema, o grupo alterou o posicionamento do rating, estando este disponvel apenas na visualizao de Mais informao, relativa empresa em questo. Assim a navegao tornase menos frustrante e mais organizada; Alguns utilizadores, quando lhes era pedido para pesquisarem uma oferta de determinada empresa, recorriam ao ecr da lista das empresas para procurarem a empresa respectiva e posteriormente acederem s ofertas da mesma, ou seja, no era imediatamente perceptvel que estes, no ecr das ofertas, poderiam pesquisar uma determinada oferta tendo em conta o nome da empresa. Uma possvel soluo para este problema consiste na utilizao de um boto no perfil das empresas que permita um redireccionamento para as vrias ofertas da respectiva empresa. No entanto, o grupo ainda ter que analisar esta opo com mais algum detalhe, uma vez que esta soluo implicaria um ciclo infinito no que respeita navegao, uma vez que esta nunca teria um final pelo facto de estar constantemente disponvel a opo de visualizao da empresa ao aceder aos detalhes de determinada oferta. Aps efectuada a aco de Filtrar, a prxima tarefa dos participantes dos testes seria a de limpar ou eliminar a aco que tinha sido efectuada. Para esse efeito estava disponvel um boto representado pela palavra Restaurar, levando o utilizador a induzir que o mesmo restaurava a lista para o estado inicial. No entanto, esta nomenclatura no foi esclarecedora para a maioria dos participantes, pelo que se tornava um grave problema caso o utilizador queira eliminar as aces disponveis. A soluo para este problema bastante simples, sendo necessria a alterao do Restaurar para Limpar, sendo esta ltima a proposta feita pelos participantes que se queixaram.

23

Projecto WIP iTV

DeCa UA 2012

.Anexos
Anexo 1 Questionrio inicial

24

Projecto WIP iTV

DeCa UA 2012

25

Projecto WIP iTV

DeCa UA 2012

26

Projecto WIP iTV

DeCa UA 2012

27

Projecto WIP iTV

DeCa UA 2012

Anexo 2 Questionrio final

28

Projecto WIP iTV

DeCa UA 2012

29

Projecto WIP iTV

DeCa UA 2012

30

Projecto WIP iTV

DeCa UA 2012

31

Projecto WIP iTV

DeCa UA 2012

32

Projecto WIP iTV

DeCa UA 2012

Anexo 3 Grelha de observao

33