Planejamento da Avaliação dos Protótipos de Alta Fidelidade
Introdução
A avaliação de Interação Humano-Computador (IHC) é uma etapa essencial no desenvolvimento de sistemas interativos, pois permite julgar a qualidade de uso da solução e identificar problemas na interação e interface que possam comprometer a experiência do usuário. Essa atividade orienta o processo de melhorias, garantindo que o sistema atenda às necessidades específicas dos usuários e promova uma interação eficiente e satisfatória (Barbosa, 2021)1. Dessa forma, no que tange ao desenvolvimento de um protótipo de alta fidelidade, é necessário planejar a avaliação do mesmo, a fim de garantir que a solução proposta atenda aos requisitos de usabilidade e experiência do usuário.
Objetivo
Este documento tem como objetivo apresentar o planejamento da avaliação do protótipo de alta fidelidade, descrevendo as etapas, métodos e técnicas que serão utilizados para avaliar a interação e a interface do site proposto.
Metodologia
A metodologia adotada para a avaliação segue o modelo do framework DECIDE (Barbosa, 2021)2, uma abordagem estruturada que organiza o processo de avaliação em seis etapas principais: (D) determinar os objetivos da avaliação, (E) explorar perguntas a serem respondidas, (C) escolher os métodos de avaliação, (I) identificar e administrar questões práticas, (D) decidir como lidar com questões éticas, e, por fim, (E) avaliar, interpretar e apresentar os dados. Essa metodologia permite um planejamento claro e detalhado, garantindo que a avaliação aborde tanto alternativas de design quanto a identificação de problemas na interação e interface.
D - Determinar os objetivos da avaliação de IHC
Os objetivos dessa avaliação são necessários para direcionar quais pontos do protótipo de alta fidelidade precisam melhorar, visto que ele está mais próximo do que é o produto final a ser entregue. Os objetivos definidos para essa avaliação são os definidos por Barbosa (2021)4:
-
O primeiro objetivo é explorar diferentes alternativas de design, identificando qual delas proporciona uma melhor experiência de interação, levando em consideração aspectos como clareza, eficácia e satisfação do usuário.
-
O segundo objetivo relaciona-se em buscar conformidade com um padrão, ou seja, verificar se o protótipo de alta fidelidade atende aos padrões de usabilidade e acessibilidade estabelecidos, garantindo que a solução proposta seja eficiente e acessível para todos os usuários.
-
O terceiro objetivo busca identificar problemas na interação e na interface, como pontos de confusão, erros de navegação ou inconsistências na interface do protótipo, para garantir uma experiência de uso mais fluida e eficiente.
E - Explorar perguntas a serem respondidas com a avaliação
Baseando-se nos objetivos da avaliação, as perguntas a serem respondidas com a avaliação do protótipo de alta fidelidade foram definidas e adaptadas com base na tabela de exemplos de perguntas de avaliação de IHC proposta por Barbosa (2021)3. Essas perguntas são essenciais para a operacionalização do processo de avaliação, permitindo que se faça um julgamento de valor sobre os aspectos analisados. As perguntas definidas para a avaliação do protótipo de alta fidelidade são:
Tabela 1 - Roteiro de perguntas para Avaliação do Protótipo de Alta Fidelidade
| Objetivo | Pergunta | Resposta |
|---|---|---|
| Ideias e Alternativas de Design | 1. Qual das alternativas de design do protótipo de alta fidelidade é mais eficiente e fácil de aprender? | |
| Ideias e Alternativas de Design | 2. Qual alternativa de design os usuários preferem? Por quê? | |
| Ideias e Alternativas de Design | 3. Qual alternativa de design se espera que tenha um impacto negativo menor ao ser adotada? | |
| Conformidade com um padrão | 4. O site está de acordo com os padrões de acessibilidade do W3C? | |
| Conformidade com um padrão | 5. Os termos na interface seguem convenções estabelecidas no domínio? | |
| Conformidade com um padrão | 6. A interface segue algum padrão pré-estabelecido? | |
| Problemas na Interação e Interface | 7. Os usuários conseguem operar o protótipo de alta fidelidade? Eles atingem seus objetivos de maneira eficiente? Com que frequência cometem erros? | |
| Problemas na Interação e Interface | 8. Que parte da interface do protótipo de alta fidelidade deixa os usuários insatisfeitos ou causa confusão? | |
| Problemas na Interação e Interface | 9. Os usuários entendem claramente o que cada elemento do protótipo de alta fidelidade significa e o que devem fazer em seguida? |
Autor(es): Paulo Henrique, Rodrigo Wendrel
C - Escolher os métodos de avaliação a serem utilizados
Para a avaliação do protótipo de alta fidelidade, serão utilizados três métodos principais: entrevista semiestruturada em conjunto com teste de usabilidade, esse definido por José Rosa (2010)5 e avaliação heurística.
A entrevista semiestruturada será utilizada para avaliar o aspecto da apropriação da tecnologia. Esse método permitirá captar dados qualitativos importantes sobre a usabilidade, a compreensão do protótipo e as motivações para sua adoção ou rejeição.
Já o teste de usabilidade será empregado para avaliar a eficácia, eficiência e satisfação do usuário ao interagir com o protótipo de alta fidelidade. Esse método permitirá identificar problemas na interação e interface, bem como avaliar a experiência do usuário ao utilizar o site proposto. Nesse tipo de teste, o foco está no comportamento obserável do usuário, permitindo identificar problemas de usabilidade e interação6.
Da avaliação heurística, por outro lado, será empregada para avaliar os objetivos definidos. Essa análise ajudará a identificar falhas de design que podem comprometer a eficiência, a satisfação e a experiência do usuário com o protótipo de alta fidelidade.
Ambos os métodos foram escolhidos por serem complementares e manter uma eficácia na obtenção de feedback detalhado e qualitativo, explorando profundamente a dinâmicas de uso do protótipo de alta fidelidade..
I - Identificar e administrar as questões práticas da avaliação
A identificação e administração das questões práticas são fundamentais para garantir que a avaliação do protótipo ocorra de forma eficiente, respeitando as limitações de recursos, tempo e logística. A seguir, são detalhadas as questões práticas relacionadas ao planejamento do teste, organização dos materiais, preparação do local, recrutamento de usuários, condução do teste, análise de reultados e correção do site, segundo Badre (2002).
Recrutamento
Os participantes serão selecionados com base no perfil de usuário definido durante a análise de requisitos, priorizando indivíduos que representem o público-alvo do protótipo. Para Krug, com três ou quatro participantes a maioria dos problemas é detectada. Portanto para os testes de usabilidade serão selecionados 3 participantes.
Preparação
A preparação para a avaliação do protótipo de alta fidelidade envolve a organização dos materiais e recursos necessários para os dois métodos de avaliação: a entrevista semiestruturada e a avaliação heurística.
Entrevista Semiestruturada:
Ferramentas: Notebook para gravação do audio, vídeo e captura da tela;
Materiais: Protótipos de alta fidelidade e roteiros de avaliação, no qual será especificada por cada membro da equipe a serem realizadas;
Ambiente: A entrevista ocorrerá presencialmente em local combinado com os participantes ou, em último caso, de forma remota;
Avaliação Heurística:
Ferramentas: computador para redigir o relatório/relato dos resultados;
Materiais: Lista de princípios heurísticos;
Ambiente: A avaliação será realizada em um ambiente controlado e silencioso para garantir que o avaliador possa se concentrar na análise do protótipo sem distrações;
Prazos
A avaliação será realizada conforme cronograma a ser definido, considerando a disponibilidade dos participantes e dos entrevistadores. As avaliações serão realizadas posteriormente ao teste piloto.
Tabela 2 - Cronograma da Entrevista
| Entrevistador | Entrevistado(a) | Horário Início | Horário Fim | Data | Local |
|---|---|---|---|---|---|
| Weverton Rodrigues | Richard | 17:00 | 17:15 | 23/01/2025 | Faculdade do Gama |
| Weverton Rodrigues | Moysés | 17:00 | 17:15 | 23/01/2025 | Faculdade do Gama |
| Weverton Rodrigues | José | 17:00 | 17:15 | 23/01/2025 | Faculdade do Gama |
| Rodrigo Wendrel | Richard | 13:00 | 13:30 | 23/01/2025 | Faculdade do Gama |
| Rodrigo Wendrel | Moysés | 13:00 | 13:30 | 23/01/2025 | Faculdade do Gama |
| Rodrigo Wendrel | José | 13:00 | 13:30 | 23/01/2025 | Faculdade do Gama |
| Paulo Henrique | Igor | 10:00 | 10:20 | 23/01/2025 | Faculdade do Gama |
| Paulo Henrique | Ana | 10:00 | 10:20 | 23/01/2025 | Faculdade do Gama |
| Paulo Henrique | Cauã | 10:00 | 10:20 | 23/01/2025 | Faculdade do Gama |
| Necivaldo Amaral | Igor | 10:00 | 10:20 | 23/01/2025 | Faculdade do Gama |
| Necivaldo Amaral | Ana | 10:00 | 10:20 | 23/01/2025 | Faculdade do Gama |
| Necivaldo Amaral | Cauã | 10:00 | 10:20 | 23/01/2025 | Faculdade do Gama |
Autor: Rodrigo Wendrel
Os entrevistadores deverão garantir que os materiais estejam prontos com antecedência e que os participantes sejam contatados para confirmar o horário agendado.
D - Decidir como lidar com as questões éticas
Tendo como base o termo de consentimento geral, os participantes serão informados sobre a natureza da avaliação, os objetivos da pesquisa, os procedimentos envolvidos, os riscos e benefícios, a garantia de anonimato e confidencialidade, e a liberdade de retirar o consentimento a qualquer momento. Dessa forma, o termo de consentimento será lido pelo entrevistador no início da gravação da entrevista. Além disso, será assegurado que os dados coletados serão utilizados apenas para fins de pesquisa e que a gravação dos participantes serão utilizadas apenas para propósito da pesquisa.
E - Avaliar, interpretar e apresentar os dados
A avaliação dos dados coletados será conduzida de acordo com as etapas descritas no documento Planejamento do Relato do Protótipo de Alta Fidelidade.
Os dados das entrevistas semiestruturadas e da avaliação heurística serão organizados, codificados e analisados para identificar padrões, dificuldades e oportunidades de melhoria. Os resultados serão apresentados de forma estruturada, destacando problemas encontrados, sugestões de melhoria e lições aprendidas, com base nas análises dos feedbacks dos participantes e dos problemas de interface identificados.
Planejamento do Teste Piloto
O teste piloto consiste em uma execução prévia da avaliação, com o objetivo de validar o planejamento e identificar possíveis problemas nos métodos, materiais e equipamentos utilizados. Essa etapa garante que ajustes possam ser feitos antes da aplicação final, assegurando a qualidade e a eficácia dos dados coletados.
Detalhes:
- Data 23/01/2025
- Horário 12:00
- Integrantes responsáveis: Paulo Henrique, Necivaldo Amaral e Weverton Rodrigues
- Local: Faculdade do Gama
Resultado do Teste Piloto
O teste piloto foi realizado com sucesso, sendo possível identificar pontos de melhoria no planejamento da avaliação. Os participantes conseguiram interagir com o protótipo de alta fidelidade, fornecendo feedbacks valiosos sobre a usabilidade e a experiência de uso. Com base nos resultados do teste piloto, foram feitos ajustes no roteiro de avaliação, nos materiais e nos procedimentos, garantindo que a avaliação final seja realizada de forma eficiente e eficaz. O único ponto de melhoria identificado foi o entrevistador perguntar se o entrevistado tem algum feedback sobre o protótipo. Segue a gravação do teste piloto:
Referências Bibliográficas
- BARBOSA, Simone Diniz Junqueira et al. Interação humano-computador e experiência do usuário. 1. ed. Rio de Janeiro: Simone Diniz Junqueira Barbosa, 2021. Capítulo 11: Planejamento da Avaliação de IHC. Página 261. Autopublicação. ISBN: 978-65-00-19677-1.
- BARBOSA, Simone Diniz Junqueira et al. Interação humano-computador e experiência do usuário. 1. ed. Rio de Janeiro: Simone Diniz Junqueira Barbosa, 2021. Capítulo 11: Planejamento da Avaliação de IHC. Páginas 279-280. Autopublicação. ISBN: 978-65-00-19677-1.
- BARBOSA, Simone Diniz Junqueira et al. Interação humano-computador e experiência do usuário. 1. ed. Rio de Janeiro: Simone Diniz Junqueira Barbosa, 2021. Capítulo 11: Planejamento da Avaliação de IHC. Páginas 266-267. Autopublicação. ISBN: 978-65-00-19677-1.
- BARBOSA, Simone Diniz Junqueira et al. Interação humano-computador e experiência do usuário. 1. ed. Rio de Janeiro: Simone Diniz Junqueira Barbosa, 2021. Capítulo 11: Planejamento da Avaliação de IHC. Páginas 264. Autopublicação. ISBN: 978-65-00-19677-1.
- ROSA, José Guilherme Santa. Avaliação e Projeto No Deisng de Interfaces. 1. ed. Rio de Janeiro: Elsevier, 2010. Capítulo 8: Teste de Usabilidade. Páginas 144-180.
- ROSA, José Guilherme Santa. Avaliação e Projeto No Deisng de Interfaces. 1. ed. Rio de Janeiro: Elsevier, 2010. Capítulo 8: Teste de Usabilidade. Página 144.
Histórico de Versão
| Versão | Data | Autor(es) | Descrição | Data de Revisão | Revisor(es) |
|---|---|---|---|---|---|
| 1.0 | 13/01/2025 | Paulo Henrique | Criação do documento | 13/01/2025 | Rodrigo Wendrel |
| 1.1 | 14/01/2025 | Rodrigo Wendrel | Adição dos tópicos decide | 14/01/2025 | Paulo Henrique |