Pular para conteúdo

Planejamento da Avaliação do Protótipo de Alta Fidelidade

Histórico de Versão

Data de Realização Data Prevista de Revisão Versão Descrição Autor Revisor
05/01/2023 06/01/2023 1.0 Criação do planejamento Ana Luiza Eduardo
25/01/2023 25/01/2023 1.1 Padronização e Revisão Final João Lucas Thiago Olveira

Introdução

Sistemas interativos de qualidade precisam passar por avaliações de interação humano-computador para obter informações sobre o grau de satisfação das necessidades dos usuários. Com a realização da avaliação, é possível promover a identificação de problemas de capazes de prejudicar a interação do usuário com o sistema.

Cronograma

Será seguido um cronograma para realizar as atividades que serão apresentadas; a quantidade de usuários avaliados será 3, todos usuários reais, além da realização do teste piloto com um integrante da equipe. Esse número se mostra o suficiente para representar usuários com diferentes visões do Simples Nacional e, com base em Krug (2000), com 3 ou 4 usuários a maior parte dos problemas pode ser detectada, sendo possível fazer a análise no mesmo dia.

Confira na tabela 1 abaixo o horário, local e participantes.

Data Hora Local Avaliador Usuário Avaliação
16/06/2023 16:00 Online - Microsoft Teams Pedro, Eduardo Thiago Teste Piloto
17/01/2023 19:00 Presencial - a definir Pedro, Thiago Renan Teste de Usabilidade
18/01/2023 20:00 Online - Microsoft Teams Thiago, Pedro Nicolas Teste de Usabilidade
18/01/2023 21:00 Online - Microsoft Teams Thiago, Pedro Guilherme Teste de Usabilidade

Tabela 1 - Cronograma das avaliações

Protótipo de Alta Fidelidade

Um protótipo de alta fidelidade requer materiais que você espera encontrar no produto final, assim, esse protótipo é semelhante ao produto finalizado. Além disso, ele é útil para vender ideias e para testar questões mais técnicas. Nesse projeto, utiliza-se a prototipação vertical, pois ela promove o maior detalhamento de poucas funções e, como o Simples Nacional apresenta serviços muito semelhantes, esse tipo de prototipação se mostra ideal para representar o site.

A utilização desse tipo de prototipagem possui benefícios como: apresentação de funcionalidades completas, é totalmente interativo, define claramente o esquema de navegação e é utilizado como ferramenta de venda e marketing.

A confecção do protótipo de alta fidelidade se deu em algumas etapas que podem ser conferidas na tabela 2 abaixo.

Data Descrição Responsáveis Revisores
06/01/2023 Decidir tarefas abordadas no Protótipo de Alta Fidelidade Thiago, João, Ana, Eduardo Arthur, Pedro
13/01/2023 Confecção do Protótipo de Alta Fidelidade João Ana, Thiago
14/01/2023 Adaptações com base no feedback dos revisores João Arthur, Pedro

Tabela 2 - Planejamento do Protótipo de Alta Fidelidade


No protótipo de alta fidelidade, tem-se 2 tarefas disponíveis para serem realizadas: ativar débito automático e solicitar restituição; essas tarefas podem ser conferidas aqui. O usuário do Simples Nacional irá interagir com o protótipo a partir das instruções do avaliador, seguindo um caminho pré-definido e comentando em voz alta o que passa em sua mente durante a realização das tarefas.

Metodologia

O Framework DECIDE [1] será utilizado na montagem do planejamento, visto que ele propõe uma boa opção de estruturação de avaliações, seguindo as definições do acrônimo. Confira abaixo os tópicos inclusos no DECIDE.

  • Determine: deve-se determinar (determine) os objetivos da avaliação;
  • Explore: deve-se explorar (explore) as perguntas que serão respondidas;
  • Choose: deve-se escolher (choose) os métodos de avaliação que serão utilizados;
  • Identify: deve-se identificar (identify) e administrar as questões práticas;
  • Decide: deve-se decidir (decide) como lidar com as questões do Identify;
  • Evaluate: deve-se avaliar (evaluate), interpretar e apresentar os dados coletados.

O método de avaliação escolhido para lidar com o protótipo de alta fidelidade foi o teste de usabilidade, uma forma de avaliação por observação. Esse método irá promover dados a partir do ponto de vista do usuário.

O teste de usabilidade por sua vez, tem como objetivo principal melhorar a facilidade de uso de um produto. A partir dele, é possível ver se as pessoas realmente compreendem o design da forma como era esperado. Além disso, durante um processo de desenvolvimento, quanto mais cedo os testes forem aplicados, menores serão os custos e melhores serão os resultados.

Características do teste de usabilidade

Testes de usabilidade compartilham, por padrão, 5 características:

  1. Objetivo principal;
  2. Os participantes representam usuários reais;
  3. Os participantes representam tarefas reais;
  4. É observado e registrado o que os participantes fazem;
  5. Os dados são analisados para diagnosticar problemas reais e propor recomendações para consertar os problemas identificados.

O desempenho do usuário será avaliado de acordo com o número de erros e o tempo necessário para realizar cada tarefa.

Processo de condução

O teste piloto requer as seguintes etapas para ser conduzido:

  1. Site: Simples Nacional (protótipo que reformula o design original, propondo melhorias de usabilidade);
  2. Script do teste: apresentado no presente documento;
  3. Local: o usuário e o avaliador devem estar em salas silenciosas com boa conexão à internet e devem possuir bons microfones. De preferência, deve-se deixar a câmera aberta durante o uso do protótipo. Será utilizada a plataforma Microsoft Teams para isso e apenas as pessoas requisitadas estarão presentes na reunião;
  4. Teste Piloto: será realizado em breve e estará presente aqui;
  5. Recrutamento do usuário: os usuários recrutados podem ser conferidos no cronograma desse documento;
  6. Condução do teste;
  7. Análise dos resultados: foca em revisar problemas encontrados, priorizar problemas baseados em frequência e severidade, identificar possíveis soluções;
  8. Correção do site: fazer as alterações necessárias e testar novamente. [2]

Objetivos

Os principais pontos a serem avaliados, seguindo o modelo proposto pelo DECIDE, são:

  • Apropriação de tecnologia pelos usuários;
  • Ideias e alternativas de design;
  • Conformidade com um padrão;
  • Problemas na interação e na interface.

Tarefas

Os usuários deverão realizar uma tarefa, sendo ela "ativar débito automático". Para isso, haverão alguns passos a serem seguidos.

A1: Ativar Débito Automático

Dados necessários:

  • CNPJ;
  • CPF do responsável;
  • Código de acesso;
  • Dados de pagamento.

Caminho a ser seguido:

  1. Acessar a página inicial do Simples Nacional;
  2. Clicar em "Ver Serviços", no card explicativo sobre o SIMEI;
  3. Escolher "Código de Acesso" como modo de login;
  4. Realizar login;
  5. Selecionar a opção "Débito automático";
  6. Selecionar a opção "Ativar débito automático"
  7. Preencher dados de cobrança;
  8. Confirmar formulário;
  9. Clicar no check de confirmação final.

A2: Solicitar Restituição

Dados necessários:

  • CNPJ;
  • CPF do responsável;
  • Código de acesso;
  • Dados de pagamento.

Caminho a ser seguido:

  1. Acessar a página inicial do Simples Nacional;
  2. Clicar em "Ver Serviços", no card explicativo sobre o SIMEI;
  3. Escolher "Código de Acesso" como modo de login;
  4. Realizar login;
  5. Selecionar a opção "Restituição";
  6. Selecionar a opção "Solicitar Restituição";
  7. Inserir dados necessários para encontrar o documento a ser restituído;
  8. Preencher valor de restituição e dados para pagamento;
  9. Confirmar formulário;
  10. Clicar no check de confirmação final.

Vale lembrar que o protótipo de alta fidelidade possui semelhanças com o de baixa fidelidade, porém seu intuito é apresentar melhorias com base nos primeiros feedbacks dos usuários.

Método de Avaliação

O teste de usabilidade foi escolhido como método de avaliação adequado para o Protótipo de Alta Fidelidade. Esse método será realizado por meio da plataforma Microsoft Teams ou, caso possível, de forma presencial e possui a participação de 3 pessoas, sendo um usuário e dois observadores.

Para iniciar a avaliação, o avaliador deverá apresentar ao usuário um termo de consentimento e aplicar um questionário inicial; em seguida e caso o termo seja aceito, será apresentada a proposta do projeto, o protótipo e as tarefas a serem realizadas; o avaliador irá observar o comportamento do usuário e, por fim, irá realizar um questionário pós-teste. Haverá também um tempo extra para que o usuário faça comentários a respeito de problemas e sugestões de melhorias sobre o protótipo e suas atividades.

Durante o teste de usabilidade, serão registrados dados relacionados à experiência dos participantes na realização das tarefas designadas, assim como seus pensamentos expostos em palavras.

Os questionários serão desenvolvidos no Microsoft Forms e podem ser conferidos nas tabelas 3 e 4 a seguir.

Avaliadores designados: Pedro, Arthur, Eduardo

ID Descrição
01 Você (usuário) está de acordo com o termo de consentimento apresentado?
02 Você (usuário) se sente bem para realizar o teste de usabilidade?
03 Qual o seu nível escolaridade?
04 Quantos anos o sr(a). tem?
05 Já precisou de algum tipo de ajuda para utilizar o sistema?
06 Você (usuário) utiliza o Simples Nacional com qual frequência?
07 Você (usuário) acredita que o site atual tem um design agradável?
08 Você (usuário) acredita que o site atual é intuitivo?
09 Você (usuário) possui necessidades e/ou desejos não atendidos pelo site atual?
10 Você (usuário) encontra obstáculos durante o uso do site atual?
11 Você (usuário) possui acesso a internet e dispositivos compatíveis com o site?
12 Qual parte do sistema atual mais te agrada? E qual mais te desagrada?
13 Em sua opinião, o site atual possui um bom suporte ao usuário? Por quê?
14 Você (usuário) consegue atingir seus objetivos?
15 Você (usuário) tem alguma sugestão de melhoria relacionada ao site atual?

Tabela 3 - Questionário pré-teste

Avaliadores designados: Pedro, Arthur, Eduardo

ID Descrição Objetivo
01 O protótipo apresenta tarefas condizentes com a realidade? Verificar a conformidade com um padrão
02 O protótipo apresenta uma sequência de tarefas condizente com a realidade? Verificar a conformidade com um padrão
03 De que maneira o usuário utiliza o sistema? Em que difere do planejado? Analisar a apropriação da tecnologia
04 O quanto os usuários são motivados a explorar novas funcionalidades? Analisar a apropriação da tecnologia
05 Quais são os pontos fortes e fracos do sistema, na opinião dos usuários? Analisar a apropriação da tecnologia
06 Os objetivos dos usuários podem ser alcançados facilmente através do sistema? Quais necessidades e desejos foram ou não atendidos? Analisar a apropriação da tecnologia
07 O que é possível modificar no sistema interativo para adequá-lo melhor ao ambiente de trabalho? Analisar a apropriação da tecnologia
08 A tecnologia disponível pode oferecer maneiras mais interessantes ou eficientes de os usuários atingirem seus objetivos? Analisar a apropriação da tecnologia
09 Há alternativas de design mais eficientes? Mais fáceis de aprender? Comparar ideias e alternativas de design
10 (Caso a pergunta 09 seja respondida) Qual das alternativas de design (a versão atual do site ou a proposta no protótipo) os usuários preferem? Por quê? Comparar ideias e alternativas de design
11 O usuário consegue operar o sistema? Identificar problemas na interação e interface
12 Que parte da interface e da interação deixa o usuário insatisfeito? Identificar problemas na interação e interface
13 O usuário entende para que serve cada elemento de interface? Identificar problemas na interação e interface
14 Ele atinge seu objetivo? Com quanta eficiência? Em quanto tempo? Após cometer quantos erros? Identificar problemas na interação e interface
15 Que problemas de IHC dificultam ou impedem o usuário de alcançar seus objetivos? Identificar problemas na interação e interface

Tabela 4 - Questionário pós-teste

Aspectos Éticos

Para deixar claro o objetivo e os procedimentos a serem realizados nesta avaliação, será utilizado o Termo de Consentimento. O termo de consentimento será devidamente adaptado para conter as informações relacionadas ao tema Protótipo de Papel e foi elaborado levando em consideração os Aspectos Éticos para garantir o bem estar e o respeito ao voluntário participante.

Interpretação

A interpretação é um tópico subjetivo e muito variável, não havendo um método fixo para realizá-la. Apesar disso, para guiar o avaliador, foram sugeridos alguns tópicos que devem ser refletidos durante a interpretação dos resultados, são eles:

  • O usuário apresentou reações mais positivas ou negativas? Por quê?
  • O usuário estava confortável e atento à tarefa que deveria realizar?
  • As respostas do questionário apresentam um bom alinhamento de ideias?
  • As respostas foram diretas ou subjetivas? Houveram muitas histórias contadas pelo usuário durante as respostas?
  • Ainda de acordo com as respostas, pode-se concluir que o usuário tem uma boa relação com o Simples Nacional?

Avaliação dos Resultados

Os resultados obtidos a partir das avaliações propostas no cronograma serão analisados como disposto no documento de Planejamento do Relato de Resultados. A partir dos resultados relatados, serão implementadas melhorias no protótipo de alta fidelidade para que ele atenda ao máximo os desejos e necessidades dos usuários finais.

Bibliografia

[2] BARBOSA, SIMONE DINIZ JUNQUEIRO; SILVA, BRUNO SANTANA DA , Interação Humano-Computador, 1ª Edição, Editora Campus, 2010