Pular para conteúdo

Planejamento da Avaliação do Storyboard

Introdução

Storyboard é um exemplo de protótipo de baixa fidelidade e pode ser utilizado em conjunto com cenários. O storyboard consistem em uma série de desenhos que ilustram como um usuário pode progredir em uma funcionalidade utilizando o produto/sistema que está sendo desenvolvido.

Objetivo

Esse artefato busca documentar um roteiro claro e detalhado para a avaliação do storyboard, seguindo as diretrizes do framework DECIDE. Serão identificados os aspectos-chave a serem avaliados, definindo os métodos e técnicas a serem empregados durante o processo de avaliação. Com essa avaliação, busca-se garantir que o storyboard represente adequadamente a estrutura e o fluxo de interação previstos, além de atender às necessidades e expectativas dos usuários.

Metodologia

Para a avaliação do sotryboard, será utilizado o framework DECIDE, elaborado por Preece et al. (2002) para orientar o planejamento, a execução e a análise de uma avaliação de IHC. Esse framework abrange as seguintes etapas:

  • D Definir os objetivos da avaliação;
  • E Explorar as perguntas a serem respondidas;
  • C (Choose) Escolher os métodos de avaliação;
  • I Identificar questões práticas;
  • D Decidir como lidar com questões éticas;
  • E (Evaluate) Avaliar os dados.

D - Definir

O objetivo da análise será avaliar a apropriação de tecnologia pelos usuários, buscando entender o contexto que o sistema avaliado se insere, necessidades e objetivos do usuário e como ele costuma alcançá-los. Para isso, a avaliação buscará compreender os seguintes aspectos:

  • Histórias de são de fácil compreensão;
  • Ações executadas estão de acordo com as funcionalidades propostas;
  • Alterações necessárias no storyboard;
  • Satisfação final do usuário.

E - Explorar

Os avaliadores devem elaborar perguntas específicas para cada objetivo, que deverão ser respondidas durante a avaliação. De acordo com os objetivos citados no tópico anterior, as perguntas elaboradas estão descritas na tablea 1.

Tabela 1 - Perguntas elaboradas de acordo com os objetivos.

Pergunta Resposta

Foi fácil compreender as histórias descritas no storyboard?


As funcionalidades propostas pelo sistema estão bem representadas no storyboard?


Existe alguma coisa que ficou de fora do storyboard ou que pode ser alterada?


A satisfação final do usuário ficou clara no final do storyboard?


Fonte: Ricardo Augusto, 2024.

C - Escolher

O método de avaliação que será utilizado para avaliar o storyboard será o método de investigação, sendo guiado pelo uso de entrevistas utilizando as perguntas definidas no tópico explorar. A escolha deste método se justifica pela sua capacidade de fornecer insights qualitativos e detalhados sobre a percepção e os objetivos dos usuários.

I - Identificar

Recrutamento

Para selecionar as pessoas que irão ser chamadas para a entrevista, será levado em conta o perfil de usuário elaborado pelo grupo, de forma que as pessoas se encaixem nesse perfil. Será necessário também que todos os participantes estejam cientes e tenham aceitado o termo de consentimento, para que a entrevista esteja de acordo com os aspectos éticos.

Preparação e uso de equipamentos necessários

Serão ao todo 6 entrevistas, cada uma será guiada por um integrante do grupo e abordará o storyboard feito por esse integrante. Os entrevistadores que guiarem as entrevistas poderão fazer anotações dos comentários dos entrevistados de modo a documentar e registrar as críticas e comentários dos particiapantes.

Equipamentos para a entrevista:

  • O storyboard;
  • Questionário;
  • Termo de consentimento;
  • Equipamento de filmagem.

Prazos

Para estabelecer os prazos das avaliações dos storyboards, foi elaborado um cronograma detalhado, disponível na Tabela 2. Este cronograma foi cuidadosamente planejado para garantir que todas as etapas do processo de avaliação sejam realizadas de maneira eficiente e dentro do tempo estipulado. A consulta a esta tabela permitirá aos envolvidos acompanhar e cumprir os prazos definidos para cada fase da avaliação.

Tabela 2 - Conograma das avaliações dos storysboards.

Tarefa Entrevistador Entrevistado Horário Data Local
Calcular preços e prazos de entrega Cláudio Renato Medeiros 16:00 - 16:30 25/05/2024 A definir
Realizar compras na loja online Elias Heitor 14:00 - 14:30 24/05/2024 A definir
Emitir certificados digitais Gabriel B. Bertolazi Gabriel bevilaqua 20:00 - 20:30 27/05/2024 UnB-FGA
Realizar pré-postagem Gabriel F. J. Silva Patricio Reitter 14:00 - 14:30 29/05/2024 A definir
Gerenciar minhas importações Pablo S. Costa Matheus 12:00 - 12:30 25/05/2024 LagoBT, Lago Sul - DF
Rastrear encomendas Ricardo Johnny Lopes 14:00 - 14:30 29/05/2024 A definir

Fonte: Pablo S. Costa, 2024.

D - Decidir

Para garantir uma pesquisa íntegra e responsável, nos basearemos nos princípios éticos estabelecidos no documento Aspectos Éticos. O termo de consentimento, elaborado na seção homônima, será utilizado para obter autorização dos participantes para as atividades necessárias à criação deste artefato. O respeito aos participantes é fundamental, tanto durante quanto após a pesquisa. Para mais detalhes sobre o processo de consentimento, consulte o documento referente à entrevista, onde todas as etapas do procedimento estão descritas minuciosamente.

E - Avaliar

Após a realização da avaliação, os dados serão documentados e tratados, levando em consideração o contexto em que foram produzidos. Avaliaremos se esses dados possuem alto grau de confiabilidade e se podem ser generalizados para representar a população de usuários do site.

O processo de documentação e tratamento dos dados envolve registrar problemas e dificuldades encontrados durante a interação com o site. Esses problemas podem incluir questões de usabilidade, funcionalidades ausentes e problemas de desempenho. Serão anotadas as descrições dos problemas, sua classificação, sugestões de melhoria e o feedback do usuário.

Ao final das entrevistas, serão documentadas as observações gerais relacionadas à entrevista realizada. Essas observações podem fornecer insights valiosos para o desenvolvimento do projeto.

Uma vez concluída essa etapa, os dados serão apresentados à equipe de desenvolvimento, buscando obter o máximo de informações relevantes para o desenvolvimento do projeto.

Teste Piloto

Antes de mergulharmos nas entrevistas com os usuários, um passo crucial nos aguarda: o teste piloto. Essa etapa meticulosa visa simular uma sessão de avaliação real, garantindo que tudo esteja funcionando perfeitamente para a coleta de dados valiosos.

Verificaremos se todas as ferramentas estão funcionando adequadamente, evitando surpresas durante as entrevistas reais. Analisaremos a eficácia do nosso planejamento, ajustando-o para garantir um fluxo suave e eficiente durante as avaliações. Asseguraremos que a avaliação forneça os dados precisos e relevantes para o nosso estudo, respondendo às nossas perguntas e objetivos. Avaliaremos a clareza e a objetividade da linguagem utilizada nas entrevistas, certificando-nos de que as perguntas sejam compreendidas de maneira inequívoca pelos participantes. Conforme Barbosa e Silva (2021, p. 276), o teste piloto vai além de um simples teste de ferramentas. Ele nos permite avaliar o próprio planejamento, garantindo que a avaliação produza os dados necessários para alcançarmos os objetivos do estudo.Durante o teste piloto, os avaliadores conduzirão uma simulação completa de uma sessão de avaliação, incluindo explicações, materiais e interação com os participantes. O cronograma passar essa etapa encontrase na Tabela 3 abaixo.

Tabela 3 - Conograma do teste piloto.

Data Horário de início e fim Local Avaliadores
23/05/2024 12:30 - 12:45 FGA - UnB Cláudio e Gabriel F. J. Silva

Fonte: Pablo S. Costa, 2024.

No Vídeo 1 abaixo está a gravação do teste piloto realizado.

Vídeo 1 - Gravação do Teste Piloto.

Fonte: Claudio Henrique e Gabriel F. J. Silva , 2024.

Referências Bibliográficas

  1. Barbosa, S. D. J.; Silva, B. S. da; Silveira, M. S.; Gasparini, I.; Darin, T.; Barbosa, G. D. J. (2021) Interação Humano-Computador e Experiência do usuário. Autopublicação. ISBN: 978-65-00-19677-1.

Bibliografia

  1. Barbosa, S. D. J.; Silva, B. S. da; Silveira, M. S.; Gasparini, I.; Darin, T.; Barbosa, G. D. J. (2021) Interação Humano-Computador e Experiência do usuário. Autopublicação. ISBN: 978-65-00-19677-1.

  2. 2023.2-Dominio-Publico. Disponível em: https://interacao-humano-computador.github.io/2023.2-Dominio-Publico/Acesso em 22 de maio de 2024.

Histórico de Versões

Versão Data Descrição Autor(es) Revisor(es)
1.0 18/05/2024 Criação do documento Ricardo Augusto e Pablo S. Costa Claudio Henrique e Gabriel F. J. Silva
1.1 24/05/2024 Adição da gravação do teste piloto Claudio Henrique e Gabriel F. J. Silva Ricardo Augusto