Ir para o conteúdo

Planejamento da Avaliação do Storyboard

1. Introdução

Storyboard é uma técnica proveniente do cinema usando uma estrutura no estilo de desenho. A vantagem do storyboard é que ele permite uma percepção do fluxo de experiência do projeto. É também uma opção muito econômica para representar o design. Com isso, juntamente com o usuário do sistema na elaboração dos storyboards são feitas avaliações e validações, porque assim é possível verificar o alinhamento e a tomada de decisões do designer.

2. Objetivo

O objetivo deste documento é planejar a avaliação do storyboard criado a partir da metodologia e as tarefas usadas neste documento para melhorar as decisões do designer de acordo com o andar do projeto e ter insumos suficientes para elaborar uma melhoria das funcionalidades dentro do sistema..

3. Metodologia

A metodologia selecionada após a análise das personas e a criação do storyboard foi a entrevista que usa perguntas elaboradas antecipadamente e segue um roteiro com exatidão.

Também optamos por adotar o framework DECIDE, que propõem orientar o planejamento, a execução e a análise de uma avaliação de IHC. As atividades do framework são interligadas e executadas interativamente, à medida que o avaliador articula os objetivos da avaliação, os dados e recursos disponíveis (Preece et al., 2002). O acrônimo DECIDE pode ser expandido para os seguintes tópicos:

  • D: Determinar os objetivos gerais da avaliação e identificar por que e para quem tais objetivos são importantes.
  • E: Explorar perguntas a serem respondidas com a avaliação.
  • C: Escolher (Choose) os métodos de avaliação a serem utilizados.
  • I: Identificar e administrar as questões práticas da avaliação.
  • D: Decidir como lidar com as questões éticas.
  • E: Avaliar (Evaluate), interpretar e apresentar os dados.

4. Planejamento da avaliação

4.1 Definição das tarefas

Na avaliação do storyboard, serão abordadas algumas questões acerca de cada storyboards produzido, cujo objetivo é identificar se o entrevistado está de fato inserido na realidade retratada nos storyboards e se ele tem algo a acrescentar ou algum ponto de vista (sugestão, crítica, alteração) que gostaria de compartilhar.

4.2 Validação do storyboard

A validação do storyboard será dada em virtude das respostas dos entrevistados. Dessa forma, para a validação, será observado se os storyboards condizem com a realidade dos entrevistados. Além disso, também serão observadas quaisquer sugestões de melhoria dada, seja por críticas, comentários, identificação de erros ou outros.

4.3 Elaboração do roteiro de perguntas

Abaixo a Tabela 1 com as perguntas.

Pergunta Resposta
1 No que se refere aos storyboards apresentados, você acha que todos eles condizem com a realidade? [ ] Sim
[ ] Não
2 Qual dos storyboards apresentados você acha que não condiz com a realidade? Número do storyboard
3 Por quê você acha que este storyboard não condiz com a realidade? Resposta aberta
4 Você teria alguma sugestão de melhoria ou alteração em algum dos storyboards apresentados? [ ] Sim
[ ] Não
5 Qual dos storyboards apresentados você gostaria de contribuir com a sua opinião? Número do storyboard
6 Qual sugestão de melhoria ou alteração você gostaria de compartilhar? Resposta aberta
Tabela 1: Perguntas a serem feitas.

4.4 Termo de Consentimento

Para a realização das entrevistas, os entrevistados devem ler e concordar com o seguinte termo de consentimento: Somos o grupo 1 da disciplina Interação Humano-Computador, ministrada pelo professor André Barros, no curso de Engenharia de Software da Universidade de Brasília - Campus Gama. Estamos realizando um projeto baseado no site do Skoob, cujo principal objetivo é avaliar e identificar os principais problemas na interface. Dessa forma, na etapa em que nos encontramos no projeto, estamos realizando avaliações sobre os storyboards que foram elaborados pelo grupo. A entrevista será realizada de forma remota, com uma duração de aproximadamente 30 minutos. Para a realização da entrevista, o entrevistado deve estar ciente dos seguintes pontos: - Os dados coletados na entrevista serão utilizados apenas para fins de estudo do grupo durante a disciplina; - O consentimento para a realização da entrevista é feito de forma livre, mediante esclarecimentos; - A sua privacidade será mantida. Utilizaremos somente as informações básicas como nome, idade, ocupação e grau de ensino; - O entrevistado tem total liberdade durante a entrevista, podendo interrompê-la a qualquer momento; Ao realizar essa entrevista, você estará auxiliando os integrantes do grupo a construir uma boa base de conhecimento e a desenvolver um projeto de qualidade para a disciplina. Dessa forma, gostaríamos que você pronunciasse em alto e bom som:

Eu, [nome do entrevistado], aceito os termos e dou meu consentimento para a realização da entrevista.

4.5 Definição das tarefas que serão executadas

Para validação do storyboard serão feitas algumas perguntas com objetivo de saber se os storyboards condizem ou não com a realidade dos entrevistados, se há alguma sugestão, crítica, se há algo possa ser acrescentado e/ou alterado, ou até se algum erro foi identificado. Desse modo, tornando possível a melhora ou correção de qualquer um desses detalhes.

4.6 Recrutamento dos participantes e cronograma das entrevistas

Dentro da atividade de Perfil do Usuário e das Personas, conseguimos identificar características necessárias para realizar uma entrevista com um usuário. Sendo assim buscaremos dois perfis maiores de 18 anos, de diferentes faixas etárias e que gostem de ler. Para fazer o recrutamento, utilizamos grupos para divulgar que tenham pessoas de acordo com os perfis indicados acima. Além disso, fizemos convite a pessoas conhecidas que encaixam com o perfil buscado. Nosso objetivo para essa avaliação é ter 2 entrevistados.

4.7 Aplicação da Avaliação

Para a entrevista, optou-se por realiza-la através do Microsoft Teams, tendo em vista a simplicidade e o alcance dessa plataforma. Na data combinada para a realização da entrevista dia 27/12/2022 às 20:30, cada participante deve receber um link para a videoconferência, com pelo menos 10 minutos de antecedência, e o tempo total da entrevista não pode superar os 30 minutos, para que não haja esgotamento do entrevistado e consequente perca de qualidade nas respostas obtidas. Os próximos passos estão descritos abaixo:

  • No inicio da entrevista, explique ao entrevistado sobre o assunto que será tratado e como ocorrerá a avaliação.
  • Antes de começar com as perguntas, deixe o entrevistado a par do Termo de Compromisso, e se ele está de acordo com os termos, caso não esteja, a entrevista deve ser encerrada neste ponto.
  • Neste momento, inicie a gravação e siga com o roteiro de questões presente na Figura 1.
  • Ao final, agradeça ao entrevistado pela contribuição e finalize a gravação da videoconferência.

Importante: Sempre que achar necessário, anote algum ponto ou observação que possa ter surgido ao longo da entrevista e que possa vir a contribuir futuramente para o projeto.

4.8 Teste Piloto

Teste piloto (ou pré-teste) é o teste que você faz antes de começar os testes de usabilidade

Antes da entrevista com os participantes selecionados ser realizada, será feito um teste piloto a fim de verificar o planejamento, analisar se a avaliação produz os dados necessários e verificar se todas as ferramentas necessárias para a avaliação estão funcionando como planejado. O teste piloto consistirá em um dos avaliadores executando a avaliação como se fosse uma sessão normal da entrevista e a gravação deste teste e os seus resultados serão documentados no relato dos resultados e qualquer mudança necessária no planejamento será feita antes que as entrevistas ocorram.

  • As tarefas a serem executadas são facilmente compreendidas?
  • O tempo da entrevista está conforme o esperado?
  • A dinâmica da entrevista é satisfatória?
  • As tarefas fazem sentido no contexto da avaliação?
  • Alguma etapa ou informação durante a entrevista ficou vaga ou ambígua?

4.9 Conclusão da avaliação

Dada a conclusão de cada entrevista programada, cabe ao avaliador elaborar um relatório com os resultados da entrevista, onde este deve conter: os pontos apontados pelo entrevistado, tanto positivos quanto negativos, sugestões de melhorias, link da gravação da entrevista e o que mais o avaliador achar pertinente.

5. Relato dos Resultados

O Relato dos Resultados é a síntese dos resultados obtidos, conforme a descrição do planejamento deste documento. A criação deste documento visa servir de base, para o avaliador da entrevista se orientar a cerca de como proceder frente as entrevistas e de como lidar com os entrevistados, a fim de obter o máximo proveito destas entrevistas para avaliação dos storyboards.

6. Conclusão

Esse documento visa facilitar a vida do avaliador durante a realização das avaliações. Portanto, é possível, e recomendável, que também exista ação por parte do avaliador caso exista alguma oportunidade de melhoria no documento ou nas etapas de avaliação, para que o processo de avaliação dos storyboards seja eficiente, informativo e auxiliador.

7. Referências

BARBOSA, Simone; DINIZ, Bruno. Interação Humano-Computador, Rio de Janeiro, 2021. BENYON, David . Interação Humano Computador. 2° edição, São Paulo, 2011.

Histórico de versão

Versão Data Descrição Autor Revisor
1.0 13/11/2022 Criação do Documento. João Pedro, Caio Lucas