Planejamento da Avalição do Storyboard

Introdução

O Storyboard é um exemplo de prototipação de baixa-fidelidade, geralmente utilizado em conjunto com cenários. Essa abordagem envolve a criação de uma sequência de ilustrações que acompanham o avanço do usuário em uma tarefa específica do produto em desenvolvimento. Este documento tem como objetivo o planejamento da análise do storyboard gerado conforme a metodologia utilizada e as ações executadas nele. Isso proporcionará aos interessados e aos desenvolvedores uma compreensão mais nítida das potenciais aprimorações no design do projeto.

Objetivo

Este documento tem como finalidade a preparação para a avaliação do storyboard. A avaliação fundamental de um projeto de Interação Humano-Computador (IHC) compreende três fases distintas: preparação, coleta e interpretação de dados. Essas etapas possibilitarão a análise do storyboard, o que, se for o caso, resultará no desenvolvimento de aprimoramentos de design para a aplicação em estudo.

Metodologia

Considerando o contexto e a área de atuação do sistema, o avaliador deve conduzir a avaliação com base nas solicitações, preocupações ou padrões de comportamento expressos pelos envolvidos interessados no sistema. Essas diretrizes são decompostas em questões mais específicas que o avaliador precisa abordar.

A metodologia selecionada para realizar essa avaliação é o framework DECIDE.

Framework DECIDE

O framework DECIDE compreende uma série de ações interconectadas e repetitivas que visam coletar informações provenientes dos usuários. Isso, por sua vez, guia o processo de planejamento, implementação e análise da avaliação. O acrônimo DECIDE representa:

D: determinar os objetivos gerais da avaliação e suas respectivas importâncias;
E: explorar perguntas a serem respondidas;
C: escolher (choose) os métodos de avaliação;
I: identificar e administrar as questões práticas da avaliação;
D: decidir como lidar com as questões éticas;
E: avaliar (evaluate), interpretar e apresentar os dados.

D - Determinar

O propósito da avaliação é determinar se o entrevistado realmente se encaixa na representação apresentada no Storyboard e se ele tem insights a contribuir, que possam envolver alterações, exclusões ou inclusões. As etapas da avaliação podem ser delineadas da seguinte maneira:

Verificar se as atividades propostas nos storyboards estão alinhadas com as ações executadas, considerando o contexto dos usuários.
Comparar os storyboards com a realidade e determinar se são congruentes entre si.
Avaliar a necessidade de efetuar modificações nos storyboards.

E - Explorar

Para cada objetivo definido, o avaliador deve elaborar perguntas específicas a serem respondidas durante avaliação. Essas perguntas são responsáveis por operacionalizar a investigação e o julgamento de valor a serem realizados. Elas devem considerar o perfil dos usuáriosalvo e suas atividades. As perguntas escolhidas foram elaboradas com o objetivo de serem abordadas durante o processo de avaliação. Sendo elas:

Os storyboards estão fundamentados na realidade e correspondem às ações efetivamente executadas?
Existem modificações necessárias para validar ou tornar o storyboard compatível com as expectativas do usuário?
Os storyboards criados estão em conformidade com os cenários previamente estabelecidos?

C - Escolher

Para conduzir a avaliação, faremos uma adaptação dos métodos de investigação, utilizando entrevistas com um questionário como guia. Nesse contexto, os usuários serão convidados a analisar um cenário de uso hipotético e a relacionar sua experiência pessoal com a narrativa apresentada.

Essa escolha se justifica pelo fato de que esse método investigativo permite a coleta de uma ampla gama de informações e oferece flexibilidade para fazer perguntas que aprofundam os objetivos dos usuários. Além disso, é importante destacar que todas as entrevistas serão gravadas e documentadas de forma rigorosa.

I - Identificar

Para conduzir a investigação por meio de entrevistas, é de suma importância seguir uma abordagem metódica na seleção dos participantes. Eles devem ser escolhidos de forma criteriosa, de modo que se encaixem no perfil de usuário previamente identificado e estejam dispostos a concordar com o termo de consentimento. Isso é essencial para garantir a conformidade com os aspectos éticos do processo e para assegurar que os participantes estejam genuinamente dispostos a colaborar. Sendo assim, podemos visualizar com mais detalhes na seção abaixo, Planejamento da Avaliação.

D - Decididir

As questões éticas serão baseadas no modelo de termo de consentimento produzido na seção aspectos éticos em análise de requisitos I.

E - Avaliar

Após a conclusão da avaliação, os dados obtidos serão cuidadosamente documentados e processados, considerando o contexto em que foram coletados. Será feita uma análise para determinar se esses dados têm um alto grau de confiabilidade e se podem ser generalizados para representar a população de usuários do site.

Este processo de documentação engloba o registro de problemas e dificuldades encontrados durante a interação com o sistema, que podem abordar questões relacionadas à usabilidade, funcionalidades ausentes e problemas de desempenho. Essa documentação incluirá descrições dos problemas, sua classificação, sugestões de melhoria e a captura do feedback dos usuários. Além disso, ao final das entrevistas, serão registradas observações gerais sobre a entrevista em si.

Uma vez concluída essa etapa, os dados serão compartilhados com a equipe de desenvolvimento, com o objetivo de fornecer informações relevantes para o progresso do projeto.

Tópicos para a avaliação

Seleção

A seleção dos usuários será personalizada, levando em consideração as preferências e critérios do entrevistador responsável, sendo que cada escolha será fundamentada no perfil de usuário previamente estabelecido por meio do questionário. O local será sempre no Teams, para que seja possível a gravação da reunião. Como foram feitos sete storyboards, serão necessários sete usuários para que seja feita uma avaliação individual.

Preparação

Os entrevistadores terão a responsabilidade de conduzir as perguntas incluídas no roteiro a seguir e de fazer anotações sobre as respostas dos usuários. A entrevista deve envolver uma das atividades representadas no storyboard. É importante observar que o papel de entrevistador pode ser desempenhado por uma única pessoa ou por uma dupla, onde cada um terá uma função específica: um fará as perguntas e o outro registrará as respostas.

Além disso, o entrevistador deverá solicitar que o usuário compartilhe sua tela, a fim de possibilitar a observação do usuário como parte do método de avaliação.

Custos

A realização das entrevistas não gerará um custo ao entrevistador ou ao usuário, as mesmas serão feitas de modo online, utilizando as seguintes ferramentas:

Storyboard;
Microsofts Teams;
Perguntas;
Termo de consentimento;
Teste Piloto.

Vale ressaltar que, para que possamos utilizar as ferramentas é necessário um dispositivo com acesso à internet.

Prazos

As entrevistas serão documentados na tabela 1.

Tabela 01 - Documentação entrevistas

Entrevistador(es)	Entrevistado	Horário de Início	Horário de Fim	Data	Entrevista
Limírio Guimarães	Altino Arthur	21:30	21:35	30/10/2023	Teste Piloto 01
Mayara Alves	Limírio Guimarães	21:52	22:04	30/10/2023	Teste Piloto 02
Milena Baruc	Wanjo Christopher	14:20	14:48	08/11/2023	Entrevista
Mayara Alves	Wycthor da Silva	22:07	22:11	08/11/2023	Entrevista
Breno Queiroz	Samuel Gomes	15:40	15:44	08/11/2023	Entrevista
Limirio Guimarães	Breno Alexandre	20:30	20:42	08/11/2023	Entrevista
Luis Miranda	Douglas Alves dos Santos	19:02	19:13	08/11/2023	Entrevista
Vinícius Mendes	Rafael Boanch	15:07	15:40	08/11/2023	Entrevista

Fonte: Milena Baruc

Roteiro de perguntas

Na entrevista o entrevistador mostrará no site qual tarefa está comentado de acordo com o storyboard. Com isso, o entrevistador irá começar a fazer os questionamentos presentes na tabela 2.

Tabela 02 - Perguntas para a entrevista

Nº	Pergunta	Resposta
01	A história retratada no Storyboard está alinhada com o título?	()Sim ()Não
02	O Storyboard em análise reflete de forma precisa a realidade?	()Sim ()Não
03	O Storyboard aborda adequadamente os principais aspectos da realização da tarefa em questão?	()Sim ()Não
04	As ações descritas no Storyboard seguem uma sequência lógica e fluida?	()Sim ()Não
05	O Storyboard apresenta elementos visuais identificáveis, como personagens, objetos e cenários?	()Sim ()Não

Fonte: Milena Baruc

Execução do roteiro

O entrevistador deve encorajar o usuário a expressar suas opiniões, seja de forma verbal ou através de ilustrações, especialmente quando houver discordância em relação ao Storyboard proposto. Além disso, todas as sugestões de alteração feitas pelo usuário devem ser registradas pelo entrevistador e, posteriormente, discutidas em conjunto para determinar a validação junto ao usuário ao final da atividade.

Teste Piloto

O teste piloto tem como objetivo avaliar a própria avaliação, assim, vendo se a mesma produz os dados necessários para responder as questões e objetivos do estudo. Dito isso a execução do teste piloto será feito no dia 30/01 às 21:30, com a presença dos integrantes Altino Arthur, Breno Queiroz, Limirio Correia, Mayara Alves, e Vinicius Mendes. Os links para visualização estão presentes no cronograma acima.

Resultado

A seguir temos a gravação da entrevista, de acordo com os aspectos que foram colocados acima. Os participantes Altino Arthur (Usuário), Breno Queiroz (Entrevistador), Limirio Correia (Usuário), Mayara Alves (Entrevistador), e Vinicius Mendes (Entrevistador). Gravações: Entrevista 1, Entrevista 02.

Bibliografias

Preece, J., Rogers, Y., & Sharp, H. (2005). Design de interação: Além da interação homem-computador. Bookman, 2005. BARBOSA, Simone; SILVA, Bruno. Interação Humano-Computador, Editora Elsevier, Rio de Janeiro, 2010

📑 Histórico de Versões

Versão	Data	Descrição	Autor	Revisor
`1.0`	30/10/2023	Criação do documento	Milena Baruc	Vinícius Mendes
`1.1`	30/10/2023	Correção do documento	Milena Baruc	Vinícius Mendes
`1.2`	08/11/2023	Adição entrevista 03	Milena Baruc	Vinícius Mendes
`2.0`	05/12/2023	Correção de acordo com as verificações	Milena Baruc	Altino Arthur