Planejamento da Avaliação da Analise de Tarefas
Introdução
Conforme apontam Simone Barbosa e Bruno Diniz1: "A avaliação do produto final possibilita entregar um produto com uma garantia maior de qualidade". Sob esse viés, este artefato tem como objetivo fazer o planejamento da avaliação do protótipo de alta fidelidade, realizando entrevista com usuários reais do produto, tendo como referência o perfil do usuario previamente estabelecido.
Metodologia
Para realizar esse planejamento foi utilizado o framework DECIDE proposto para orientar o planejamento, execução e análise de uma avaliação de Interação Humano Computador2. A tabela 1 a seguir apresenta o siginificado de cada letra do framework assim como o objetivo de cada tópico. Os métodos utilizados na avaliação serão destrinchados na parte de Escolher os métodos de avaliação
Tabela 1 - Letras e significados DECIDE
| Letra | Significado |
|---|---|
| D | Determinar os objetivos gerais da avaliação |
| E | Explorar perguntas a serem feitas na avaliação |
| C | Escolher os métodos de avaliação |
| I | Identificar e administrar as questões práticas |
| D | Decidir como lidar com as questões éticas |
| E | Avaliar, interpretar e apresentar os dados |
Fonte: Página: 280,Capítulo 11. Processos de Design de IHC. Livro: Barbosa, S. D. J.; Silva, B. S. da; Silveira, M. S.; Gasparini, I.; Darin, T.; Barbosa, G. D. J. (2021) Interação Humano-Computador e Experiência do usuário. Autopublicação.
D - Objetivos
O objetivo desta avaliação é verificar se os artefatos produzidos na análise de tarefas condizem com a realidade sendo avaliados por usuários-alvo definidos através do perfil do usuario e que assim podemos identificar problemas e elicitar ideias que não foram identificados anteriormente. Conforme presente nas definições do framework, os objetivos principais da avaliação serão dois, "verificar conformidade com um padrão" e "analisar a apropriação da tecnologia".
E - Explorar Perguntas Respondidas com a Avaliação
As perguntas a seguir tem o intuito de serem respondidas pelo avaliador após a execução da gravação da entrevista, todas foram criadas a partir da Tabela 11.1 " Exemplos de perguntas que uma avaliação de IHC" do livro Interação Humano Computador[1] presente na página 266 do Capítulo 11 e são divididas de acordo com o objetivo de cada pergunta,
(1) verificar conformidade com um padrão:
- Os diagramas HTA possuem os objetivos, operações, legendas, representação em tabela e diagrama?
- As análises utilizando CNM-GOMS possuem objetivos, operações, métodos e regras de seleção?
(2) analisar a apropriação da tecnologia:
- Os diagramas representam tarefas condizentes com as funcionalidades esperadas para o site escolhido?
- As análises utilizando CNM-GOMS representam tarefas condizentes com as funcionalidades esperadas para o site escolhido?
- A partir das entrevistas foram identificadas melhoras para as tarefas apresentadas no Análise de Tarefas
- O usuário tem acesso a todas as informações necessárias para o entedimento da tarefa e para a realização dela?
C - Escolher os Métodos de Avaliação
Para a realização da avaliação em si será utilizado o método de investigação fazendo uso da realização de entrevistas com pessoas que se enquadrem no nosso Perfil do Usuário já que com esse método o avaliador terá acesso a interpretar e analisar concepções, opiniões, expectativas e comportamentos do usuário [1] relacionados com as tárefas analisadas pelos integrantes do grupo.
I - Identificar Questões Práticas da Avaliação
Recrutamento
O recrutamento das pessoas que serão entrevistadas será feita baseando-se nas caractéristicas do perfil do usuário definido pelo grupo e pelas personas. A quantidade de entrevistados é correspondente ao número de integrantes do grupo, atualmente sendo 5, e fica responsável a cada integrante do grupo buscar o seu entrevistado.
Preparação
Na atividade de preparação, o entrevistador apresentará a análise de tarefa que o mesmo confeccionou a seguir seguirá o roteiro de perguntas para o entrevistado anotando suas respostas, salientando que essa entrevista deve acontencer de forma presencial e na gravação deve aparecer tanto o entrevistado como entrevistador. A seguir temos a lista de tarefas elicitadas acompanhadas do autor de cada uma.
- Cadastrar e acompanhar uma reclamação na ouvidoria - Cainã Freitas
- Acessar o módulo de Contra Cheque e consultar processos do servidor - Augusto
- Registrar e verificar o panorama de saúde da cidade - Lucas Meireles
- Solicitar vistoria de local com água parada - Pedro Lucas
- Cadastro Antecipado de Aluno - Joyce Dionizio
Custos
A realização das entrevistas não gerará nenhum custo a equipe nem ao usuário, logo que as ferramentas utilizadas são disponbilizadas de forma gratuíta, a seguir temos uma lista de ferramentas que serão utilizadas e o seu objetivo para a gravação da entrevista e avaliação:
- Microsoft teams ou Google Meet: ferramenta para gravar
- Notebook com camêra, microfone e acesso a internet: aparelho utilizado para gravar
- Diagrama HTA da tarefa específca: artefato utilizado para o usuário verificar
- Teste Piloto - para assegurar que tudo está pronto antes da entrevista com o usuário-alvo
Prazos
Em relação aos prazos no relato de resultados em cada tarefa será disponibilziado uma tabela seguindo o molde da tabela 2 a seguir que contém o Entrevistador; Entrevistado; Horário de início e fim; Data; Local;
Tabela 2 - Tabela de entrevistas
| Entrevistador | Entrevistado | Horário | Data | Local |
|---|---|---|---|---|
| NOME | NOME | 00:00 - 01:00 | ??/??/?? | LOCAL |
Fonte: DOURADO, PEDRO LUCAS.. 2024.
Roteiro de Perguntas ao entrevistado responder
A seguir segue a tabela 03 que contém as perguntas que será feita para o entrevistado sendo as mesmas baseadas nas perguntas a serem respondidas na avaliação e os objetivos. Sendo as 4 primeiras referentes ao perfil do usuário.
Tabela 3 - Roteiro de perguntas da entrevista.
| Número | Pergunta | Resposta |
|---|---|---|
| 1 | Qual o seu nome? | - |
| 2 | Qual a sua idade | - |
| 3 | Qual o grau de afinidade você tem com tecnologias? | - |
| 4 | Você já utilizou algum site de prefeitura? Se sim quais? | - |
| 5 | Observando a tarefa, você acha que ela condiz com a realidade? | - |
| 6 | Há alguma parte da tarefa que você acha difícil ou confusa? | - |
| 7 | Há alguma parte da tarefa que você acha demorada ou ineficiente? | - |
| 8 | Observando a tarefa mostrada, a sequência de processos confere com a realidade? Caso não, poderia descrever o por quê? | - |
| 9 | Você teria alguma sugestão de melhoria para o diagrama da tarefa? | - |
| 10 | E com relação a tarefa tem alguma sugestão de melhoria? | - |
Fonte: DOURADO, PEDRO LUCAS.. 2024.
Execução do roteiro
As perguntas de 1-4 devem ser feitos ao começar a entrevista e após dar um contexto em relação ao projeto, as demais perguntas devem ser feitas logo após a demonstração e explicação da tarefa, diagrama das tarefas e a tabela.
D - Lidando com as Questões Éticas
Os participantes da avaliação serão convidados a participar voluntariamente e a assinar um termo de consentimento. O termo de consentimento informa aos participantes sobre os objetivos da pesquisa, os procedimentos que serão realizados, os riscos e benefícios da participação, a garantia de anonimato e a possibilidade de desistir a qualquer momento. O termo de consentimento também informa que a participação é voluntária e que os participantes podem desistir a qualquer momento, sem penalidades ou consequências negativas. De modo a evitar possíveis constrangimentos e incentivar a participação de usuários, não será disponibilizado de modo público as gravações audio-visuais do procedimento, sendo que os registros serão disponibilizados apenas à equipe de avaliação para verificação das informações textuais registradas e tratamento de dúvidas das ações realizadas pelos entrevistados.
E - Avaliar, Interpretar e Apresentar os Dados
Após a avaliação, os dados serão interpretados e será disponbilizado um relato dos resultados contendo os objetivos, metodologia utilizada, tarefa, teste piloto, as entrevistas, as perguntas feitas, os problemas encontrados e suas descrições e por fim sugestões de melhorias para cada funcionalidade, conforme disponibilizado no seguinte artefato.
Referências Bibliográficas
[1] Barbosa, S. D. J.; Silva, B. S. da; Silveira, M. S.; Gasparini, I.; Darin, T.; Barbosa, G. D. J. (2021) Interação Humano-Computador e Experiência do usuário. Autopublicação.
Histórico de Versões
| Data | Versão | Descrição | Autor(es) | Data de revisão | Revisor(es) |
|---|---|---|---|---|---|
| 22/05/2024 | 1.0 |
Elaboração inicial do documento | Cainã Freitas | 19/06/2024 | Joyce Dionizio |
| 03/06/2024 | 1.1 |
Corrige documento | Cainã Freitas | 19/06/2024 | Joyce Dionizio |
| 08/07/2024 | 2.0 |
Documento inteiro refeito | Pedro Lucas | 08/07/2024 | Lucas Meireles |