Ir para o conteúdo

Planejamento da Avaliação da Análise de Tarefas

Introdução

A fim de garantir que o sistema Detran Digital atenda às necessidades dos usuários, realizaremos uma avaliação contínua e evolutiva acerca do processo de desenvolvimento. Iniciaremos pela análise de tarefas, conduziremos entrevistas com usuários reais para validar as informações coletadas e identificar oportunidades de melhoria. Essa abordagem iterativa nos permitirá construir um sistema mais robusto e intuitivo (dentro do contexto da disciplina).

Metodologia

Para realizar esse planejamento será utilizado o framework DECIDE, onde cada letra da palavra é uma etapa a ser realizada no planejamento. A tabela 1 a seguir apresenta o significado de cada letra.

Tabela 1 - Letras da palavra DECIDE com os seus significados.

Letra Definição
D Determinar os objetivos da avaliação.
E Explorar perguntas a serem respondidas com a avaliação.
C Escolher os métodos de avaliação a serem utilizados.
I Identificar e administrar as questões práticas da avaliação.
D Decidir como lidar com as questões éticas.
E Avaliar, interpretar e apresentar os dados

Fonte - BARBOSA e SILVA (2011).

D - Objetivos

Os objetivos desta avaliação é verificar se os artefatos produzidos na análise de tarefas estão em conformidade com os padrões exigidos para esse artefato estão sendo seguidos e se existe algum design alternativo para aplicação. Sendo assim, a avaliação será utilizada para se elicitar ideias e problemas não identificados na produção do artefato de Análise de Tarefas e que deverão ser implementados em uma nova versão do artefato.

E - Explorar Perguntas Respondidas com a Avaliação

Com base no objetivo da avaliação foram preparadas perguntas baseadas nos seguintes tópicos: - verificar a conformidade com um padrão; - comparar ideias e alternativas de design. As perguntas selecionadas tem o intuito de serem respondidas com essa avaliação e foram feitas com base no as perguntas selecionadas foram as seguintes:

  • Os diagramas HTA's possuem as notações corretas, legendas e a representação em tabela?
  • Os diagramas representam tarefas condizentes com as funcionalidades esperadas para o site?
  • A técnica KLM enquadra todas as etapas que condizem no HTA?
  • As entrevistas permitem que sejam realizadas melhorias nas tarefas elucidadas pelo artefato de Análise de Tarefas?

C - Escolher os Métodos de Avaliação

Para a realização da avaliação, utilizar-se-á de uma adaptação dos métodos de investigação, com o uso de entrevistas e observação com usuários com base em um questionário como roteiro.

A escolha se dá pelo fato de ser um método investigativo que permite coletar muitas informações, além de ser flexível permite fazer perguntas que aprofundam ainda mais os objetivos a serem alcançados pelos usuários. Ademais, tal entrevista deve ser estritamente gravada e documentada.

I - Identificar Questões Práticas da Avaliação

Recrutamento

O processo se inicia pelo recrutamento das pessoas entrevistadas, essas pessoas deverão ter as características elucidadas pelo perfil de usuário e pelas personas.

Preparação

Os entrevistadores seguirão o roteiro de perguntas para conduzir as entrevistas, anotando as respostas dos usuários. As entrevistas devem incluir uma das atividades definidas na análise de tarefas, e os entrevistadores podem solicitar o compartilhamento de tela para observação direta das ações do usuário. Cada entrevista pode ser conduzida por um único entrevistador ou por uma dupla, com cada membro assumindo uma tarefa específica.

Custos

A realização das entrevistas não irá gerar custos, isso porque todas as ferramentas que seram utilizadas são de acesso gratuito:

  • Microsoft Teams, Discord e Google Meet;
  • Perguntas para serem respondidas com a avaliação;
  • Perguntas para serem respondidas na entrevista;
  • Termo de Consentimento#met3;
  • Teste Piloto;
  • Diagrama HTA de cada Tarefa selecionada.

Vale resaltar que os equipamentos necessários serão quaisquer dispositivos com acesso a internet, aos aplicativos de comunicação e a um navegador de internet que os envolvidos possuírem.

Prazos

Em relação aos prazos, as entrevistas estão documentadas na tabela 2, sendo apresentado um cronograma com seus tópicos e logo abaixo a tabela 2 com as entrevistas:

  • Entrevistador;
  • Entrevistado;
  • Horário de início e fim;
  • data que ocorreu a entrevista.

Tabela 2 - Cronograma da entrevista.

Entrevistador(es) Entrevistado(s) Horário de Início Horário de Fim Data Local
Márcio Henrique Eduardo Galvão 11:30 11:45 03/05/2024 Presencial
Luiza Maluf Lucas Gama 17:00 17:05 03/05/2025 Presencial

Autores - Márcio Henrique e Luiza Maluf

Roteiro de Perguntas

Na entrevista estarão disponíveis capturas de tela para que o usuário possa ver a tarefa da qual o entrevistador estará comentando e a tabela com o seu fluxo. A tabela 3 a seguir mostra o roteiro de perguntas a serem realizadas na entrevista. Essas perguntas foram baseadas nas perguntas a serem repondidas na avaliação.

Tabela 3 - Roteiro de perguntas da entrevista.

Número Pergunta Resposta Possíveis
1 Qual o seu nome? Resposta Discursiva
2 Qual seu grau de experiência com tecnologias? Resposta Discursiva
3 Como você iniciaria o processo no sistema do Detran? [ ] Acessar o site/app do Detran e fazer login
[ ] Outro, como?
⚠️ Informar para usar a conta Gov.br.
4 Como você escolheria o serviço desejado (transferência ou agendamento)? [ ] Selecionar o serviço na lista disponível
[ ] Outro, como?
5 Como você confirmaria os dados apresentados (veículo ou serviço)? [ ] Revisar e confirmar no sistema
[ ] Outro, como?
6 Como você realizaria a autenticação digital? [ ] Utilizar Gov.br para autenticação
[ ] Outro, como?
7 Como você selecionaria a data e horário de um agendamento? [ ] Escolher data e horário no calendário do sistema
[ ] Outro, como?
8 Como você efetuaria o pagamento das taxas necessárias? [ ] Gerar boleto/PIX e pagar pelo sistema
[ ] Outro, como?
9 Como você confirmaria a finalização do processo (transferência ou agendamento)? [ ] Confirmar e baixar o documento digital
[ ] Outro, como?
10 Como você acessaria a central de ajuda em caso de dúvidas? [ ] Clicar em "Central de Ajuda" no site/app
[ ] Outro, como?
11 A sequência de processos apresentada está clara para você? Se não, por quê? Resposta Discursiva
⚠️ Mostrar a tarefa ao usuário e explicá-la.
12 Se houvesse um problema, você saberia como cancelar ou reagendar um serviço? [ ] Sim, pelo painel de agendamentos
[ ] Outro, como?
13 Observando os processos, há algo que você considera difícil ou confuso? Resposta Discursiva
14 Os processos refletem sua experiência real? Resposta Fechada (Sim/Não)
15 Você teria alguma sugestão de melhoria para os processos apresentados? Resposta Discursiva
16 Você tem alguma sugestão de melhoria para a interface do sistema (site/app)? Resposta Discursiva

Autor - Márcio Henrique.

Execução do roteiro

Nota se que as perguntas de 4 a 9.1 deverão ser realizadas de acordo com cada entrevista, se a entrevista é sobre o cancelamento de compra realiza a pergunta 6 e 6.1, por exemplo. As perguntas 10 e 11 deverão ser realizadas pelos entrevistadores responsáveis pela tarefa de Busca de Evento e Acessar a Central de Ajuda respectivamente. No mais, as outras perguntas devem ser realizadas por todos os entrevistadores.

D - Lidando com as Questões Éticas

Será utilizado o termo de consentimentoproduzido na seção de aspectos éticos, a fim de se obter dos participantes a autorização para que sejam realizadas as atividades necessárias à produção desse artefato e garantir que os participantes sejam respeitados durante e após a atividade.

E - Avaliar, Interpretar e Apresentar os Dados

Após a coleta de dados, estes serão analisados criticamente, considerando o contexto e a confiabilidade, a fim de verificar sua representatividade da população de usuários

A documentação dos dados incluirá o registro de problemas e dificuldades encontradas pelos usuários durante a interação com o site, como questões de usabilidade, funcionalidades ausentes e problemas de desempenho. Serão anotadas descrições detalhadas dos problemas, sua classificação, sugestões de melhoria e o feedback dos usuários. Ao final de cada entrevista, serão registradas observações gerais sobre o processo.

Os dados analisados serão compartilhados com a equipe de desenvolvimento para embasar as próximas etapas do projeto.

Teste-piloto

De acordo com Barbosa e Silva (2011, p.307), o teste piloto serve para avaliar o próprio planejamento e analisar se a avaliação produz os dados necessários para responder a questões e objetivos do estudo.

Nesse sentido o teste foi executado no dia 20/12/2024 pelos integrantes do grupo Luiza Maluf e Márcio Henrique

Bibliografia

RIBEIRO, Clara; SANTANA, Natan Tavares. Planejamento da avaliação da Análise de tarefas. Repositório do Grupo Agência Virtual Neoenergia Brasília da disciplina de Interação Humano Computador da Universidade de Brasília, 2022. Disponível em: <https://interacao-humano-computador.github.io/2022.1-AgenciaVirtualNeoenergia/design%2C_avalia%C3%A7%C3%A3o%2C_desenvolvimento/n%C3%ADvel%201/an%C3%A1lise_de_tarefas/planejamento_tarefas/>. Acesso em: 09 dezembro 2024.

GABRIEL, Lucas; SOUZA, Nicolas. Planejamento da avaliação da Análise de tarefas. Repositório do Grupo Lichess da disciplina de Interação Humano Computador da Universidade de Brasília, 2022. Disponível em: <https://interacao-humano-computador.github.io/2022.2-Lichess/design_avaliacao_desenvolvimento/nivel_1/analise_tarefas/planejamento_avaliacao/>. Acesso em: 09 dezembro 2024.

Referências Bibliográficas

BARBOSA, S. D. J.; SILVA, B. S. Interação Humano-Computador. Rio de Janeiro: Elsevier, 2011.

Histórico de Versões

Versão Data Descrição Autor(es) Revisor(es)
1.0 09/12/2024 Criação da página. Márcio Henrique Luiza Maluf