Planejamento da avaliação da Análise de Tarefas
Introdução
De acordo com Barbosa e Silva (2011)¹, a avaliação de IHC desempenha um papel essencial no processo de desenvolvimento, visando a criação de sistemas interativos com alta qualidade de uso. Ela orienta o avaliador a emitir um julgamento sobre a qualidade de uso da solução de IHC e a identificar problemas na interação e na interface que possam comprometer a experiência do usuário durante o uso do sistema.
Objetivos
O planejamento de avaliação da análise de tarefas busca garantir que o processo de análise seja estruturado, focado em objetivos claros e que as informações coletadas possam ser úteis. Ele envolve a definição de objetivos da avalição, métodos e ferramentas para coleta de dados, questões práticas, bem como a seleção dos participantes e a avaliação dos resultados.
Metodologia
Para orientar a avaliação será utilizado o framework DECIDE, com suas atividades interligadas e executadas interativamente, esse framework irá guiar planejamento, execução e análise da avalição de IHC. Essas atividades estão descritas na tabela 1:
Tabela 1 - Framework DECIDE
| Letra | Atividade |
|---|---|
| D | Determinar os objetivos da avaliação de IHC, bem como motivo de sua importância e para quem são importantes |
| E | Explorar perguntas a serem respondidas com a avaliação, perguntas específicas devem ser elaboradas para serem respondidas na avaliação |
| C | (Choose) Escolher os métodos mais adequados de avaliação a serem utilizados para responder as perguntas e atingir os objetivos esperados |
| I | Identificar e administrar as questões práticas da avaliação, como recrutamento de usuários, preparação dos equipamentos necessários, prazos, orçamento disponível e mão-de-obra necessária para conduzir a avaliação |
| D | Decidir como lidar com as questões éticas, tomando os cuidados éticos necessários |
| E | (Evaluate) Avaliar, interpretar e apresentar resultados |
Autor: João Ribeiro
D - Determinar os objetivos da avaliação
O objetivo dessa avaliação é verificar se a análise de tarefas descreve um sistema interativo que apoia adequadamente seus usuários a atingirem seus objetivos em seus contextos, identificando problemas no uso e oportunidades de melhorias. Nesse sentido, iremos avaliar os seguintes aspectos:
- Problemas na interação e na interface que prejudiquem a qualidade de uso do sistema
- Apropriação da tecnologia
- Ideias e alternativas de design
E - Explorar perguntas
Com o intuito de operacionalizar os objetivos supracitados, faz-se necessário seu detalhamento por meio de perguntas mais específicas. Na tabela 2 encontra-se esse detalhamento, baseado nas perguntas propostas por Barbosa e Silva (2011)¹.
Tabela 2 - Perguntas de detalhamento
| Aspecto | Pergunta |
|---|---|
| Problemas na interação e na interface | O usuário consegue atingir seu objetivo através tarefa proposta? |
| O usuário compreende as etapas da tarefa proposta? | |
| Que parte da tarefa deixa a desejar para a satisfação do usuário? | |
| Quais problemas de IHC criam empecilhos ao usuário realizar seu objetivo? | |
| Em que etapa esses problemas ocorrem? | |
| Apropriação da tecnologia | De que modo o sistema afeta a relação e comunicação dos usuários? |
| Na visão dos usuários, quais são os pontos fortes e fracos do sistema? | |
| Ideias e alternativas de design | Qual ideia/alternativa de design tem a preferência dos usuários? |
Autor: João Ribeiro
C - Escolher os métodos
Os métodos escolhidos para a avaliação são: entrevista semiestruturada e observação direta. Utilizaremos da entrevista, uma conversa guiada por um roteiro de perguntas, para ter acesso a opiniões e expectativas dos usuários quanto ao sistema e, assim, conseguir investigar alternativas de design, problemas que os usuários costumam enfrentar, como eles se apropriaram da tecnologia existente e quais são suas expectativas para futuras interações com tecnologias atuais e novas. Ainda, como sugerido por Barbosa e Silva (2011)¹, iremos integrar esse método à observação direcionada. Com isso, espera-se a obtenção de dados mais robustos e confiáveis ao complementar a avaliação com um método que fornece dados sobre situações em que os usuários realizam suas atividades, identificando problemas reais enfrentados.
I - Identificar questões práticas
Se você leu um livro de Silva (2020), que cita uma pesquisa de Oliveira (2005), a citação ficaria assim: Oliveira (2005, apud Silva, 2020, p. 45)
Participarão da avaliação da análise de tarefas cinco usuários que se encaixam no perfil de usuário encontrado para o sistema trabalhado no projeto, pois, segundo Nielsen(2000, apud Barbosa e Silva, 2011, p258)². Todos os integrantes do grupo participarão dessa avaliação como entrevistadores/observadores, sendo necessária a participação de ao menos um integrante para cada realização da dinâmica. As dinâmicas devem durar aproximadamente 20 minutos e serão realizadas de forma remota na FCTE - UnB (sala a definir), já que é de mais fácil acesso por ser gratuita ao uso. As avaliações não devem gerar custos ao grupo.
Os materiais necessários às avaliações incluem:
- Diagrama e tabela HTA e fluxo GOMS da tarefa escolhida,
- Dispositivo para videochamada e/ou gravação da dinâmica,
- Dispositivo com acesso ao sistema que as tarefas analisadas se baseam,
- Termo de consentimento,
- Meio para coleta de feedback.
A preparação para a avaliação inclui a providenciar os materiais necessários e uma janela de tempo para execução das avaliações. A seguir, tabela 3 com o cronograma planejamento para a atividade de avaliação:
Tabela 3 - Cronograma Planejado
| Entrevistador(a) | Entrevistado(a) | Horário | Data | Local |
|---|---|---|---|---|
| Carla | Bruna Araújo | A definir | 16/12/2024 - 20/12/2024 | FCTE - UnB (sala a definir) |
| Davi | Vinícius Chavito | A definir | 16/12/2024 - 20/12/2024 | FCTE - UnB (sala a definir) |
| João | Eduardo Paiva | A definir | 16/12/2024 - 20/12/2024 | FCTE - UnB (sala a definir) |
| Eduarda | Ana Carolina | A definir | 16/12/2024 - 20/12/2024 | FCTE - UnB (sala a definir) |
| Gabriel | Laura Sumienski | A definir | 16/12/2024 - 20/12/2024 | FCTE - UnB (sala a definir) |
Autores: Carla Clementino e Gabriel Santos.
Será realizado um teste-piloto para verificar o planejamento da avaliação e analisar se ela produz os dados necessários para responder às questões e atingir os objetivos do estudo.
D - Decidir as questões éticas
A fim de respeitar os princípios éticos e tratar as pessoas envolvidas de maneira justa e respeitosa, garantindo que suas escolhas sejam feitas com total clareza e sem pressões externas. Assim, será utilizado de uma versão adaptada do Termo de Consentimento.
E - Avaliar, interpretar e apresentar resultados
A interpretação dos dados coletados será orientada pelos métodos escolhidos para a avaliação, inicialmente voltando-se aos dados coletados de cada indivíduo participante para posteriormente consolidar esses resultados coletivos. Nessa analise intersujeito, recorrências nos resultados serão buscadas a fim de identificar padrões representativos do grupo participante. E, enfim, busca-se responder as questões motivadoras do estudo e justificar o por que alguma resposta não foi encontrada, caso ocorra.
Referência Bibliográfica
- BARBOSA, S. D. J.; SILVA, B. S. Interação Humano-Computador. Elsevier, 2011. p. 250-251.
- BARBOSA, S. D. J.; SILVA, B. S. Interação Humano-Computador. Elsevier, 2011. p. 258.
Histórico de Versão
| Data | Versão | Descrição | Autor | Data da Revisão | Revisor |
|---|---|---|---|---|---|
| 10/12 | 1.0 | Criação do documento | João Ribeiro | 10/12 | Gabriel Monteiro |
| 16/12 | 2.0 | Alteração do local | Gabriel Monteiro | 16/12 | João Ribeiro |
| 12/01 | 2.1 | Correções em "Explorar perguntas" e "Identificar questões práticas" | João Ribeiro | 06/01 | Eduarda Tavares |