Planejamento da avaliação da Análise de tarefas
Introdução
Durante a etapa de análise de requisitos, começamos com um questionário, com o objetivo de obter informações sobre as ações realizadas pelos usuários no site da Caesb. Com base nas respostas fornecidas pelos usuários, realizamos a análise de tarefas, tendo o perfil do usuário como ponto de partida. No entanto, é necessário coletar informações sob a perspectiva do usuário a fim de validar quais funcionalidades devem ser incluídas no produto, quais tecnologias os usuários já dominam e quais fatores têm prioridade para uma análise mais aprofundada.
Por isso, desenvolvemos este plano de avaliação da análise de tarefas. A tabela 1 apresenta as tarefas a serem analisadas durante a avaliação.
Tabela 1: Tarefas que podem ser executadas no site da Caesb
| Tarefas que podem ser executadas no site da Caesb |
|---|
| Consultar Contas Pagas |
| Consultar Falta de Água |
| Emitir segunda via da conta |
| Informar vazamento na rua |
| Revisão de Conta |
| Consultar Qualidade da Água |
| Situação de débitos |
Fonte: Leandro de Almeida e Oscar de Brito, 2023
Metodologia
Será utilizado o DECIDE que segundo Sharp, Rogers e Preece (2007) é um framework que serve para orientar o planejamento, a execução e a análise de uma avaliação de IHC. Cada letra da palavra DECIDE é uma etapa a ser realizada no planejamento. A tabela 2 apresenta o significado de cada letra.
Tabela 2: Siginificado de cada letra da palavra DECIDE
| Letra | Significado |
|---|---|
| D | Determinar os objetivos da avaliação de IHC. O avaliador deve determinar os objetivos gerais da avaliação e identificar por que e para quem tais objetivos são importantes. |
| E | Explorar perguntas a serem respondidas com a avaliação. Para cada objetivo definido, o avaliador deve elaborar perguntas específicas a serem respondidas durante avaliação. |
| C | Escolher (Choose) os métodos de avaliação a serem utilizados. O avaliador deve escolher os métodos adequados considerando prazo, orçamento, recursos e experiência para atingir os objetivos e responder às perguntas de maneira eficaz. |
| I | Identificar e administrar as questões práticas da avaliação. A avaliação de IHC envolve desafios práticos, como recrutamento de usuários, equipamentos, prazos, orçamento e equipe necessária. |
| D | Decidir como lidar com as questões éticas. Sempre que usuários são envolvidos numa avaliação, o avaliador deve tomar os cuidados éticos necessários. |
| E | Avaliar (Evaluate), interpretar e apresentar os dados. O avaliador precisa estar atento a alguns aspectos da avaliação realizada antes de tirar conclusões e divulgar resultados. |
Fonte: Sharp, Rogers e Preece, 2007
D - Determinar os objetivos
O objetivo desta avaliação é obter informações dos usuários, examinar oportunidades de melhoria na usabilidade e identificar problemas relacionados às tarefas realizadas pelos usuários no site. Ao identificar maneiras de aumentar a eficiência, reduzir erros e aprimorar a acessibilidade, o planejamento contribui para a competitividade, economia de custos e melhoria da experiência do usuário. Nessa avaliação, serão abordadas questões relacionadas à maneira como os usuários estão usando o sistema [1] e problemas na interação com as tarefas [2].
E - Explorar perguntas a serem respondidas com a avaliação
As perguntas utilizadas na avaliação foram feitas com base na tabela 9.1 do livro 'Interação Humano Computador' de Simone Diniz Junqueira Barbosa e Bruno Santana da Silva. A tabela 3 apresenta as perguntas que serão feitas durante a avaliação.
Tabela 3: Perguntas que serão feitas durante a avaliação
| Ordem | Objetivo relacionado | Pergunta | Resposta possível | Tipo de pergunta |
|---|---|---|---|---|
| 1° | - | Qual seu nome completo? | Discursiva | Aberta |
| 2° | - | Qual é a sua idade? | Discursiva | Aberta |
| 3° | - | Qual é a sua ocupação? | Discursiva | Aberta |
| 4° | - | Qual é o seu nível de experiência com tecnologias? | Pouca Média Muita | Fechada |
| 5° | 1 | Você já utilizou o site da CAESB? | Sim Não | Fechada |
| 6° | 1 | Qual plataforma você utiliza para acessar o site? | Computador Celular Outro | Fechada |
| 7° | 1 | Quais são as principais funções que você utiliza no site da CAESB? | Consultar Contas Pagas, Consultar Falta de Água, Emitir segunda via da conta, Informar vazamento na rua, Revisão de Conta, Consultar Qualidade da Água e Situação de débitos | Fechada |
| 8° | 1 | Das funcionalidades que você identificou como mais usadas, qual delas considera mais importante para você? | Discursiva | Aberta |
| 9° | 2 | Identificou algum problema ao tentar usar essa funcionalidade, quais? | Discursiva | Aberta |
| 10° | 1 | Você consegue operar o sistema da CAESB com facilidade? | Discursiva | Aberta |
| 11° | 2 | Acredita que as informações são facilmente identificadas quando visita o site? | Sim Não | Fechada |
| 12° | 2 | Considera que o site da CAESB possui muitas informações? | Discursiva | Aberta |
| 13° | 2 | Sente-se desconfortável ao utilizar o site da CAESB? Se sim, o que acredita que ajudaria a mitigar esse desconforto? | Discursiva | Aberta |
| 14° | 2 | Teria alguma sugestão de melhoria para o site? | Discursiva | Aberta |
Fonte: Leandro de Almeida e Oscar de Brito, 2023
C - Escolher os métodos de avaliação
O método escolhido foi o das entrevistas, no qual utilizamos um questionário contendo perguntas relacionadas ao sistema e às tarefas executadas pelo usuário nele. Optamos por este método, uma vez que ele nos permite obter informações sobre o sistema sob a perspectiva do usuário. As entrevistas foram gravadas, e todos os usuários concordaram em participar delas.
I - Identificar e administrar as questões práticas da avaliação
O recrutamento dos usuários que participarão da avaliação será realizado por meio de convites a usuários da plataforma. Serão avaliados cinco usuários, o que está dentro da quantidade determinada por Dumas e Redish. Cada membro do grupo irá escolher uma funcionalidade e fazer uma entrevista sobre ela. Optamos pelo uso da plataforma Discord1, pois é gratuita e de livre acesso. O cronograma a ser seguido pode ser observado nas tabelas de 4 a 8.
Tabela 4: Entrevista 1
| Entrevistadores | Entrevistado | Data | Horário de início e fim | Local |
|---|---|---|---|---|
| Leandro de Almeida | Danilo Félix | 02/11/2023 | 16:50 até 17:05 | Discord |
Fonte: Leandro de Almeida, 2023
Tabela 5: Entrevista 2
| Entrevistadores | Entrevistado | Data | Horário de início e fim | Local |
|---|---|---|---|---|
| Oscar de Brito | Laura Coutinho | 02/11/2023 | 20:30 até 20:40 | Teams |
Fonte: Oscar Brito, 2023
Tabela 6: Entrevista 3
| Entrevistador | Entrevistado | Data | Horário de início e fim | Local |
|---|---|---|---|---|
| Pedro Henrique | Lucas Ambrosio | 04/11/2023 | 14:40 até 14:50 | Discord |
Fonte: Pedro Henrique, 2023
Tabela 7: Entrevista 4
| Entrevistadores | Entrevistado | Data | Horário de início e fim | Local |
|---|---|---|---|---|
| Tiago Albuquerque | João Lucas | 08/11/2023 | 18:40 até 18:50 | Teams |
Fonte: Tiago Albuquerque, 2023
Tabela 8: Entrevista 5
| Entrevistador | Entrevistado | Data | Horário de início e fim | Local |
|---|---|---|---|---|
| Jefferson Sena | José André | 08/11/2023 | 18:00 até 18:10 | Teams2 |
Fonte: Jeffeson Sena, 2023
Tabela 9: Entrevista 6
| Entrevistador | Entrevistado | Data | Horário de início e fim | Local |
|---|---|---|---|---|
| Rodrigo Fonseca | Carlos Guilherme | 08/11/2023 | 13:30 até 13:40 | Discord2 |
Fonte: Rodrigo Fonseca, 2023
Tabela 10: Entrevista 7
| Entrevistadores | Entrevistado | Data | Horário de início e fim | Local |
|---|---|---|---|---|
| Mateus Levy | Pedro Luiz | 08/11/2023 | 18:30 até 18:35 | Discord2 |
Fonte: Mateus Levy, 2023
D - Decidir como lidar com as questões éticas
Será empregado o termo de consentimento elaborado na seção de aspectos éticos, com o propósito de obter a autorização dos participantes, garantindo que sejam devidamente respeitados durante e após a atividade.
E - Avaliar (Evaluate), interpretar e apresentar os dados
Após a conclusão da avaliação, a equipe analisará os dados com o objetivo de avaliar o grau de confiabilidade dos resultados obtidos e verificar se podem ser generalizados além da amostra analisada.
Depois de verificar os dados coletados durante as entrevistas, as informações serão analisadas para que possam contribuir com o aprimoramento do sistema.
Planejamento do teste piloto
Os procedimentos para a Realização do Teste Piloto tem como finalidade avaliar o próprio planejamento e analisar se a avaliação, conforme planejada, é capaz de produzir os dados necessários para responder às questões e objetivos do estudo. Durante o teste piloto, os avaliadores devem conduzir a avaliação como se fosse uma sessão normal. Isso permite verificar a clareza e objetividade da linguagem utilizada nas explicações e nos materiais fornecidos, bem como determinar se esses materiais contêm informações adequadas e suficientes para guiar os participantes durante a avaliação.
O teste será realizado no dia 29/10/2023, contando com a presença dos alunos Leandro de Almeida e Oscar de Brito.
apresentação do teste piloto pode ser vista no YouTube.2
Fonte: Leandro de Almeida e Oscar de Brito, 2023
Referências
1. Discord. Disponível em: Discord.
2. YouTube. Disponível em: YouTube.
Bibliografia
1. Bilheteria Digital. Guia de estilo. Repositório do Grupo Bilheteria Digital da disciplina de Interação Humano Computador da Universidade de Brasília, 2023. Disponível em: https://interacao-humano-computador.github.io/2023.1-BilheteriaDigital/analise-de-requisitos/guia-de-estilo/. Acesso em: 28 de out. 2023.
2. Lichess. Guia de estilo. Repositório do Grupo Lichess da disciplina de Interação Humano Computador da Universidade de Brasília, 2023. Disponível em: https://interacao-humano-computador.github.io/2022.2-Lichess/design_avaliacao_desenvolvimento/nivel_1/analise_tarefas/planejamento_avaliacao/. Acesso em: 28 de out. 2023.
3. SIMONE DINIZ JUNQUEIRO BARBOSA, BRUNO SANTANA DA SILVA, Interação Humano-Computador, 1a. Edição, Elsevier, 2010.
Histórico de versão
| Versão | Data | Descrição | Autor(es) | Revisor(es) |
|---|---|---|---|---|
| 1.0 | 28/10/2023 | Adiciona Planejamento da Avaliação | Leandro e Oscar | Jefferson |
| 1.1 | 29/10/2023 | Adicina etepa I do decide e Vídeo do teste piloto | Leandro e Oscar | Jefferson |
| 1.2 | 29/10/2023 | Arrumando Possíveis | Rodrigo | Mateus |