Relatos dos Resultados
Introdução
De Acordo com Barbosa e Silva (2021)1, o relato de resultados da avaliação é utilizado para registrar de maneira sistemática e detalhada as descobertas obtidas durante a avaliação. O documento oferece informações sobre como os usuários interagem com o sistema. Através desse resultado, é possível avaliar a qualidade do uso da solução e identificar problemas na interação e na interface que possam comprometer a experiência do usuário. Este documento apresenta os resultados obtidos durante as avaliações dos Protótipos de Papel.
Relato - Verificação de Submissão e Ranking de Contest
Devido as atividades serem pequenas os membros da equipe João Artur e Diego Sousa optaram por realizar a entrevista em conjunto. Abaixo estão os resultados da prototipação
Objetivos e Escopo da Avaliação
A avaliação teve como objetivo validar se o Protótipo de Papel Verificação de Submissões e Ranking de Contest está de acordo com o fluxo de atividades do CD-MOJ e identificar áreas de melhoria para fornecer um suporte mais eficaz aos usuários.
Método de Avaliação Empregado
O método de avaliação foi uma combinação de observação e entrevistas com o usuário, conforme o framework DECIDE2. Nela foi pedido que o usuário verificasse o fluxo apresentado pelo Protótipo de Papel e após isso ele foi perguntado sobre algumas questões. A tabela 1 apresenta as informações sobre a entrevista e as imagens 1 e 2 apresentam os Protótipos de Papel:
Tabela 1 - Cronograma da Entrevista
| Entrevistador(es) | Entrevistado(s) | Horário | Duração | Data | Local |
|---|---|---|---|---|---|
| João Artur e Diego Sousa | Iago | 10:00 | 5 minutos | 19/06/2023 | FGA |
Fonte: João Artur e Diego Sousa
Imagem 1 - Protótipo de Papel Verificação de Submissão
Fonte: João Artur
Imagem 2 - Protótipo de Papel Ranking de Contest
Fonte:Diego Sousa
Número e Perfil dos Usuários e Avaliadores
O participante se encaixa no perfil de usuário, ele é um usuário de entre 18 e 30 anos, estudante de ensino superior e usuário frequente do CD-MOJ.
Sumário dos Dados Coletados
Durante a entrevista foram coletados dados sobre, a interação do usuário com o sistema, feedbacks sobre o Protótipo de Papel e as respostas das perguntas presentes no planejamento da avaliação.
Interpretação e Análise dos Dados
A partir da entrevista realizada e da observação do usuário, pode-se concluir que os Protótipos de Papel das tarefas de Verificar Submissões e Ranking de Contest está em conformidade com a realidade e atende às necessidades dos usuários do CD-MOJ. O Usuário sugeriu que todas as informações no site fossem disponibilizadas em português, atualmente o inglês predomina no site.
Lista dos Problemas Encontrados
O usuário não relatou problemas, porém sugeriu que o site possuisse apenas o português como linguagem e não a junção de termos em diferentes línguas, como ocorre atualmente.
Planejamento para o Reprojeto do Sistema
As mudanças sugeridas pelo usuário serão adicionadas ao Protótipo de Papel, a alteração será realizada pelo entrevistador conforme o cronograma presente na tabela 2 a seguir:
Tabela 2 - Correção do Protótipo de Papel.
| Entrevistador | Data | Alteração |
|---|---|---|
| João Artur e Diego Sousa | 23/06/2024 | Alterar os termos em inglês para português |
Fonte: João Artur e Diego Sousa.
Gravação da Entevista
Relato - Tutorial de Resolução de Questões Pós-Contest
Objetivos e Escopo da Avaliação
A avaliação teve como objetivo validar se o Protótipo de Papel Tutorial de Resolução de Questões Pós-Contest está de acordo com o fluxo de atividades do CD-MOJ e identificar áreas de melhoria para fornecer um suporte mais eficaz aos usuários.
Método de Avaliação Empregado
O método de avaliação foi uma combinação de observação e entrevistas com o usuário, conforme o framework DECIDE2. Nela foi pedido que o usuário verificasse o fluxo apresentado pelo Protótipo de Papel e após isso ele foi perguntado sobre algumas questões. A tabela 3 apresenta as informações sobre a entrevista e as imagens 3, 4, 5 e 6 apresentam os Protótipos de Papel:
Tabela 3 - Cronograma da Entrevista
| Entrevistador(es) | Entrevistado(s) | Horário | Duração | Data | Local |
|---|---|---|---|---|---|
| Arthur Alves | Luan Mateus | 16:00 | 5 minutos | 19/06/2023 | ITRAC (LDTEA) - FGA |
Fonte: Arthur Alves
Imagem 3 - Tela inicial do contest
Fonte: Arthur Alves
Imagem 4 - Popup de tutorial
Fonte: Arthur Alves
Imagem 5 - Selecionar problema
Fonte: Arthur Alves
Imagem 6 - Popup com a resolução do problema
Fonte: Arthur Alves
Número e Perfil dos Usuários e Avaliadores
O participante se encaixa no perfil de usuário, ele é um usuário de entre de 21 anos, estudante de ensino superior (cursa Engenharia de Software) e usuário frequente do CD-MOJ.
Sumário dos Dados Coletados
Durante a entrevista foram coletados dados sobre, a interação do usuário com o sistema, feedbacks sobre o Protótipo de Papel e as respostas das perguntas presentes no planejamento da avaliação.
Interpretação e Análise dos Dados
A partir da entrevista realizada e da observação do usuário, pode-se concluir que os Protótipos de Papel das tarefas de Tutorial de Resolução de Questões Pós-Contest está em conformidade com a realidade e atende às necessidades dos usuários do CD-MOJ. O Usuário sugeriu que todas as informações no site fossem disponibilizadas em português, atualmente o inglês predomina no site.
Lista dos Problemas Encontrados
O usuário não relatou problemas.
Planejamento para o Reprojeto do Sistema
Não houve mudanças sugeridas pelo entrevistado.
Gravação da Entevista
Relato - Submissão de Problemas
Objetivos e Escopo da Avaliação
A avaliação teve como objetivo validar se o Protótipo de papel relacionado a tarefa de Submissão de Problemas está de acordo com o fluxo de atividades do CD-MOJ e identificar áreas de melhoria para fornecer um suporte mais eficaz aos usuários.
Método de Avaliação Empregado
O método de avaliação foi uma combinação de observação e entrevistas com o usuário, conforme o framework DECIDE2. Nela foi pedido que o usuário verificasse o fluxo apresentado pelo Protótipo de Papel e após isso ele foi perguntado sobre algumas questões. A tabela 3 apresenta as informações sobre a entrevista e as imagens 3, 4, 5 e 6 apresentam os Protótipos de Papel:
Tabela 3 - Cronograma da Entrevista
| Entrevistador(es) | Entrevistado(s) | Horário | Duração | Data | Local |
|---|---|---|---|---|---|
| Eric Silveira | William Bernardo | 16:20 | 5 minutos | 19/06/2023 | ITRAC (LDTEA) - FGA |
Fonte: Eric Silveira
A seguir na imagem 7, temos a representação do protótipo de papel com seus respectivos passos que foi utilizado na avaliação.
Imagem 7 - Tela inicial do Contest
Fonte: Eric Silveira
Número e Perfil dos Usuários e Avaliadores
O participante se encaixa no perfil de usuário, ele é um usuário de 21 anos, estudante de ensino superior (cursa Engenharia de Software) e usuário frequente do CD-MOJ.
Sumário dos Dados Coletados
Durante a entrevista foram coletados dados sobre, a interação do usuário com o sistema, feedbacks sobre o Protótipo de Papel e as respostas das perguntas presentes no planejamento da avaliação.
Interpretação e Análise dos Dados
A partir da entrevista realizada e da observação do usuário, pode-se concluir que os Protótipos de Papel das tarefas de Submissão de Problemas está em conformidade com a realidade e atende às necessidades dos usuários do CD-MOJ. O usuário relatou que o protótipo de papel está atendendo as expectativas e é de fácil navegabilidade.
Lista dos Problemas Encontrados
O usuário não relatou problemas, afirmou que o uso é satisfatório.
Planejamento para o Reprojeto do Sistema
Não houve mudanças sugeridas pelo entrevistado.
Gravação da Entrevista
Relato - Criação de Contest
Objetivos e Escopo da Avaliação
A avaliação teve como objetivo validar se o Protótipo de Papel Criação de Contest está de acordo com o fluxo de atividades do CD-MOJ e identificar áreas de melhoria para fornecer um suporte mais eficaz aos usuários.
Método de Avaliação Empregado
O método de avaliação foi uma combinação de observação e entrevistas com o usuário, conforme o framework DECIDE2. Nela foi pedido que o usuário verificasse o fluxo apresentado pelo Protótipo de Papel e após isso ele foi perguntado sobre algumas questões. A tabela 4 apresenta as informações sobre a entrevista e as imagens 7, 8 e 9 apresentam os Protótipos de Papel:
Tabela 4 - Cronograma da Entrevista
| Entrevistador(es) | Entrevistado(s) | Horário | Duração | Data | Local |
|---|---|---|---|---|---|
| Douglas Marinho | Felipe Motta | 09:50 | 5 minutos | 19/06/2023 | ITRAC (Contâiner) - FGA |
Fonte: Douglas Marinho
Imagem 8 - Formulário em site
Fonte: Douglas Marinho
Imagem 9 - PopUps abertos
Fonte: Douglas Marinho
Imagem 10 - Template para .txt
Fonte: Douglas Marinho
Número e Perfil dos Usuários e Avaliadores
O participante se encaixa no perfil de usuário, ele é um usuário de entre de 21 anos, estudante de ensino superior (cursa Engenharia de Software) e usuário frequente do CD-MOJ.
Sumário dos Dados Coletados
Durante a entrevista foram coletados dados sobre, a interação do usuário com o sistema, feedbacks sobre o Protótipo de Papel e as respostas das perguntas presentes no planejamento da avaliação.
Interpretação e Análise dos Dados
A partir da entrevista realizada e da observação do usuário, pode-se concluir que os Protótipos de Papel das tarefas de Criação de Contest está em conformidade com a realidade e atende às necessidades dos usuários do CD-MOJ. O Usuário sugeriu que todas as informações no site fossem disponibilizadas em português, atualmente o inglês predomina no site.
Lista dos Problemas Encontrados
O usuário não relatou problemas.
Planejamento para o Reprojeto do Sistema
Não houve mudanças sugeridas pelo entrevistado.
Gravação da Entevista
Relato - Criação de Problemas
Objetivos e Escopo da Avaliação
A avaliação teve como objetivo validar se o Protótipo de papel relacionado com a tarefa de Criação de Problemas está de acordo com o fluxo de atividades do CD-MOJ e identificar áreas de melhoria para fornecer um suporte mais eficaz aos usuários.
Método de Avaliação Empregado
O método de avaliação foi uma combinação de observação e entrevistas com o usuário, conforme o framework DECIDE2. Nela foi pedido que o usuário verificasse o fluxo apresentado pelo Protótipo de Papel e após isso ele foi perguntado sobre algumas questões. A tabela 5 apresenta as informações sobre a entrevista e as imagens 10, 11 e 12 apresentam os Protótipos de Papel:
Tabela 5 - Cronograma da Entrevista
| Entrevistador(es) | Entrevistado(s) | Horário | Duração | Data | Local |
|---|---|---|---|---|---|
| Luiz Gustavo | Lidiane | 20:30 | 5 minutos | 19/06/2023 | Flávio Joias |
Fonte: Luiz Gustavo
Imagem 11 - Aba de edição de problemas
Fonte: Luiz Gustavo
Imagem 12 - Aba de criação de problemas
Fonte: Luiz Gustavo
Imagem 13 - Template para criação de problema em pdf
Fonte: Luiz Gustavo
Número e Perfil dos Usuários e Avaliadores
A participante se encaixa no perfil de usuário, ela é uma usuária de 30 anos, formada em ciência da computação e já utilizou o CD-MOJ algumas vezes.
Sumário dos Dados Coletados
Durante a entrevista foram coletados dados sobre, a interação do usuário com o sistema, feedbacks sobre o Protótipo de Papel e as respostas das perguntas presentes no planejamento da avaliação.
Interpretação e Análise dos Dados
A partir da entrevista realizada e da observação do usuário, pode-se concluir que o Protótipo de Papel da tarefa de Criação de Problemas (Administrador) está em conformidade com a realidade e atende às necessidades dos usuários do CD-MOJ. O usuário relatou que o protótipo de papel está atendendo as expectativas e é de fácil navegabilidade.
Lista dos Problemas Encontrados
O usuário não relatou problemas, afirmou que o uso é satisfatório.
Planejamento para o Reprojeto do Sistema
Não houve mudanças sugeridas pelo entrevistado.
Gravação da Entrevista
Referências Bibliográficas
1. Barbosa, S. D. J.; Silva, B. S. da; Silveira, M. S.; Gasparini, I.; Darin, T.; Barbosa, G. D. J. (2021) Interação Humano-Computador e Experiência do usuário. Capítulo 11 Planejamento da Avaliação de IHC, tópico 11.7.5 Consolidação e Relato dos Resultados, página 279 . Autopublicação. ISBN: 978-65-00-19677-1.
2. Barbosa, S. D. J.; Silva, B. S. da; Silveira, M. S.; Gasparini, I.; Darin, T.; Barbosa, G. D. J. (2021) Interação Humano-Computador e Experiência do usuário. Capítulo 11 Planejamento da Avaliação de IHC, tópico 11.8 O Framework DECIDE, página 279 e 280. Autopublicação. ISBN: 978-65-00-19677-1.
Histórico de Versão
| Versão | Data | Data Prevista de Revisão | Descrição | Autor(es) | Revisor(es) |
|---|---|---|---|---|---|
1.0 |
19/06/2024 | 19/06/2024 | Criação do documento, introdução e relato do protótipo de papel de verificação de submissões e ranking de Contest | João Artur | Eric Silveira |
1.1 |
19/06/2024 | 19/06/2024 | Relato de Tutorial de Resolução de Questões Pós-Contest | Arthur Alves | Eric Silveira |
1.2 |
19/06/2024 | 20/06/2024 | Relato da Submissão de Problema | Eric Silveira | Douglas Marinho e João Artur |
1.3 |
19/06/2024 | 19/06/2024 | Relato de Criação de Contest | Douglas Marinho | Eric Silveira |
1.4 |
19/06/2024 | 20/06/2024 | Relato de Criação de Problema | Luiz Gustavo | Eric Silveira |