Verificação do Planejamento da Avaliação do Storyboard
Introdução
Após realizado o planejamento geral de como serão realizadas as verificações da etapa 4, neste artefato será produzido de fato a verificação do Planejamento da Avaliação do Storyboard.
Dessa forma, inicialmente serão apresentados os objetivos dessa verificação, a metodologia utilizada para sua realização, os responsáveis por realizá-la e as respostas dos checklists apresentados no planejamento da etapa 4. Além disso, será desenvolvida uma análise e posterior levantamento dos problemas identificados após o respectivo checklist. Sendo assim, a partir das principais incoerências encontradas, será possível trazer sugestões e avaliar a necessidade de retrabalho.
Objetivo
O objetivo deste documento é relatar os resultados das verificações realizadas no que tange o artefato Planejamento da Avaliação do Storyboard da Etapa 4 do Grupo 8.
Metodologia
Os resultados da análise deste artefato foram obtidos através da análise dos checklists de verificação preparados na página de planejamento. Dessa forma, o avaliador irá verificar o respectivo artefato do grupo e responder às questões apresentadas nos checklists, utilizando as opções "Sim", "Não" ou "Incompleto" para as respostas, além de também poder registrar comentários em cada questão analisada para detalhar alguma observação pertinente.
Participantes envolvidos
Conforme explicitado no tópico "Cronograma" do Planejamento da Verificação da Etapa 4, os participantes responsáveis do Grupo 7 e suas respectivas funções são:
- Suzane Duarte, a qual será responsável por realizar a avaliação;
- Luana Torres, a qual será responsável por realizar a revisão do artefato produzido pelo avaliador.
Sumário Dos Dados - Checklists
A Tabela 1 apresenta o Checklist Geral com os dados obtidos a partir da verificação de aspectos gerais que os artefatos devem seguir.
Tabela 1 - Checklist para os Itens Gerais.
| ID | Descrição | Avaliação | Observações |
|---|---|---|---|
| 1 | O artefato possui introdução? | SIM | |
| 2 | O artefato possui uma bibliografia/referência bibliográfica? | SIM | |
| 3 | O artefato possui um histórico de versões com o id e descrição das versões, data, autores e revisores padronizado? | SIM | |
| 4 | Todas as tabelas e imagens são chamadas no texto, possuem legenda e fonte? | NÃO | As fontes apresentadas estão inconsistentes |
| 5 | Todos os textos estão na norma padrão? | SIM | |
| 6 | Os vídeos produzidos estão na categoria "não listado" no youtube? | SIM |
Fonte: Suzane Duarte, 2023.
Já a Tabela 2 apresenta o checklist referente aos itens exigidos para o relato dos resultados segundo Barbosa e Silva (2011, p.358-362).1
Tabela 2 - Checklist para o Planejamento da Avaliação do Storyboard
| ID | Questão | Resposta | Comentário |
|---|---|---|---|
| 1 | O artefato apresenta e utiliza o framework DECIDE para realização do Planejamento da Avaliação do Storyboard? | SIM | |
| 2 | O artefato apresenta os objetivos da Avaliação do Storyboard? | SIM | |
| 3 | O artefato apresenta a metodologia que será utilizada na Avaliação do Storyboard? | SIM | |
| 4 | O artefato apresenta quais as ferramentas e os equipamentos serão utilizados na avaliação? | NÃO | Não há presente no texto quais serão as ferramentas e equipamentos de fato utilizadas |
| 5 | O artefato identifica como ocorrerá o recrutamento dos participantes da Avaliação do Storyboard (perfil e local)? | SIM | |
| 6 | O artefato identifica quantos usuários participarão da Avaliação do Storyboard e a justificativa dessa quantidade? | NÃO | A justificativa apresentada é inválida |
| 7 | O artefato possui um cronograma com data e horário para realização do teste piloto da Avaliação do Storyboard? | NÃO | Inexistente |
| 8 | O artefato possui um cronograma com data e horário para realização da Avaliação do Storyboard? | SIM | |
| 9 | O artefato identifica o orçamento necessário para a Avaliação do Storyboard? | NÃO | O texto não menciona em nenhum momento questões relativas ao orçamento para a atividade |
| 10 | O artefato identifica os recursos de mão-de-obra necessários para conduzir a Avaliação do Storyboard, assim como a preparação e os equipamentos necessários? | NÃO | O texto não identifica claramente esses pontos |
| 11 | O artefato apresenta como serão abordadas as questões éticas? | SIM | |
| 12 | O artefato apresenta o termo de consentimento a ser utilizado na Avaliação? | SIM | |
| 13 | O artefato apresenta quais dados devem ser coletados e como devem ser interpretados? | SIM | |
| 14 | Os storyboards estão relacionados com o artefato da Análise de Tarefas? | SIM |
Fonte: Suzane Duarte, 2023.
Problemas encontrados
A partir do preenchimento da tabela 1 e 2, a seguir serão realizadas as considerações acerca dos itens mencionados com "NÃO".
ID 4: O artefato apresenta quais as ferramentas e os equipamentos serão utilizados na avaliação?
O artefato apresenta o tópico "Recrutamento de usuários entrevistados e ferramentas", porém, em nenhum momento é citado quais serão as ferramentas e equipamentos de fato utilizados. O único comentário encontrado que poderia estar se referindo aos equipamentos seria "podendo ser ao vivo ou via plataforma online", porém, mesmo nesses casos não foi citado o equipamento utilizado para realizar a entrevista via plataforma online.
ID 6: O artefato identifica quantos usuários participarão da Avaliação do Storyboard e a justificativa dessa quantidade?
O texto identifica quantos usuários participarão das entrevistas, mas a justificativa apresentada "Será avaliado 1 storyboard por membro do grupo, cada um com sua tarefa atribuída" não é válida, conforme discutido previamente em sala de aula.
ID 7: O artefato possui um cronograma com data e horário para realização do teste piloto da Avaliação do Storyboard?
O artefato possui um cronograma com data e horário para as outras entrevistas, mas não uma específica para a realização do teste piloto, uma vez que apresenta-se apenas a data em que o teste piloto foi realizado.
ID 9: O artefato identifica o orçamento necessário para a Avaliação do Storyboard?
O texto não menciona em nenhum momento questões relativas ao orçamento para a reaização da atividade, nem ao menos comenta caso fosse o cenário de uma atividade sem nenhum custo.
ID 10: O artefato identifica os recursos de mão-de-obra necessários para conduzir a Avaliação do Storyboard, assim como a preparação e os equipamentos necessários?
O texto não identifica esses pontos de forma concisa, uma vez que apesar da existência de uma tabela contendo o nome de todos os entrevistadores, em nenhum momento é discutido de fato quais são os equipamentos necessários e se apenas os entrevistadores serão a mão-de-obra necessária para a condução da avaliação.
Além dos problemas encontrados a partir das perguntas realizadas, também foi possível observar os seguintes problemas abordados a seguir.
Problemas Gerais
No tópico "Roteiro de perguntas" ao final do texto é citado que os Storyboards estão dispoíveis no link referido, porém, ao clicar nele o redirecionamento de página não funciona, apresentando o erro "404 - Not found".
Ainda nesse tópico, e também no tópico "Cronograma de entrevistas", as fontes das tabelas apresentam grave erro de formatação.
Há a criação do índice 1 para citações das Referências Blibliográficas ao percorrer o texto, porém, em nenhum momento ele é utilizado de fato. Ainda referente às citações, algumas informações são levantadas durante o texto, no entanto, não é apresentado nenhuma fonte para justificar o seu uso, por exemplo, no caso das perguntas da avaliação.
Por fim, foi realizado um paralelo entre os títulos dos Storyboards e dos tópicos apresentados na Análise de Tarefas (HTA e GOMS). A partir disso, foi possível identificar que apesar de se tratarem das mesmas funcionalidades, elas apresentam títulos distintos, o que causou certa confusão ao tentar realizar a conferência uma vez que eles também não se encontravam ordenados da mesma forma nos três artefatos. A seguir é apresentada uma tabela contendo a diferença entre os títulos:
Tabela 3 - Tabela para comparação entre os títulos
| Título nos Storyboards | Título na Análise de Tarefas |
|---|---|
| Consultar processo como cidadão | Pesquisa Processual (Cidadão) |
| Conferência da autenticação do documento | Fazer a conferência da autenticação de documentos (Cidadão) |
| Abertura de um processo | Iniciar um processo (Servidor) |
| Pesquisa Processual de Servidor | Pesquisar um processo (Servidor) |
| Gerar um documento | Gerar Documento (Servidor) |
Fonte: Suzane Duarte, 2023.
Síntese dos dados encontrados
Dessa forma, a partir das respostas coletas nos checklists acima foi possível realizar uma síntese dos dados encontrados em formato de gráfico, conforme pode ser visto na Figura 1.
Figura 1 - Gráfico com resultado das Checklists Geral e da Avaliação do Storyboard
Sugestões de Correções
Por fim, a partir das informações coletas, apresentadas e analisadas acima, sugere-se realizar as seguintes correções:
- Citação das fontes utilizadas para criação das perguntas;
- Correção da formatação das fontes existentes;
- Alteração e/ou adição dos links corretos;
- Apresentar tópicos com as ferramentas e os equipamentos serão utilizados na avaliação;
- Apresentar justificativa plausível para a quantidade de usuários entrevistados na Avaliação do Storyboard;
- Adicionar cronograma para o teste piloto
- Adicionar tópico para o orçamento/custos da avaliação dos storyboards
- Adicionar no tópico condizente todos os recursos utilizados para a realização da avaliação
- Padronizar títulos dos Storyboards e Análise de tarefas
Retrabalho
Para a realização do retrabalho é sugerido que os próprios autores do artefato verificado realizem a correção dos problemas apresentados seguindo a lista de sugestão apresentada no tópico anterior.
Se necessário, outros membros do grupo 8 podem realizar as correções propostas, porém, deve-se informar a mudança realizada na Tabela 4 pois selecionou-se exatamente o responsável por essa página de acordo com a tabela do Histórico de Versões.
O responsável do grupo 7 por essa verificação irá realizar uma revisão das correções feitas, verificando se as correções foram executadas com exatidão. Assim que todas as alterações forem implementadas, deve-se alterar o campo "Status" da Tabela 4 apresentada a seguir de "Em análise" para "Finalizado".
Tabela 4 - Cronograma de Retrabalho.
| Data de Correção | Descrição | Responsável(eis) | Revisor(es) | Status |
|---|---|---|---|---|
| 17/11/2023 | Realizar os ajustes da verificação | Caio Mesquita | Suzane Duarte | Em análise |
Fonte: Suzane Duarte, 2023.
Bibliografia
1. BARBOSA, S. D. J.; SILVA, B. S. Interação Humano-Computador. Rio de Janeiro: Elsevier, 2011.
Histórico de Versões
| Versão | Data | Descrição | Autor(es) | Revisor(es) |
|---|---|---|---|---|
1.0 |
13/11/2023 | Criação da página base | Suzane Duarte | Luana Torres |
1.1 |
14/11/2023 | Adicionando conteúdo para o artefato | Suzane Duarte | Luana Torres |