Verificação

Introdução

Dado o planejamento da atividade, aqui serão exibidos os procedimentos realizados e os resultados encontrados pela atividade de verificação descrita no planejamento de verificação referente à etapa 5 para o grupo 6 da disciplina de IHC.

Objetivo

O objetivo desse documento é apresentar a metodologia adotada, os autores, os checklists de cada artefato produzido e seus respectivos resultados, conforme descritos no planejamento.

Metodologia

Para responder as perguntas dos checklists feitos anteriormente no planejamento, o avaliador usará o método de inspeção para responder as perguntas com as opções "SIM", "NÃO" e "INCOMPLETO". Também será gerado um espaço adicional para que possa escrever observações em cada pergunta. Ao completar a verificação da checklist do artefato, será apresentado um gráfico "pizza" com as respostas para uma melhor visualização assim como os problemas encontrados e sugestões de correções, quando cabível.

Participantes

A tabela 1 a seguir resume os participantes que partiparam como avaliadores desta verificação.

Tabela 1 - Avaliadores da Verificação

Artefato	Avaliador
Relato do Resultado - Análise de Tarefas	Lucas Meireles
Relato do Resultado - Storyboard	Lucas Meireles
Planejamento da Avaliação do Protótipo de Papel	Lucas Meireles
Planejamento do Relato dos Resultados - Protótipo de Papel	Lucas Meireles

Fonte: MEIRELES, Lucas O.. 2024.

Padronização

A tabela 2 a seguir apresenta os dados obtidos na verificação de todos os artefatos na questão padronização, também presente no documento de planejamento da atividade aqui realizada:

Tabela 2 - Verificação da padronização

ID	Descrição	Avaliação	Observações
1	Os artefatos possuem introdução?	SIM	--
2	Os artefatos possuem uma bibliografia/referência bibliográfica?	INCOMPLETO	Relato do Resultado - Análise de Tarefas Possui uma área para bibliografia com texto genérico. Referencial Bibliográfico não foi chamado dentro do texto. Relato do Resultado - Storyboard Mesma situação do comentário anterior.
3	Os artefatos possuem um histórico de versões com descrição, versões, data de criação, autores e revisores?	INCOMPLETO	GERAL Nenhum dos artefatos possui revisor.
4	Em cada artefato, todas as tabelas e imagens são chamadas no texto, possuem legendas e fontes seguindo a norma ABNT?	NÃO	Relato do Resultado - Análise de Tarefas Enumeração de tabelas repetidas e não padronizadas, há diferenças nos chamados em texto e nos títulos, além de tabelas sem conteúdo. Relato do Resultado - Storyboard Mesma situação do comentário anterior.
5	Em cada artefato, todos os textos estão na norma padrão? Estão seguindo um padrão (centralizados, justificado, alinhado a esquerda)?	SIM	-

Fonte: MEIRELES, Lucas O.. 2024.

Acompanhamento

A figura 01 abaixo apresenta o gráfico "pizza" referente às respostas da verificação da tabela 2.

Figura 01 - Gráfico dos resultados de Padronização

Fonte: MEIRELES, Lucas O.. 2024.

Relato do Resultado - Análise de Tarefas

A tabela 3 abaixo apresenta os dados obtidos na verificação da checklist do Relato do Resultado - Análise de Tarefas ², esse checklist estando presente na etapa de planejamento da verificação:

Tabela 3 - Checklist Resultados - Análise de Tarefas

ID	Descrição	Avaliação	Observações
6	Há relato de resultados para todas as tarefas previstas?	NÃO	Há registro de apenas 2 reuniões, sendo elas referentes às funções de "Emitir CRLV-e" e "Solicitar Permissão Internacional para Dirigir"
7	Há pelo menos 1 resultado de tarefa para cada integrante do grupo?	NÃO	Apenas 2 membros participaram da entrega da etapa, sendo eles Pedro Sena e Filipe Carvalho
8	O planejamento de relato de resultados está sendo respeitado?	INCOMPLETO	Não houve devida atualização dos horários das entrevistas que foram realizadas e não há registro do retrabalho.
9	Há entrevista disponibilizada por um vídeo na categoria não listado?	SIM	-
10	O horário, local e duração da entrevista foram informados?	SIM	-
11	São apresentados os dados do entrevistado?	INCOMPLETO	Ambas entrevistas apresentam o nome do entrevistado, porém apenas 1 comenta sobre a idade do mesmo e nenhum enuncia mais informações, como ocupação e escolaridade.
12	Há confirmação de autorização para registro audio-visual da entrevista por parte do entrevistado?	INCOMPLETO	A entrevista do integrante Filipe Carvalho consta a confirmação de participação com o termo de consentimento, já a outra entrevista não consta tal confirmação.
13	As perguntas previstas no planejamento foram seguidas na entrevista?	SIM	-
14	As respostas das perguntas da entrevista foram apresentadas no relato?	INCOMPLETO	Apenas a entrevista do integrante Pedro Sena consta todas as respostas de forma escrita.
15	Foram apresentados os feedbacks do usuário à respeito da tarefa?	SIM	-
16	São apresentados comentários e/ou mudanças previstas para a tarefa após a apresentação?	NÃO	-

Fonte: MEIRELES, Lucas O.. 2024.

Acompanhamento

A figura 02 abaixo apresenta o gráfico "pizza" referente às respostas da verificação da tabela 3.

Figura 02 - Gráfico dos resultados do Relato - Análise de Tarefas

Fonte: MEIRELES, Lucas O.. 2024.

Problemas Encontrados e Análise dos Dados

Abaixo estão melhor exemplificados os problemas encontrados e as justificativas da resposta do resultado da verificação do artefato de Relato do Resultado - Análise de Tarefas, além de também conter sugestões de correção para o grupo responsável.

ID 2 - Os artefatos possuem uma bibliografia/referência bibliográfica?

Apesar de conter uma área para Bibliografia, a mesma é apenas uma cópia genérica para alteração posterior a qual não foi realizada, deixando um texto genérico e sem sentido ao documento. O referencial bibliográfico apresentado não é chamado no texto.

ID 3 - Os artefatos possuem um histórico de versões com descrição, versões, data de criação, autores e revisores?

Não há revisor.

ID 4 - Em cada artefato, todas as tabelas e imagens são chamadas no texto, possuem legendas e fontes seguindo a norma ABNT?

Existem numerações de tabelas sendo repetidas, os nomes das tabelas não estão padronizados no documento, existem diversas tabelas genéricas como "placeholder" para ajuste posterior porém não houve edição até então.

ID 6 - Há relato de resultados para todas as tarefas previstas?

No momento da verificação, haviam apenas 2 tarefas apresentadas no documento, mesmo que houvesse local temporário para a edição e consequente inserção das demais tarefas pelos outros integrantes.

ID 7 - Há pelo menos 1 resultado de tarefa para cada integrante do grupo?

Conforme o comentário anterior, apenas 2 integrantes realizaram as entrevistas e apresentaram os resultados.

ID 8 - O planejamento de relato de resultados está sendo respeitado?

A tabela geral de entrevistas a serem realizadas não foi respeitada e não há o devido registro do retrabalho de correção.

ID 11 - São apresentados os dados do entrevistado?

Alguns dados, os quais foram recolhidos em entrevista, não são exibidos como resposta de forma textual, como ocupação e escolaridade.

ID 12 - Há confirmação de autorização para registro audio-visual da entrevista por parte do entrevistado?

Apenas 1 das entrevistas (no caso do integrante Filipe Carvalho) apresentou a leitura e aceite do entrevistado para os termos de consentimento para a participação da avaliação.

ID 14 - As respostas das perguntas da entrevista foram apresentadas no relato?

A entrevista do integrante Filipe Carvalho não apresentou todas as respostas às perguntas previstas de forma textual.

Sugestões de Correção

Com base nos problemas encontrados e na análise dos dados encontrados, fica sugerido que o grupo faça as seguintes correções:

Padronizar títulos e fontes de tabelas.
Remover os textos de base para os demais integrantes sobescreverem.
Encaminhar a revisão para algum membro ativo.
Identificar e relatar qual é o perfil do usuário para confirmar que os entrevistados se encaixam no mesmo.
Certificar de coletar a autorização para gravação da avaliação com o entrevistado.
Estruturar de forma clara as perguntas e respostas de cada entrevistado.
Estudar e apresentar como os resultados serão trabalhados.

Relato de Resultado - Storyboard

A tabela 4 abaixo apresenta os dados obtidos na verificação da checklist do Relato do Resultado - Storyboard ³, esse checklist estando presente na etapa de planejamento da verificação:

Tabela 4 - Checklist Resultados - Storyboard

ID	Descrição	Avaliação	Observações
17	Há relato de resultados para todas as tarefas previstas?	NÃO	Apenas 2 das 6 entrevistas previstas foram realizadas
18	Há pelo menos 1 resultado de storyboards para cada integrante do grupo?	NÃO	Apenas 2 integrantes apresentaram contribuição
19	O planejamento de relato de resultados está sendo respeitado?	INCOMPLETO	Não há gravação disponível para uma das entrevistas.
20	Há identificação e exibição do storyboard sendo tratado em cada relato?	NÃO	Não é possível visualizar na gravação o storyboard aplicado e não há apresentação ou referência ao mesmo no texto.
21	Há entrevista disponibilizada por um vídeo na categoria não listado?	INCOMPLETO	Há apenas 1 vídeo presente
22	O horário, local e duração da entrevista foram informados?	SIM	-
23	São apresentados os dados do entrevistado?	INCOMPLETO	Há ausência de maiores dados de identificação de perfil.
24	Há confirmação de autorização para registro audio-visual da entrevista por parte do entrevistado?	NÃO	Na entrevista presente no documento, não houve leitura ou confirmação de autorização
25	As perguntas previstas no planejamento foram seguidas na entrevista?	SIM	-
26	As respostas das perguntas da entrevista foram apresentadas no relato?	SIM	-
27	Foram apresentados os feedbacks do usuário a respeito do storyboard?	SIM	-
28	São apresentados comentários e/ou mudanças previstas para o storyboard após a apresentação?	NÃO	-

Fonte: MEIRELES, Lucas O.. 2024.

Acompanhamento

A figura 03 abaixo apresenta o gráfico "pizza" referente às respostas da verificação da tabela 4.

Figura 03 - Gráfico dos resultados do Relato - Storyboard

Fonte: MEIRELES, Lucas O.. 2024.

Problemas Encontrados e Análise dos Dados

Abaixo estão melhor exemplificados os problemas encontrados e as justificativas da resposta do resultado da verificação do artefato de Relato do Resultado - Storyboard, além de também conter sugestões de correção para o grupo responsável.

ID 2 - Os artefatos possuem uma bibliografia/referência bibliográfica?

Apesar de conter uma área para Bibliografia, a mesma é apenas uma cópia genérica para alteração posterior a qual não foi realizada, deixando um texto genérico e sem sentido ao documento. O referencial bibliográfico apresentado não é chamado no texto.

ID 3 - Os artefatos possuem um histórico de versões com descrição, versões, data de criação, autores e revisores?

Não há revisor.

ID 4 - Em cada artefato, todas as tabelas e imagens são chamadas no texto, possuem legendas e fontes seguindo a norma ABNT?

Existem numerações de tabelas sendo repetidas, os nomes das tabelas não estão padronizados no documento, existem diversas tabelas genéricas como "placeholder" para ajuste posterior porém não houve edição até então.

ID 17 - Há relato de resultados para todas as tarefas previstas?

No momento da verificação, haviam apenas 2 tarefas apresentadas no documento, mesmo que houvesse local temporário para a edição e consequente inserção das demais tarefas pelos outros integrantes.

ID 18 - Há pelo menos 1 resultado de tarefa para cada integrante do grupo?

Conforme o comentário anterior, apenas 2 integrantes realizaram as entrevistas e apresentaram os resultados.

ID 19 - O planejamento de relato de resultados está sendo respeitado?

Não há gravação disponibilizada para a segunda entrevista.

ID 20 - Há identificação e exibição do storyboard sendo tratado em cada relato?

Não é possível identificar no documento ou na gravação qual o storyboard sendo utilizado para a avaliação.

ID 21 - Há entrevista disponibilizada por um vídeo na categoria não listado?

Não é possível confirmar sobre a segunda entrevista realizada.

ID 23 - São apresentados os dados do entrevistado?

Há ausência de maiores dados de identificação dos entrevistados.

ID 24 - Há confirmação de autorização para registro audio-visual da entrevista por parte do entrevistado?

Na entrevista que se pode acessar, não houve confirmação do termo de consentimento.

ID 28 - São apresentados comentários e/ou mudanças previstas para o storyboard após a apresentação?

Não é apresentado a função e utilização dos dados recolhidos.

Sugestões de Correção

Com base nos problemas encontrados e na análise dos dados encontrados, fica sugerido que o grupo faça as seguintes correções:

Padronizar títulos e fontes de tabelas.
Remover os textos de base para os demais integrantes sobescreverem.
Encaminhar a revisão para algum membro ativo.
Identificar e relatar qual é o perfil do usuário para confirmar que os entrevistados se encaixam no mesmo.
Certificar de coletar a autorização para gravação da avaliação com o entrevistado.
Estruturar de forma clara as perguntas e respostas de cada entrevistado.
Estudar e apresentar como os resultados serão trabalhados.
Disponibilizar de forma prática os materiais sendo utilizados na entrevista no texto de relato.

Planejamento da Avaliação do Protótipo de Papel

A tabela 5 abaixo apresenta os dados obtidos na verificação da checklist do Planejamento da Avaliação do Protótipo de Papel ⁴, esse checklist estando presente na etapa de planejamento da verificação:

Tabela 5 - Checklist Planejamento - Protótipo de Papel

ID	Descrição	Avaliação	Observações
29	Há aplicação de algum Framework?	SIM	-
30	Há explicação do motivo de se adotar a Prototipação de Papel?	SIM	-
31	Há definição e explicação de como será executada a avaliação com o protótipo?	INCOMPLETO	Há uma breve menção da metodologia, porém não há explicação e/ou definições de como irão acontecer.
32	Há explicação de como serão produzidos os Protótipos de Papel?	NÃO	-
33	Há planejamento para protótipos de pelo menos 1 tarefa por integrante do grupo?	SIM	-
34	Foram apresentados os custos da avaliação?	INCOMPLETO	Há menção de não existirem custos, porém as ferramentas incluem situações de custo
35	Foi definido um roteiro de entrevistas, com local, entrevistado, horário e duração estimada?	NÃO	-
36	É explicado o número de entrevistadores para cada entrevista?	NÃO	-
37	Está previsto um pedido de autorização para o registro audio-visual da entrevista?	SIM	-
38	Está previsto um roteiro de observação da avaliação para ser preenchida pelo entrevistador?	NÃO	-
39	Está previsto um roteiro de perguntas para o entrevistado?	NÃO	-
40	Há previsão de realização de teste piloto?	INCOMPLETO	Há menção mas não especificação

Fonte: MEIRELES, Lucas O.. 2024.

Inspeção

O vídeo 1 a seguir apresenta o avaliador Lucas Meireles realizando e comentando a respeito da inspeção do artefato "Planejamento da Avaliação do Protótipo de Papel" do projeto do grupo 6:

Vídeo 1 - Inpesção Planejamento da Avaliação do Protótipo de Papel.

Fonte: MEIRELES, Lucas O.. 2024.

O vídeo tambem pode ser acessado clicando aqui

Acompanhamento

A figura 04 abaixo apresenta o gráfico "pizza" referente às respostas da verificação da tabela 5.

Figura 04 - Gráfico dos resultados do Planejamento da Avaliação do Protótipo de Papel

Fonte: MEIRELES, Lucas O.. 2024.

Problemas Encontrados e Análise dos Dados

Abaixo estão melhor exemplificados os problemas encontrados e as justificativas da resposta do resultado da verificação do artefato de Planejamento da Avaliação do Protótipo de Papel, além de também conter sugestões de correção para o grupo responsável.

ID 3 - Os artefatos possuem um histórico de versões com descrição, versões, data de criação, autores e revisores?

Não há revisor.

ID 31 - Há definição e explicação de como será executada a avaliação com o protótipo?

Não há uma definição clara e explicativa dos procedimentos da entrevista e da utilização dos protótipos.

ID 32 - Há explicação de como serão produzidos os Protótipos de Papel?

Não há explicação de como serão montados os protótipos, apenas o local eletrônico.

ID 34 - Foram apresentados os custos da avaliação?

As ferramentas utilizadas para justificar não haver custos podem gerar os próprios custos, como deslocamentos, tempo gasto para entrevista, avaliação, produção dos protótipos.

ID 35 - Foi definido um roteiro de entrevistas, com local, entrevistado, horário e duração estimada?

Não há cronograma já registrado de entrevistas

ID 36 - É explicado o número de entrevistadores para cada entrevista?

Não há menção de quantos integrantes devem estar presentes e suas funções.

ID 38 - Está previsto um roteiro de observação da avaliação para ser preenchida pelo entrevistador?

Não há menção das tarefas de cada entrevistador além de um acompanhamento sem roteiro claro e objetivo.

ID 39 - Está previsto um roteiro de perguntas para o entrevistado?

Não há presença de perguntas ante, durante ou pós entrevista.

ID 40 - Há previsão de realização de teste piloto?

Há uma delimitação genérica porém faltam informações do teste piloto em si.

Sugestões de Correção

Com base nos problemas encontrados e na análise dos dados encontrados, fica sugerido que o grupo faça as seguintes correções:

Encaminhar a revisão para algum membro ativo.
Certificar de coletar a autorização para gravação da avaliação com o entrevistado.
Programar um roteiro de execução das entrevistas.
Clarificar como devem ser feitos os protótipos para cada tarefa que será trabalhada.
Atualizar e realizar o teste piloto.
Reanalisar os custos e ferramentas.

Planejamento do Relato dos Resultados - Protótipo de Papel

A tabela 6 abaixo apresenta os dados obtidos na verificação da checklist do Planejamento do Relato dos Resultados - Protótipo de Papel ⁵, esse checklist estando presente na etapa de planejamento da verificação:

Tabela 6 - Checklist Planejamento de Relato de Resultados - Protótipo de Papel

ID	Descrição	Avaliação	Observações
41	Há referência ao planejamento de avaliação dos protótipos de papel?	SIM	-
42	O planejamento de resultados coincide com o esperado na avaliação dos protótipos?	SIM	-
43	Há previsão de registro das entrevistas realizadas no documento de resultados?	SIM	-
44	Está previsto a identificação e demais dados do entrevistado no relato de resultados?	SIM	-
45	Há previsão de como serão apresentados os dados das perguntas e das anotações dos entrevistadores? (forma puramente textual, gráficos, tabelas)	SIM	-
46	Há previsão de como os dados serão utilizados para o projeto?	NÃO	-

Fonte: MEIRELES, Lucas O.. 2024.

Acompanhamento

A figura 05 abaixo apresenta o gráfico "pizza" referente às respostas da verificação da tabela 6.

Figura 05 - Gráfico dos resultados do Planejamento do Relato dos Resultados - Protótipo de Papel.

Fonte: MEIRELES, Lucas O.. 2024.

Problemas Encontrados e Análise dos Dados

Abaixo estão melhor exemplificados os problemas encontrados e as justificativas da resposta do resultado da verificação do artefato de Planejamento do Relato dos Resultados - Protótipo de Papel, além de também conter sugestões de correção para o grupo responsável.

ID 3 - Os artefatos possuem um histórico de versões com descrição, versões, data de criação, autores e revisores?

Não há revisor.

ID 46 - Há previsão de como os dados serão utilizados para o projeto?

Não há presença de como os dados serão utilizados futuramente.

Sugestões de Correção

Com base nos problemas encontrados e na análise dos dados encontrados, fica sugerido que o grupo faça as seguintes correções:

Encaminhar a revisão para algum membro ativo.
Revisar como os dados serão trabalhados
Verificar padronização de fontes

Referências bibliográficas

1. Barbosa, S. D. J.; Silva, B. S. da; Silveira, M. S.; Gasparini, I.; Darin, T.; Barbosa, G. D. J. (2021) Interação Humano-Computador e Experiência do usuário. Autopublicação.

2. VIEIRA, Vinicius. Relato do Resultado - Análise de Tarefas. Repositório do Grupo DETRAN-DF da disciplina de Interação Humano Computador da Universidade de Brasília, 2024. Disponível em: https://interacao-humano-computador.github.io/2024.1-DETRANDF/design-avaliacao-desenvolvimento/nivel-1/analise-de-tarefas-dad/relato-resultado-at/. Acesso em: 12 junho 2024.

3. VIEIRA, Vinicius. Relato do Resultado - Storyboard. Repositório do Grupo DETRAN-DF da disciplina de Interação Humano Computador da Universidade de Brasília, 2024. Disponível em: https://interacao-humano-computador.github.io/2024.1-DETRANDF/design-avaliacao-desenvolvimento/nivel-1/storyboard-dad/relato-resultado-storyboard/. Acesso em: 12 junho 2024.

4. VIEIRA, Vinicius. Planejamento da Avaliação do Protótipo de Papel. Repositório do Grupo DETRAN-DF da disciplina de Interação Humano Computador da Universidade de Brasília, 2024. Disponível em: https://interacao-humano-computador.github.io/2024.1-DETRANDF/design-avaliacao-desenvolvimento/nivel-2/planejamento-avaliacao-pp/. Acesso em: 12 junho 2024.

5. VIEIRA, Vinicius. Planejamento do Relato dos Resultados - Protótipo de Papel. Repositório do Grupo DETRAN-DF da disciplina de Interação Humano Computador da Universidade de Brasília, 2024. Disponível em: https://interacao-humano-computador.github.io/2024.1-DETRANDF/design-avaliacao-desenvolvimento/nivel-2/planejamento-relato-resultados-pp/. Acesso em: 12 junho 2024.

Histórico de Versões

Data	Versão	Descrição	Autor(es)	Data de revisão	Revisor(es)
12/06/2024	`1.0`	Criação e elaboração do documento	Lucas Meireles	12/06/2024	Cainã Freitas