Relato dos Resultados
Introdução
O presente documento prevê um relato dos resultados das avaliações do protótipo de papel. Logo, os tópicos abordados seguirão os tópicos abordados no artefato de Planejamento da Avaliação do Protótipo de Papel e Planejamento do Relato dos Resultados
Metodologia
O método utilizado para realizar as avaliações dos protótipos foi a entrevista presencial gravada, com a presença de 2 entrevistadores e 1 entrevistado que continha os atributos definidos no nosso documento de Perfil de Usuário. Um dos apresentadores apresentava os artefatos ao usuário, enquanto o outro anotava as impressões obtidas ao analisar o usuário interagindo com o protótipo e as respostas do usuários às perguntas do primeiro entrevistador.
Avaliações
Entrevista Protótipo de papel - Inserir Recursos multimídia em um Projeto
Objetivo e escopo da avaliação
A avaliação feita com a entrevistada Amanda Alves Campos teve como objetivo a avaliação do prototipo de papel - inserir recursos multimídia, para que houvesse a validação do mesmo para o projeto da disciplina.
Método de avaliação
| Entrevistador(es) | Entrevistado(a) | Horário de Início | Horário de Fim | Data | Local |
|---|---|---|---|---|---|
| Caio Lelis e Caio Braga | Amanda Alves Campos | 17:20 | 17:45 | 22/11/2023 | Ailab |
Fonte - Autor: LELIS,Caio.
Seleção de participante
O participante se encaixa no perfil de usuário, pois é um usuário maior de 18 anos e pesquisadora com alguns projetos universitários presentes no currículo Lattes.
Problemas e dificuldades encontradas
- Problema relacionados ao login para execução de tarefas, tendo em vista que não há maneira explícita de fazer login.
- Logo não especificadada.
Sugestões de melhoria
- Sugestão de melhoria proposta pela usuária foi que o prototipo de papel traze-se de maneira mais clara a opção de Login.
- Melhor localização de elementos.
Feedback do usuário
O usuário ficou satisfeito com o prototipo de papel e conseguiu compreender de forma nítida a narrativa e as interaçoes apresentadas.
Análise e interpretação dos resultados
Através da entrevista foi possível evidenciar que mesmo sendo uma função cujo o site não apresentasse a mesma, com a interação proposta tornaria o site com uma funcionalidade útil e agradável para os usuários.
Sumário dos principais resultados
Considerando que a função foi concebida especificamente para os propósitos da disciplina, foram realizadas modificações nas questões da entrevista a fim de aprimorar a experiência do usuário ao longo do processo, mantendo-se alinhadas com o padrão do projeto.
Perguntas Respondidas pela usuária Amanda Alves Campos:
| Perguntas | Tipo de pergunta | Respostas possíveis |
|---|---|---|
| Após simular o uso dessa tarefa (citar a tarefa), você considera a sequência de elementos de interação para executá-la coerente? | Fechada | Sim |
| Alguma questão de interface ou terminologia o confundiu ou foi de difícil entendimento? | Aberta | O login pelo botão atualizar currículo fez com que tivesse dificuldades de encontrar um meio de login |
| A disposição dos elementos de interação auxiliaram na rapidez da execução da sua tarefa? | Fechada | Tirando o Login não explícito, sim |
| Em termos de layout e design, achou alguma parte estranha ou desconexa com o objetivo do site? | Fechada | Sim sim, a parte da funcionalidade 'Inserir recurso multimídia " não mostra oq é cada coisa, o que complica um pouco o entendimento do usuário |
| Quais foram as partes do protótipo de papel que você achou mais intuitivas e fáceis de usar? | Aberta | A questão dos ícones mais atualizados na hora de editar algo fez com que o currículo Lattes ficasse mais intuitivo |
| Você imagina alguma forma de melhorar esta tarefa? | Aberta | Inserir um login mais fácil de se encontrar seria um bom ponto |
Tabela 02 - Roteiro de perguntas
Entrevista feita com a usuária Amanda Alves Campos:
Entrevista Protótipo de papel - Buscar instituição
Objetivo e escopo da avaliação
A avaliação realizada com o entrevistado Igor Penha Campos teve como propósito avaliar o protótipo em papel relacionado à busca por instituições, visando validar sua adequação para a implementação no projeto da disciplina.
Método de avaliação
| Entrevistador(es) | Entrevistado(a) | Horário de Início | Horário de Fim | Data | Local |
|---|---|---|---|---|---|
| Guilherme Basilio | Igor Penha | 14:11 | 14:17 | 22/11/2023 | UAC (UnB) |
Fonte - Autor: BASILIO,Guilherme.
Seleção de participante
O participante se encaixa no perfil de usuário, pois é um usuário maior de 18 anos e pesquisador com alguns projetos universitários presentes no currículo Lattes.
Problemas e dificuldades encontradas
- Quantidade de cliques excessiva para realizar a ação, causando desconforto ao entrevistado.
Sugestões de melhoria
- A ação de buscar instituição poderia ser finalizada na primeira interação.
- Melhorar organização dos elementos na página.
Feedback do usuário
O utilizador demonstrou satisfação em relação ao protótipo em papel, conseguindo compreender de maneira clara tanto a narrativa quanto as interações apresentadas.
Análise e interpretação dos resultados
Por meio da entrevista, tornou-se evidente que, apesar de ser um percurso relativamente breve para concluir a interação, a disposição dos elementos na página está prejudicando a eficiência. Há espaço para otimizar o caminho, reduzindo a distância de páginas necessárias para atingir o objetivo.
Sumário dos principais resultados
Com base nos dados coletados, sugere-se as seguintes correções:
- Diminuir o número de interações necessárias para concluir a busca.
- Aprimorar a organização dos elementos na página.
Entrevista feita com o usuário Igor Penha:
Entrevista Protótipo de papel - Buscar grupo de pesquisa
Objetivo e escopo da avaliação
A avaliação realizada com o entrevistado Bruno Ribeiro teve como propósito avaliar o protótipo em papel relacionado à busca por grupos de pesquisa através do portal do diretório, visando validar sua adequação para a implementação no projeto da disciplina.
Método de avaliação
| Entrevistador(es) | Entrevistado(a) | Horário de Início | Horário de Fim | Data | Local |
|---|---|---|---|---|---|
| Joel Soares | Bruno Ribeiro | 14:20 | 14:24 | 22/11/2023 | UAC (UnB) |
Fonte - Autor: SOARES, Joel.
Seleção de participante
O participante se encaixa no perfil de usuário, pois é um usuário maior de 18 anos e pesquisador com alguns projetos universitários presentes no currículo Lattes.
Problemas e dificuldades encontradas
- O usuário levou mais tempo para conseguir encontrar a opção desejada na página inicial da plataforma Lattes desenhada no protótipo de papel.
Sugestões de melhoria
- O usuário sugeriu a melhor organização da interface da página inicial para tirar o aspecto de "poluição"
Feedback do usuário
O utilizador demonstrou satisfação em relação ao protótipo em papel, conseguindo compreender de maneira clara tanto a narrativa quanto as interações apresentadas. Por fim, ele sugeriu a revisão e o aprimoramento da página inicial, que foi por ele considerado "poluído".
Análise e interpretação dos resultados
Por meio da entrevista, tornou-se evidente que, apesar de ser um percurso relativamente breve para concluir a interação, a disposição dos elementos na página está prejudicando a eficiência. Há espaço para otimizar o caminho, reduzindo a distância de páginas necessárias para atingir o objetivo.
Sumário dos principais resultados
Com base nos dados coletados, sugere-se as seguintes correções:
- Diminuir o número de interações necessárias para concluir a busca.
- Aprimorar a organização dos elementos na página.
Entrevista feita com o usuário Bruno Ribeiro:
Entrevista Protótipo de papel - Buscar Currículo
Objetivo e escopo da avaliação
A avaliação realizada com o entrevistado Igor Penha teve como propósito avaliar o protótipo em papel relacionado à funcionalidade busca de currículo, visando validar sua adequação para a implementação no projeto da disciplina.
Método de avaliação
| Entrevistador(es) | Entrevistado(a) | Horário de Início | Horário de Fim | Data | Local |
|---|---|---|---|---|---|
| Miguel de Frias | Igor Penha | 14:03 | 14:08 | 22/11/2023 | UAC (UnB) |
Fonte - Autor: DE FRIAS, Miguel
Seleção de participante
O participante se encaixa no perfil de usuário, pois é um usuário maior de 18 anos e pesquisador com alguns projetos universitários presentes no currículo Lattes.
Problemas e dificuldades encontradas
- Falta de Objetividade para a realização da ação, na página inicial há muita informação concentrada em pontos específicos devido a má utilização do espaço da tela. Há também informações que são redundantes ao preencher o formulário de busca.
Sugestões de melhoria
- Melhorar a organização dos elementos contidos na página inicial, visando melhor visibilidade para as funcionalidades mais acessadas.
- Evitar campos redundantes no formulário de busca.
- Usar de maneira mais efetiva o espaço da página.
Feedback do usuário
O utilizador demonstrou satisfação em relação ao protótipo em papel, conseguindo compreender de maneira clara tanto a narrativa quanto as interações apresentadas. Porém, dentre todos os problemas ressaltou a concentração de informações no canto esquerdo da página principal, o que levou a um desconforto na utilização.
Análise e interpretação dos resultados
Por meio da entrevista, tornou-se evidente que a disposição dos elementos na página inicial está prejudicando a eficiência. E também foi notado que o formulário de busca possui informações redundantes, além de já possuir muitos campos, levando a uma utilização um pouco cansativa.
Sumário dos principais resultados
Com base nos dados coletados, sugere-se as seguintes correções:
- Verificar os campos necessários e suas informações para fazer uma busca
- Melhorar a organização dos elementos contidos na página inicial, visando melhor visibilidade para as funcionalidades mais acessadas.
Entrevista feita com o usuário Igor Penha:
Entrevista Protótipo de papel - Atualizar currículo
Objetivo e escopo da avaliação
Foi feita uma avaliação com o participante Isaque Santos com o intuito de avaliar a parte de atualzar o curriculo na plataforma lattes.
Método de avaliação
| Entrevistador(es) | Entrevistado(a) | Horário de Início | Horário de Fim | Data | Local |
|---|---|---|---|---|---|
| Doan Filho | Isaque Santos | 18:00 | 18:10 | 22/11/2023 | Ailab |
Fonte - Autor: FILHO,Doan.
Seleção de participante
O participante se encaixa no perfil de usuário, pois é maior de 18 anos e usuário da plataforma lattes.
Problemas e dificuldades encontradas
- Layout mal estruturado
- Confusão ao acessar as opções da bara de navegação
- Barra de navegação mal estruturada
Sugestões de melhoria
- Trazer um layout mais atualizado e bem estruturado
- Barra lateral no canto esquerdo da tela para trazer menos confusão ao acessar a parte de atualizar
- Atualizar a barra de taferas
Feedback do usuário
O usuário teve muita confusão ao tentar acessas as opções da barra de navegação
Análise e interpretação dos resultados
Através da entrevista foi possível evidenciar que mesmo sendo uma função cujo o site não apresentasse a mesma, com a interação proposta tornaria o site com uma funcionalidade útil e agradável para os usuários.
Foi constatado que o site com um layout um pouco antigo e ultrapassado comparado aos dias de hoje podendo assim ser melhorado para que se possa ter uma acessibilidade e ser visualmente melhor
Sumário dos principais resultados
Foi percebido que o temos uma fluidez na hora de fazer a tarefa proposta porém com o interface desatualizada ficou percebido a dificuldade do usuário de recorrer a algumas condições da plataforma.
Perguntas Respondidas pelo usuário Isaque Santos:
| Perguntas | Tipo de pergunta | Resposta do usuário |
|---|---|---|
| Após simular o uso dessa tarefa (citar a tarefa), você considera a sequência de elementos de interação para executá-la coerente? | Fechada | Sim |
| Alguma questão de interface ou terminologia o confundiu ou foi de difícil entendimento? | Aberta | Não teve nenhuma |
| A disposição dos elementos de interação auxiliaram na rapidez da execução da sua tarefa? | Fechada | Sim |
| Em termos de layout e design, achou alguma parte estranha ou desconexa com o objetivo do site? | Fechada | Não |
| Quais foram as partes do protótipo de papel que você achou mais intuitivas e fáceis de usar? | Aberta | A Tela de usuário |
| Você imagina alguma forma de melhorar esta tarefa? | Aberta | Acho que o layout poderia ser mais objetivo e poderia ter uma barra lateral vertical |
Tabela 07 - Roteiro de perguntas
Entrevista feita com o usuário Isaque Santos:
Entrevista Protótipo de papel - Buscar dados de pesquisas acadêmicas
Objetivo e escopo da avaliação
A atividade feita teve como objetivo a avaliação do prototipo de papel - buscar dados de pesquisas acadêmicas, para que houvesse a validação do mesmo para o projeto da disciplina.
Método de avaliação
| Entrevistador(es) | Entrevistado(a) | Horário de Início | Horário de Fim | Data | Local |
|---|---|---|---|---|---|
| Gabriel Barbosa | Giovana Barbosa | 15:30 | 15:45 | 22/11/2023 | Residência |
Fonte - Autor: BARBOSA, Gabriel
Seleção de participante
A participante se encaixa no perfil de usuário, pois é uma usuária do site, maior de 18 anos e inserida no meio acadêmico científico.
Problemas e dificuldades encontradas
- Problema relacionados a disposição e identificação de elementos para filtragem na busca de dados de pesquisa, pois não consegue entender alguns dos campos, devido a disposição de elementos
- Elementos de busca redundantes.
- Diferenciar opções relacionadas a dados. (comunidades dataverses)
Sugestões de melhoria
- Sugestão de melhoria proposta pela usuária foi que a plataforma incluísse uma maneira mais clara de filtragem para buscar dados de pesquisa, deixando mais simples e explicando as opções.
- Melhor localização de elementos.
Feedback do usuário
O usuário ficou satisfeito com o prototipo de papel e conseguiu compreender de forma nítida a narrativa e as interaçoes apresentadas para realizar a tarefa.
- Ponto positivo sobre a plataforma: O usuário considerou a interface do painel de acesso direto muito objetiva e intuitiva, facilitando o caminho que o usuário tem para as opções específicas.
- Conseguiu realizar a tarefa com rapidez pois já tinha critérios de busca definidos
Análise e interpretação dos resultados
Através da entrevista foi possível evidenciar que mesmo sendo uma função cujo o site não apresentasse a mesma, com a interação proposta tornaria o site com uma funcionalidade útil e agradável para os usuários.
Sumário dos principais resultados
Considerando que a função foi concebida especificamente para os propósitos da disciplina, foram realizadas modificações nas questões da entrevista a fim de aprimorar a experiência do usuário ao longo do processo, mantendo-se alinhadas com o padrão do projeto.
Perguntas Respondidas pela entrevistada:
As perguntas feitas para a usuária podem ser encontradas no roteiro de perguntas planejado, e o resultado está na tabela abaixo.
| Perguntas | Tipo de pergunta | Resposta do usuário |
|---|---|---|
| Após simular o uso da tarefa de buscar dados de pesquisa acadêmica, você considera a sequência de elementos de interação para executá-la coerente? | Fechada | Sim |
| Alguma questão de interface ou terminologia o confundiu ou foi de difícil entendimento? | Aberta | Não teve nenhuma que prejudicou o entendimento |
| A disposição dos elementos de interação auxiliaram na rapidez da execução da sua tarefa? | Fechada | Sim, pois ja tinha os critérios de busca previamente definidos |
| Em termos de layout e design, achou alguma parte estranha ou desconexa com o objetivo do site? | Fechada | Não achei |
| Quais foram as partes do protótipo de papel que você achou mais intuitivas e fáceis de usar? | Aberta | Página inicial com o painel de acesso direto |
| Você imagina alguma forma de melhorar esta tarefa? | Aberta | As opções de filtragem na segunda tela poderiam ser melhor explicadas. Na terceira tela, a diposição desses elementos/critérios de busca poderia ser mais limpa |
Entrevista feita com a usuária Giovana Barbosa
Entrevista Protótipo de papel - Acessar Painel Lattes
Objetivo e escopo da avaliação
O objetivo dessa avaliação foi analisar o Protótipo de Papel confeccionado para a funcionalidade Painel Lattes. A partir dessa avaliação, foi possível entender os principais problemas na interação do usuário com o artefato, realizando assim uma verificação estática, uma vez que o usuário não interagiu com o sistema, e sim com uma potencial interface de baixa fidelidade para a aplicação.
Protótipos elaborados
A digitalização dos protótipos elaborados para essa funcionalidade pode ser acessado através desse link. Foram ao todo 8 telas confeccionadas para a avaliação.
Cronograma
| Entrevistador(es) | Entrevistado(a) | Horário de Início | Horário de Fim | Data | Local |
|---|---|---|---|---|---|
| Caio Braga e Caio Lelis | Pedro Vitor | 19:30 | 19:42 | 22/11/2023 | Ailab (UnB) |
Fonte - Autor: BRAGA,Caio.
Seleção de participante
O participante selecionado encaixa-se nos atributos definidos no artefato do Perfil de Usuário, pois é um usuário maior de 18 anos, pesquisador em um laboratório da Universidade de Brasília, possui bastante experiência com tecnologia e com a Plataforma Lattes, tem atitude científica, com ensino superior incompleto, residência brasileira, e usuário dos sistemas operacionais Android, Linux e Windows.
Problemas e dificuldades encontradas
-
Na barra de navegação do Painel Lattes, a falta de rótulos no menu de navegação foi um ponto que dificultou bastante a interação do usuário, uma vez que prejudicou bastante o entendimento do que era necessário para concluir a tarefa.
-
A disposição dos itens da Navegação na Página Inicial não contribuiu para o fácil aprendizado do usuário do que ele precisaria fazer para chegar até o Painel Lattes
-
Para o usuário é muito importante haver a portabilidade da interface para outros dispositivos. Portanto, o fato do protótipo apresentado ficar disponível apenas para dispositivos Desktop foi um problema para ele.
Sugestões de melhoria
- Definição dos rótulos do menu de navegação da tela do Painel Lattes
- Melhor disposição dos itens do coluna de navegação da tela Página Inicial
- Portabilidade para dispositivos móveis
Feedback do usuário
O usuário ficou insatisfeito com a interface, uma vez que ela não atendia às suas necessidades com a eficiência que ele deseja. Além disso, a falta de disponibilidade de interface para a plataforma Android, que é a mais utilizada pelo usuário, também contribuiu para a sua insatisfação.
Análise e interpretação dos resultados
Portanto, a partir dos problemas identificados, sugestões de melhoria e feedback do usuário; é possível identificar as principais mudanças de interface a serem melhoradas para que o fluxo dessa funcionalidade possa satisfazer o usuário, melhorando o seu aprendizado e a sua eficiência ao utilizá-la. Essas correções poderão ser feitas no reprojeto e implementadas no protótipo de alta fidelidade
Sumário dos principais resultados
Conclui-se então, que será fundamental fazer correções no protótipo para melhorar a usabilidade da interface, alterando principalmente:
- Elementos nas telas Página inicial e Painel Lattes
- Adequação da interface a dispositivos móveis
Perguntas Respondidas pela usuário Pedro Vitor:
| Perguntas | Tipo de pergunta | Respostas possíveis |
|---|---|---|
| Após simular o uso dessa tarefa (citar a tarefa), você considera a sequência de elementos de interação para executá-la coerente? | Fechada | Não, pois as opções do Painel Lattes não estavam disponíveis para identificação das categorias disponibilizadas |
| Alguma questão de interface ou terminologia o confundiu ou foi de difícil entendimento? | Aberta | O nome Painel Lattes foi um tanto problemático para identificar essa funcionalidade. |
| A disposição dos elementos de interação auxiliaram na rapidez da execução da sua tarefa? | Fechada | Sim |
| Em termos de layout e design, achou alguma parte estranha ou desconexa com o objetivo do site? | Fechada | Poderia haver uma melhor disposição de itens nos menus das duas páginas |
| Quais foram as partes do protótipo de papel que você achou mais intuitivas e fáceis de usar? | Aberta | O menu inicial é parcialmente intuitivo, porém a terminologia Painel Lattes não traz um bom entendimento sobre o que é a funcionalidade |
| Você imagina alguma forma de melhorar esta tarefa? | Aberta | Melhorar a disposição dos elementos na interface e adicionar a portabilidade para outros dispositivos |
Tabela 10 - Roteiro de perguntas
Entrevista feita com o usuário Pedro Vitor
Histórico de Versões
| Versão | Descrição | Autor | Data | Revisor | Data de revisão |
|---|---|---|---|---|---|
| 1.0 | Criação do documento e textos introdutórios | Caio Lelis | 21/11/2023 | Guilherme Basilio | 22/11/2023 |
| 1.1 | Adição da entrevista com Igor Penha | Guilherme Basilio | 22/11/2023 | Joel Soares | 22/11/2023 |
| 1.2 | Adição da entrevista com Bruno Ribeiro | Joel Soares | 22/11/2023 | Miguel de Frias | 22/11/2023 |
| 1.3 | Adição da entrevista buscar currículo | Miguel de Frias | 22/11/2023 | 22/11/2023 | |
| 1.4 | Adição de relato dos resultados | Gabriel Barbosa | 22/11/2023 | 22/11/2023 | |
| 1.5 | Adição de atualizar curriculo | Doan Filho | 22/11/2023 | Caio Braga | 22/11/2023 |
| 1.6 | Adição de acessar painel | Caio Braga | 22/11/2023 | Doan Filho | 22/11/2023 |