Relato dos Resultados da Avaliação dos Storyboards
Introdução
O presente documento tem como objetivo relatar os resultados obtidos durante a avaliação do Storyboard, realizada com o intuito de identificar possíveis problemas e oportunidades de melhoria no sistema proposto. A análise foi conduzida com base no Planejamento da Avaliação do Storyboard e a organização dos dados foi feita com base no Planejamento do Relato dos Resultados da Avaliação do Storyboard.
Entrevista - Fazer um pedido no e-SIC
Objetivo e âmbito da avaliação
O objetivo da avaliação do storyboard proposto visa buscar se a tarefa de fazer um pedido no e-SIC é claro e intuitivo para o usuário. A avaliação abrange a compreensão do fluxo de interação proposto, a identificação de possíveis problemas e a sugestão de melhorias para aprimorar a experiência do usuário. O storyboard utilizado nessa avaliação pode ser acessado aqui: Storyboard 1 - Fazer um pedido no e-SIC.
Método de avaliação
O método de avaliação utilizado foi a entrevista semiestruturada, acordado com o Planejamento da Avaliação do Storyboard. Os dados da entrevista estão indicados na tabela 1.
Tabela 1 - Cronograma Executado.
| Entrevistador(es) | Entrevistado(s) | Horário de Início | Horário de Fim | Data Planejada | Tarefa | Local |
|---|---|---|---|---|---|---|
| Paulo Henrique | Igor Abreu | 10:00 | 10:10 | 19/12/2024 | Storyboard 1 - Fazer um pedido no e-SIC | Campus UnB Gama |
Autor: Paulo Henrique
Além disso, foi utilizado um questionário com 8 perguntas variadas entre questões abertas e objetivas, presente no documento de Planejamento da Avaliação do Storyboard, para guiar a entrevista e coletar as percepções do entrevistado.
Tabela 2 - Roteiro de perguntas para Avaliação de Storyboard
| Objetivo | Pergunta | Resposta |
|---|---|---|
| Apropriação da Tecnologia | 1. Os usuários compreendem o objetivo de cada interação representada no storyboard? | Sim |
| Apropriação da Tecnologia | 2. Os fluxos propostos são claros e intuitivos? | Sim, porém, o quarto quadrante ficou um pouco por parecer que era a prefeitura interagindo com o ator e não a transição para o site da prefeitura |
| Apropriação da Tecnologia | 3. Há evidências de que os usuários conseguiriam utilizar o sistema com base no que foi apresentado? | Sim |
| Apropriação da Tecnologia | 4. Quais aspectos dos fluxos apresentados no storyboard podem impedir os usuários de adotarem o sistema em suas rotinas diárias? | No caso do usuário tiver dificuldades em utilizar dispositivos eletrônicos, no caso, um analfabeto tecnológico. |
| Identificação de Problemas de Interação e Interface | 5. Existem elementos confusos ou difíceis de interpretar nos storyboards? | Não |
| Identificação de Problemas de Interação e Interface | 6. Quais barreiras de interação podem surgir para os usuários ao realizarem as tarefas propostas? | Falta de acesso à internet, defeito no dispositivo utilizado e eventos externos que estão fora do controle do usuário. |
| Identificação de Problemas de Interação e Interface | 7. A sequência de interações está clara, ou os usuários têm dificuldades em entender o que fazer a seguir? | Sim, está clara. Porém, no quadrante de realização do pedido, seria ideal disponibilizar uma espécie de protocolo para que o usuário consiga verificar o andamento do seu pedido. |
| Identificação de Problemas de Interação e Interface | 8. Os usuários têm acesso a todas as informações necessárias para concluir as tarefas ou há falta de clareza nas instruções? | Sim |
Autor: Paulo Henrique
Seleção dos participantes
O participante selecionado para a entrevista se encaixa no perfil de usuário definido para o projeto. O entrevistado se enquadra na faixa etária de 25 a 34 anos e já deu aula na rede pública de ensino.
Listagem de problemas
Com base no questionário aplicado, foi possível identificar os seguintes problemas:
-
Falta de clareza na transição entre o ator usando o computador e acessando o site da prefeitura.
-
No quadrante de realização do pedido, há a falta de um protocole que mostre o andamento do pedido do usuário.
Sugestões de melhorias
Com base nos problemas identificados, foram sugeridas as seguintes melhorias:
-
Adicionar uma transição mais clara entre o ator usando o computador e acessando o site da prefeitura para realizar o pedido.
-
Disponibilizar um protocolo para que o usuário consiga verificar o andamento do seu pedido.
Registro da avaliação
A avaliação foi registrada por meio da gravação da entrevista, disponível logo abaixo:
Entrevista - Agendamento de Consulta Médica
Objetivo e âmbito da avaliação
A avaliação teve como objetivo analisar o Storyboard 2 - Agendamento de Consulta Médica para Dona Lúcia, visando identificar pontos de melhoria na interação e na interface. O âmbito da avaliação abrangeu aspectos relacionados à clareza do fluxo de tarefas, adequação às necessidades do público-alvo e possíveis barreiras de usabilidade.
Método de avaliação
O método de avaliação utilizado foi a entrevista semiestruturada, acordado com o Planejamento da Avaliação do Storyboard. Os dados relativos ao cronograma executado durante a entrevista está apresentado na Tabela 3:
Tabela 3 - Cronograma Executado
| Entrevistador(es) | Entrevistado(s) | Horário de Início | Horário de Fim | Data Planejada | Tarefa | Local |
|---|---|---|---|---|---|---|
| Weverton Rodrigues | Vanessa Oliveira | 17:30 | 17:37 | 27/12/2024 | Storyboard 2 - Agendamento de Consulta Médica para Dona Lúcia | Residência da entrevistada |
Autor: Weverton Rodrigues
Além disso, foi utilizado um questionário com 8 perguntas variadas entre questões abertas e objetivas, presente no documento de Planejamento da Avaliação do Storyboard, para guiar a entrevista e coletar as percepções do entrevistado.
Tabela 4 - Roteiro de perguntas para Avaliação de Storyboard
| Objetivo | Pergunta | Resposta |
|---|---|---|
| Apropriação da Tecnologia | 1. Os usuários compreendem o objetivo de cada interação representada no storyboard? | Sim |
| Apropriação da Tecnologia | 2. Os fluxos propostos são claros e intuitivos? | Sim |
| Apropriação da Tecnologia | 3. Há evidências de que os usuários conseguiriam utilizar o sistema com base no que foi apresentado? | Sim |
| Apropriação da Tecnologia | 4. Quais aspectos dos fluxos apresentados no storyboard podem impedir os usuários de adotarem o sistema em suas rotinas diárias? | Não |
| Identificação de Problemas de Interação e Interface | 5. Existem elementos confusos ou difíceis de interpretar nos storyboards? | Não |
| Identificação de Problemas de Interação e Interface | 6. Quais barreiras de interação podem surgir para os usuários ao realizarem as tarefas propostas? | Não foram identificadas barreiras. |
| Identificação de Problemas de Interação e Interface | 7. A sequência de interações está clara, ou os usuários têm dificuldades em entender o que fazer a seguir? | Sim, a sequência está clara, especialmente com o acompanhamento/ajuda do neto da personagem. |
| Identificação de Problemas de Interação e Interface | 8. Os usuários têm acesso a todas as informações necessárias para concluir as tarefas ou há falta de clareza nas instruções? | Sim, todas as informações necessárias estão disponíveis, o que facilita o entendimento e a execução. |
Autor: Weverton Rodrigues
Seleção dos participantes
A participante selecionada foi Vanessa Oliveira, de 49 anos, que se enquadra no grupo de Cidadãos em Geral (faixa etária predominante: 18 a 60 anos). Ela possui experiência básica com tecnologia e, ocasionalmente, precisa de auxílio de familiares em tarefas mais complexas. A escolha de Vanessa visou representar um usuário típico dessa faixa etária, com familiaridade básica/intermediária com interfaces digitais, permitindo avaliar aspectos de usabilidade e acessibilidade do storyboard.
Listagem de problemas
-
Ausência de problemas de compreensão: Não foram identificados elementos confusos ou difíceis de interpretar no storyboard. A sequência de interações foi clara para a entrevistada.
-
Acesso à informação: Não houve falta de clareza nas instruções, e todas as informações necessárias para a execução das tarefas estavam acessíveis, o que facilitou o entendimento.
-
Falta de barreiras de interação: Não foram identificadas barreiras de interação que dificultassem a execução das tarefas propostas. A entrevistada não apontou obstáculos na navegação ou no entendimento das etapas.
Sugestões de melhorias
Nenhuma sugestão de melhoria foi identificada durante a avaliação. O storyboard foi considerado claro e intuitivo pela entrevistada, que não apontou problemas de compreensão ou dificuldades nas interações. O fluxo proposto está bem alinhado com as necessidades do usuário, e todas as informações necessárias para a execução das tarefas foram facilmente compreendidas.
Registro da avaliação
A avaliação foi registrada por meio da gravação da entrevista, disponível logo abaixo, e a parte referente à Avaliação do Storyboard vai de 0:00 até 3:45:
Entrevista - Busca por licitações fracassadas
Objetivo e âmbito da avaliação
A avaliação teve como objetivo analisar o Storyboard 5: Busca por licitação fracassada, visando identificar pontos de melhoria na interação e na interface. O âmbito da avaliação abrangeu aspectos relacionados à clareza do fluxo de tarefas, adequação às necessidades do público-alvo e possíveis barreiras de usabilidade.
Método de avaliação
O método de avaliação utilizado foi a entrevista semiestruturada, acordado com o Planejamento da Avaliação do Storyboard. Os dados relativos ao cronograma executado durante a entrevista está apresentado na Tabela 5:
Tabela 5 - Cronograma Executado
| Entrevistador(es) | Entrevistado(s) | Horário de Início | Horário de Fim | Data Planejada | Tarefa | Local |
|---|---|---|---|---|---|---|
| Rodrigo Wendrel | Moysés Carvalho | 13:00 | 13:30 | 03/01/2025 | Storyboard 5: Busca por licitação fracassada | Biblioteca Nacional de Brasília |
Autor: Rodrigo Wendrel
Além disso, foi utilizado um questionário com 8 perguntas variadas entre questões abertas e objetivas, presente no documento de Planejamento da Avaliação do Storyboard, para guiar a entrevista e coletar as percepções do entrevistado.
Tabela 6 - Roteiro de perguntas para Avaliação de Storyboard
| Objetivo | Pergunta | Resposta |
|---|---|---|
| Apropriação da Tecnologia | 1. Os usuários compreendem o objetivo de cada interação representada no storyboard? | Sim |
| Apropriação da Tecnologia | 2. Os fluxos propostos são claros e intuitivos? | Sim, bem simples |
| Apropriação da Tecnologia | 3. Há evidências de que os usuários conseguiriam utilizar o sistema com base no que foi apresentado? | Sim |
| Apropriação da Tecnologia | 4. Quais aspectos dos fluxos apresentados no storyboard podem impedir os usuários de adotarem o sistema em suas rotinas diárias? | Na página inicial não há muitas informações |
| Identificação de Problemas de Interação e Interface | 5. Existem elementos confusos ou difíceis de interpretar nos storyboards? | Filtros no quarto quadro do styoryboard. Não há como saber o tipo de filtro |
| Identificação de Problemas de Interação e Interface | 6. Quais barreiras de interação podem surgir para os usuários ao realizarem as tarefas propostas? | Não foram identificadas barreiras. |
| Identificação de Problemas de Interação e Interface | 7. A sequência de interações está clara, ou os usuários têm dificuldades em entender o que fazer a seguir? | Sim, mas acredita que as licitações fracassadas podem ter cores diferentes |
| Identificação de Problemas de Interação e Interface | 8. Os usuários têm acesso a todas as informações necessárias para concluir as tarefas ou há falta de clareza nas instruções? | Sim, possuem bons detalhes. |
Autor: Rodrigo Wendrel
Seleção dos participantes
O participante selecionado foi Moyses Carvalho, de 22 anos, que se enquadra no grupo de Cidadãos em Geral (faixa etária predominante: 18 a 60 anos). Ele possui experiência com tecnologia e não necessita de auxílio com esse tipo de tarefa.
Listagem de problemas
- Ausência de elementos visuais para deixar a interação mais clara
- Falta de informações
Sugestões de melhorias
Adição de informações acerca do que está sendo buscado e elementos que possam diferenciar as licitações.
Registro da avaliação
A avaliação foi registrada por meio da gravação da entrevista, disponível logo abaixo, e a parte referente à Avaliação do Storyboard vai de 0:58 até 04:29:
Entrevista - Emissão de Nota Fiscal de Serviço
Objetivo e âmbito da avaliação
A avaliação teve como objetivo analisar o Storyboard 3: Emissão de Nota Fiscal de Serviço, visando identificar pontos de melhoria na interação e na interface. O âmbito da avaliação abrangeu aspectos relacionados à clareza do fluxo de tarefas, adequação às necessidades do público-alvo e possíveis barreiras de usabilidade.
Método de avaliação
O método de avaliação utilizado foi a entrevista semiestruturada, acordado com o Planejamento da Avaliação do Storyboard. Os dados relativos ao cronograma executado durante a entrevista está apresentado na Tabela 7:
Tabela 7 - Cronograma Executado
| Entrevistador(es) | Entrevistado(s) | Horário de Início | Horário de Fim | Data Planejada | Tarefa | Local |
|---|---|---|---|---|---|---|
| Necivaldo Amaral | Lucas de Souza | 19:00 | 19:05 | 31/12/2024 | Storyboard 3: Envio de Nota Fiscal de Serviço | Residência do entrevistado |
Autor: Necivaldo Amaral
Além disso, foi utilizado um questionário com 8 perguntas variadas entre questões abertas e objetivas, presente no documento de Planejamento da Avaliação do Storyboard, para guiar a entrevista e coletar as percepções do entrevistado.
Tabela 8 - Roteiro de perguntas para Avaliação de Storyboard
| Objetivo | Pergunta | Resposta |
|---|---|---|
| Apropriação da Tecnologia | 1. Os usuários compreendem o objetivo de cada interação representada no storyboard? | Sim |
| Apropriação da Tecnologia | 2. Os fluxos propostos são claros e intuitivos? | Sim, bem simples |
| Apropriação da Tecnologia | 3. Há evidências de que os usuários conseguiriam utilizar o sistema com base no que foi apresentado? | Sim |
| Apropriação da Tecnologia | 4. Quais aspectos dos fluxos apresentados no storyboard podem impedir os usuários de adotarem o sistema em suas rotinas diárias? | Uma conexão com internet lenta |
| Identificação de Problemas de Interação e Interface | 5. Existem elementos confusos ou difíceis de interpretar nos storyboards? | Não |
| Identificação de Problemas de Interação e Interface | 6. Quais barreiras de interação podem surgir para os usuários ao realizarem as tarefas propostas? | Uma conexão com internet lenta |
| Identificação de Problemas de Interação e Interface | 7. A sequência de interações está clara, ou os usuários têm dificuldades em entender o que fazer a seguir? | Sim, bem claras |
| Identificação de Problemas de Interação e Interface | 8. Os usuários têm acesso a todas as informações necessárias para concluir as tarefas ou há falta de clareza nas instruções? | Sim |
Autor: Necivaldo Amaral
Seleção dos participantes
O participante selecionado foi Lucas de Souza, de 23 anos, que se enquadra no grupo de Cidadãos em Geral (faixa etária predominante: 18 a 60 anos). Ele possui experiência com tecnologia e não necessita de auxílio com esse tipo de tarefa.
Listagem de problemas
- Tamanho do texto pequeno
Sugestões de melhorias
Aumento na fonte das palavras
Registro da avaliação
A avaliação foi registrada por meio da gravação da entrevista, disponível logo abaixo.
Planejamento de reprojeto
Tabela 2 - Cronograma do Reprojeto.
| Executador | Horário de Início | Horário de fim | Data |
|---|---|---|---|
| Paulo Henrique | 20:00 | 21:00 | 07/01/2025 |
| Necivaldo Amaral | 20:00 | 21:00 | 07/01/2025 |
Histórico de Versão
| Versão | Data | Autor(es) | Descrição | Data de Revisão | Revisor(es) |
|---|---|---|---|---|---|
| 1.0 | 28/12/2024 | Paulo Henrique | Criação do docummento do relato dos resultados da avaliação do storyboarrd e adição do relato da avaliação do storyboard - realizar um pedido no e-SIC | 28/12/2024 | Rodrigo Wendrel |
| 1.1 | 02/01/2025 | Weverton Rodrigues | adição do relato da avaliação do storyboard - agendamento de consulta médica para dona Lúcia | 02/01/2025 | Paulo Henrique |
| 1.2 | 05/01/2025 | Rodrigo Wendrel | Adição do relato da avaliação do storyboard - busca por licitação fracassada | 05/01/2025 | Weverton Rodrigues |
| 1.3 | 05/01/2025 | Necivaldo Amaral | Adição do relato da avaliação do storyboard - envio de nota fiscal de serviço | 05/01/2025 | Pedro Luiz |