Anais do IHC'2001 - Departamento de Informática e Estatística - UFSC

Anais do IHC’2001 - IV Workshop sobre Fatores Humanos em Sistemas Computacionais 117
apresenta comportamentos apropriados a execução das tarefas); auto-descrição (avalia se o
agente fornece assistência ao usuário a fim de tornar o programa mais compreensível);
controlabilidade (avalia se o usuário pode iniciar e controlar as ações realizadas pelo
agente); conformidade com as expectativas dos usuários(avalia se o agente supre as
expectativas do usuário em relação a auxílio na realização de tarefas e busca por
informação sem causar distração); tolerância a erros(avalia se o agente atinge os resultados
apesar da ocorrência de erros nas entradas fornecidas pelos usuários); suporte a
individualização (avalia se o agente trata o usuário de maneira personalizada e se apresenta
variabilidade de comportamentos para uma mesma tarefa); adequação ao aprendizado
(avalia se o agente auxilia o usuário durante a navegação e uso do sistema, fornecendo
informações relevantes para o aprendizado do mesmo. Para realizar esta função o agente
deve assumir o papel de guia do usuário, acompanhamento o usuário durante toda a sua
interação com o sistema).
O critério de tolerância a erros não foi considerado nesta avaliação, pois o agente
não recebe nenhuma entrada do usuário. As informações que o agente possui em relação ao
usuário são transmitidas diretamente através dos módulos do SAGRES.
Cada questão do questionário tem quatro alternativas de respostas: ruim, regular,
bom e muito bom. Cada um destes conceitos foi associado a um peso de um à quatro,
como ilustrado na tabela 1. A única exceção é a última questão do questionário dos
agentes, onde o usuário deve escolher entre as opções com agente ou sem agente. Algumas
das perguntas presentes no questionário dos agentes são: O guia apresentou diferentes
comportamentos durante a execução de tarefas específicas? e O guia foi útil para auxiliálo
na operação do sistema?.
Questão Ruim Regular Bom Muito Bom
O guia apresentou diferentes comportamentos
durante a execução de tarefas específicas?
Peso 1 Peso 2 Peso 3 Peso 4
Tabela 1: Formato das Questões
5.2. Identificação da Amostra de Usuários
Para realização dos testes com usuário foram selecionados alunos de primeiro, segundo e
terceiro graus que fazem parte do Clube do Computador do Museu de Ciências e
Tecnologia da PUCRS. Esta seleção foi realizada de forma aleatória, sendo que os alunos
envolvidos são de ambos os sexos, com diferentes níveis de habilidade e conhecimento,
sendo todos usuários assíduos do sistema.
5.3. Análise dos Resultados
Com base nos dados obtidos através dos testes com usuários, considerando a adaptação dos
princípios de diálogo para agentes improvisacionais, verificamos que a média do
questionário foi de 3,68 e que a maioria dos critérios ultrapassou este valor. Os critérios
obtiveram os seguintes percentuais: auto-descrição (3,81), suporte a individualização
(3,75), adequação a tarefa (3,71), controlabilidade (3,71), adequação ao aprendizado (3,7) e
conformidade com as expectativas do usuário (3,37).
Constatamos que os usuários se mostraram favoráveis a utilização do guia (agente
improvisacional), pois o mesmo os auxiliou durante a operação do sistema, tratando-os de
maneira personalizada e incentivando-os na realização de tarefas, o que pode ser observado