@MASTERSTHESIS{ 2023:1449417887, title = {Desenvolvimento de Artefatos para Apoiar o Design e a Avaliação de Chatbots focando em Usabilidade e User Experience}, year = {2023}, url = "https://tedebc.ufma.br/jspui/handle/tede/tede/5135", abstract = "Chatbots são softwares que se comunicam e interagem de forma semelhante à humana, por meio de linguagem natural, com usuários humanos. Essas ferramentas são úteis para diversas finalidades que variam desde atendimento ao cliente, vendas, educação, saúde, até entretenimento. Nos últimos anos os chatbots se popularizaram e observou-se um crescimento significativo no surgimento dessas ferramentas no mercado, principalmente dos chatbots textuais. Essa ascensão tem encorajado desenvolvedores a criarem suas próprias ferramentas, além de atrair os esforços de pesquisadores para esta área. Apesar do destaque, há necessidade de propor tecnologias capazes de apoiar desenvolvedores e equipes de desenvolvimento no processo de projetar e avaliar chatbots de qualidade, visto que embora estas ferramentas estejam em alta, as tecnologias para garantir a qualidade delas e a satisfação dos usuários, não tem acompanhado o ritmo. Diante disto, esta pesquisa de mestrado propõe desenvolver artefatos aplicáveis ao processo de design e da avaliação de chatbots, tendo como base atributos de qualidade relacionados à Usabilidade e User Experience (UX), identificados em revisões da literatura. O foco em Usabilidade e UX se deu devido ao impacto que estes aspectos têm na satisfação do usuário e na qualidade percebida do sistema. O primeiro artefato é o checklist de inspeção U2Chatbot, desenvolvido com o objetivo de auxiliar equipes de desenvolvimento no processo de identificação de defeitos em chatbots textuais, melhorando a qualidade dessas ferramentas antes do lançamento destas no mercado. Apesar da criação do checklist, observou-se que alguns desenvolvedores têm uma necessidade visual para compreender aspectos importantes que chatbots devem exibir e que para esse público apenas os itens de verificação do U2Chatbot não seriam suficientes. Assim, de forma complementar, foi desenvolvido o artefato DP-U2Chatbot, que se trata de um conjunto de recomendações de design de interface, contendo 21 instruções importantes para apoiar desenvolvedores no processo de construção de chatbots. Após o desenvolvimento das tecnologias propostas, estas foram submetidas às avaliações necessárias. Para avaliar o checklist U2Chatbot, foi conduzido um estudo experimental e os resultados indicaram que os participantes consideraram a tecnologia útil para a descoberta de defeitos em chatbots, no entanto, a facilidade de uso pode melhorar. Além disso, verificou-se que a experiência dos participantes não influenciou significativamente os resultados de eficácia e a eficiência da técnica. Para os padrões de design DP-U2Chatbot, realizou-se uma avaliação simples em relação à compreensibilidade e utilidade da tecnologia. Os resultados indicaram que no geral a tecnologia é fácil de compreender e possui utilidade para apoiar o design de chatbots, no entanto, os exemplos visuais de alguns padrões podem melhorar para ficarem mais claros aos desenvolvedores.", publisher = {Universidade Federal do Maranhão}, scholl = {PROGRAMA DE PÓS-GRADUAÇÃO EM CIÊNCIA DA COMPUTAÇÃO/CCET}, note = {DEPARTAMENTO DE INFORMÁTICA/CCET} }