IHC - Ensaios de interação

uma das formas mais usadas de fazer avaliação com o usuário é usando os ensaios de interação então a gente diz n ensaios de interação é uma forma de fazer teste de usabilidade onde eh basicamente o que a gente vai fazer é observar os usuários enquanto eles realizam algumas tarefas que a gente vai passar para eles n então normalmente precisa de um laboratório habilidade para para fazer o registro dessas sessões de teste né então os usuários vão realizar tarefas PR definidas que foram dadas para eles né E aí essa é uma técnica que pode usar um

uma segunda técnica que é a técnica de verbalização ou ainda Thinking aloud né ou não ou seja ou que que é essa técnica é quando a pessoa vai falando tudo o que ela tá fazendo né então é como pensar em voz alta mas a gente vai falar um pouco mais sobre isso depois né então por enquanto a ideia é a gente entender como é que os ensaios de de interação eles funcionam então basicamente quando a gente quer faz um ensaio de interação o que eu quero é poder observar um usuário e coletar dados né dele

usando o aplicativo que eu desenvolvi né normalmente aqui a gente tá falando em software e aí eu quero poder isolar lá o problema né então eu quero focar no aplicativo E focar na experiência desse usuário enquanto tiver usando o nosso aplicativo né então para isso né pra gente poder fazer ensaio de de interação a gente usa geral um laboratório de usabilidade então Eh aqui a gente tem a planta de um laboratório de usabilidade típico né esse aqui é da laboratório da da Microsoft né mostra como é que ele funciona então basicamente existe uma área né

que é onde o o participante ele vai ficar né dá para ver aqui nessa foto participante foto antiga né com uma tela de tubo ainda aqui mas mas basicamente né o participante ele tá nessa sala tem uma mesa tem uma cadeira para ele sentar tem a máquina que ele vai usar e ele tá sendo filmado por uma câmera Ele não enxerga nada né então nessa parede aqui eh tem um espelho né Portanto ele não enxerga pro outro lado isso eu quero dizer que não enxerga nada e esse outro lado aqui tem uma sala Onde ficam

os observadores né então os observadores eles têm uma máquina também onde eles consegue enxergar exatamente a mesma coisa que o nosso usuário né o sujeito do teste como a gente chama tá enxergando então tem a vantagem do do Observador poder olhar o participante sem que o par enxergue a ele então esse é um laboratório clássico de usabilidade né naturalmente nem todo o ensaio de interação é feito em laboratório de usabilidade porque depende do que que a gente tá avaliando né então mas assim usualmente a ideia é que a gente consiga fazer essa execução em um

ambiente controlado e por isso os laboratórios bom então o ensaio de de interação para ir acontecer tem diversas etapas pelas quais a gente precisa passar Então a primeira etapa é a gente obter a amostra dos usuários né então eu tenho que saber eh qual é o perfil de usuário que me interessa em geral a gente define isso lá no levantamento de requisitos né e eu preciso de uma amostra de gente então assim enquanto lá na no levantamento de requisitos a gente criava personas né que era para eu identificar eh o meu modelo de usuário né

tangibilizar ele quando a gente fala ensaio de interação aqui eu preciso de verdade pegar pessoas que correspondam àquele perfil que eu criei né então eu vou ter que primeiro recrutar os meus usuários depois eh a segunda etapa é a gente ajustar o cenário né ou seja deixar fazer com que o ambiente onde os testes vão ser eh executados acabi de mostrar ali o um um exemplo né de laboratório de desabilidade Então esse ambiente ele tem que tá mais confortável possível então de preferência com ar condicionado numa temperatura adequada uma cadeira confortável monitor confortável Mouse confortável

né então todo o material que tá sendo usado Ele tem que ser adequado porque se por exemplo o meu vídeo é ruim ou o teclado é ruim então o desempenho da pessoa pode tá sendo afetado pelo dispositivo então assim o teclado que que a gente tem que apertar forte para para PR pra letra sair ou o mouse que não funciona direito vai ter um impacto negativo na experiência do usuário e aí eu eu vou mascarar o meu resultado lá paraas santas eu não sei se o resultado ruim que eventualmente eu obtive foi porque o o

software a interface mesmo tava ruim mesmo ou se porque né o o equipamento era ruim máquina lenta acaba dando resultado ruim né da mesma forma como a condição do ambiente onde o usuário tá então um ambiente muito quente prejudica um ambiente muito frio iden né barulhento então por isso o nosso ambiente tem que ser ajustado e preparado a terceira etapa é a etapa de planejamento do teste né porque eu vou executar esse teste uma vez com cada usuário então eu não posso pensar numa tarea e daí o usuário não consegue e eu interrompo ele no

meio do caminho ele vai me perguntar coisa vou responder em geral a gente tem que evitar isso então eu preciso planejar o Meu experimento direitinho para que eu não precise mudar o rumo à medida que ele vai acontecendo né Isso é péssimo mudar o rumo de um de um ensaio de interação é muito ruim bom então depois que tá planejado coletei minha amostra tenho o meu espaço físico arrumado planejei como é que vai acontecer o próximo passo é eu executar E aí durante a execução a gente precisa registrar o que tá acontecendo e coletar dados

E aí tem várias formas da gente coletar dados né então ou eu coleto dados usando o log da aplicação Eu Posso coletar por vídeo Eu Posso coletar por áudio eu posso anotar né a gente pode enfim tem uma porção de coisas de técnicas que a gente pode usar aqui entre elas um questionário posso fazer entrevista posso fazer aplicar questionários tá então basicamente eu coleto os dados que eu vou analisar depois e aí vem o quinto passo que é análise e interpretação dos dados que a gente obtém a partir dos ensaios de interação feita a análise

desses dados a minha última etapa é escrever um relatório do ensaio onde eu coloco as minhas conclusões sobre o experimento que eu que foi feito e então Eh quando a gente fez a coleta das informações né então primeiro a gente coleta informação para depois a gente analisar e interpretar os dados aí os dados vai ser dois tipos de dados basicamente que a gente coleta a gente coleta dados qualitativos e coleta dados quantitativos os dados qualitativos são dados que vão precisar ser interpretados e eles em geral São coletados através de de questionário de observação e eles

servem pra gente descrever situações né normalmente são dificuldades e problemas aqui a gente tem um exemplo de uma maneira né de um de um estudo de um ensaio de interação que foi eh desenvolvido né para coletar dados né para analisar basicamente é a interação de um usuário que é o Rodrigo com um software que é iuc que é um software que permite eh fazer eh como é que chama vistoria né no num carro à distância sem precisar tá com com tem sem precisar ir até um lugar né ou tá com ou tá com algum vistoriador

junto então Eh o a pessoa fez o experimento e a gente coletou a informação a posteriormente Então a primeira pergunta né a gente vai fazendo essa avaliação passo a passo aqui e uma análise de pontos positivos pontos negativos e como é que funcionou a interação então foi bem a primeira pergunta é como é que o Rodrigo como é que o Rodrigo conheceu o iuc então né Essa foi uma experiência boa então tenho um bonequinho feliz aqui e o ponto positivo é eh teve um um motorista de aplicativo que indicou o iuc pro Rodrigo ponto negativo

ele nunca usou o app e ele nem sabia se tinha isso instalado no celular dele ou não interação que aconteceu nenhuma interação tô só ele tá só recebendo informação bom depois a gente quer entender a questão da comunicação tá eh como é que ele ficou sabendo que ele tinha que fazer a historia no carro né então qual é o ponto positivo aqui o Rodrigo disse ah ah eu sou daqueles que já clica então cliquei sem ler na verdade e aí quando ele voltou pra mensagem aí ele leu E aí ele entendeu o que precisava fazer

né então como é que aconteceu essa comunicação o aplicativo UC ele manda uma push notification né é notificação de comunicação então Rodrigo foi lá viu clicou E aí entrou no aplicativo sozinho então qual é ponto negativo não teve nenhum porque deu tudo certo no final né Qual é a interação foi ele clicar na notificação Então essa aqui foi uma experiência não tão feliz assim né ele fez uma coisa que ele nem sabia o que que ele tava fazendo Talvez seja culpa dele que não lê as coisas mas enfim tem um usuário que lê tem um

usuário que não lê a gente tem que estar preparado para todos eles então Essa não foi a melhor experiência de todas bom mas uma vez que Ele clicou na notificação o software abriu numa página que é uma página home então o que que o Rodrigo fez ele leu o card de vistoria daí ele entendeu que ele precisava fazer vistoria do carro para ele est segurado né ponto negativo ele não percebeu o prazo para realização dessa vistoria que tava ali mas ele não viu e a interação foi clicar em fazer a vistoria foi classificada essa interação

aí né como uma interessão positiva tá com uma carinha Verde ali positiva bonequinho or rito depois ele foi iniciar a vistoria né então já tinha clicado fazer vistoria né então frase do Rodrigo vistoria pelo app Ah eu vou fazer uma autovistoria Entendi vou iniciar a vistoria porque o app vai me orientar ponto negativo inicialmente não tinha ele não tinha lido o título título n título é vistoria pelo app Qual foi a interação ele percebeu um botão de iniciar vistoria pelo app e Ele clicou no botão então assim negativo não foi né foi uma interação média

aqui passando pra próxima etapa na próxima etapa tem aparece o documento do carro né o Rodrigo leu o título e Leu so subtítulo coisa boa começou a aprender que ele tem que ler coisas ponto negativo não ter nenhum E aí interação né Ele clicou em tirar foto tem tinha lá o opção né tirar uma foto Ele clicou operação bem sucedida era isso que a gente esperava do Rodrigo mesmo bom E aí passa pra última tela a última tela é quando vai tirar a foto do carro né então ele leu o to tip que tava que

tava na tela e entendeu que ele precisava colocar o documento num em cima de num papel branco que inclusive que é o que tá escrito ali né então ele vai fazer tirar a foto do documento do carro então Eh pronto para tirar foto não foi difícil ele viu esse botãozinho eh vermelho ali que é o botão usual de tirar foto apertou e tirar foto e tirou a foto então também uma experiência positiva aqui moral da história não teve nenhuma mais experiência algumas maioria foi foi positiva as outras negativa não foram foram tal neutras aí né

Mas né esse é um exemplo de um ensaio de interação onde o Rodrigo tá fazendo coisas e ele tá sendo observado por alguém né que tá anotando essas coisas todas tdos dados qualitativos né tudo fruto da observação do que que o Rodrigo tá fazendo além dos dados qualitativos que são interpretados né como os que a gente acabou de ver outros dados qualitativos eles vão ser categorizados por exemplo onde eu vou buscar um padrão de entre vários usuários tentar descobrir alguém que faz alg a coisa diferente do que do que era previsto né que é o

que a gente chama de outlier E aí a gente vai eh normalmente olhar graficamente a representação desses dados que ainda são qualitativos e traçar um gráfico né então aqui a gente tem um gráfico que para nós pouco importa o que que ele significa nesse momento mas eu posso assumir que o roxo é o usuário o usuário um e o azul é o usuário dois dois usuários que fizeram o mesmo experimento então assim a gente pode observar que tem tendências né então uns um indo com valores mais altos outro mais baixo Mas eles sempre primeiro sobem

depois Desc depois sobe de novo aí aqui a gente tem uma inversão né o roxo el passa para baixo do do azul depois vai para cima de novo esse tem um comportamento um pouco diferente então ao olhar para isso pensando que isso representa esse gráfico representa o comportamento no meu usuário cada linha é um usuário eu posso ver que ao longo do experimento Eles começam hum indo mais ou menos no mesmo ritmo e depois chega o momento em que tem uma uma quebra aqui eles começam um andal ao contrário do outro então eu detectei um

padrão no começo do experimento e depois eu não vi mais padrão nenhum Mas enfim são dados né E a gente tem que interpretar esses dados aí mas a gente também captura dados quantitativos que em geral são dados de desempenho né como tempo eh acurácia né precisão outras coisas que a gente fez log e esses dados eles vão precisar ser agrupados e depois tratados de forma Us análise estatística né então aqui a gente tem um gráfico mostrando isso eu tô comparando né tô olhando o desempenho de um usuário que é um usuário experiente que é esse

verde e depois um usuário sem experiência todos eles fazendo a mesma tarefa então tem a tarefa um a do A TR e a quatro né então e eu tô medindo tempo então vê é a parte do quadradinho aqui ele ele me dá o tempo médio n esse risquinho para cima indica o tempo máximo e o para baixo indica o tempo mínimo então Eh o que que eu posso observar aqui sem nem saber que experimento é esse é que o usuário com experiência ele sempre leva menos tempo que que o usuário sem experiência que é esperado

Mas enfim Isso é só um exemplo de dado como é que a gente mostra um dado quantitativo né então coletar tempo tempo é um dado qualitativo quantitativo aqui né pois mais para frente a gente vai aprender como é que faz para analisar esses dados aí um teste eh um ensaio de interação ele também pode ser feito em grupos onde eu vou testar eh uma mesma o mesmo sistema com múltiplos usuários ao mesmo tempo né então vai todo mundo testando junto quando é que eu uso isso por exemplo se eu precisar testar muita gente em pouco

tempo então eu não tenho aquele tempo de dedicar um por um né fazer os os os usuários passar pelo meu teste um por um em sequência em tarefas que TM longa duração né como tarefas de ensino eu quero medir o quanto eh cada cada usuário aprendeu com um aplicativo novo então vamos vamos dizer assim eu sou professora tô dando aula numa turma E aí eu descubro que existe é uma uma um jogo né E que eu acho que faz os os alunos se engajarem mais e aprenderem melhor se eles estiverem jogando bom eu vou ter

que testar para saber se isso é verdade ou não E aí eh em geral para testar eu vou pegar uma turma e eu vou submeter todinha ela eh a a esse novo aplicativo Então vai me demorar sei lá um semestre um mês né para eu poder fazer essa análise então eu não posso fazer com um usuário por vez eu tenho que fazer logo com uma turma né Então as tarefas de longa duração exigem também que a gente Trabalhe com os com os testes de múltiplos lulares ao mesmo tempo né quando a gente trabalha com grupo

focal de usabilidade também a ideia é essa todo mundo testa antes mas a discussão e a coleta de dados se dá em um grupo focal ou seja todo mundo ao mesmo tempo e também essa é uma técnica muito usada quando se faz design de jogos Então como é que a gente faz o teste com múltiplos usuário usuários a gente vai fazer ele não é muito diferente do teste com cada usuário individualmente né mas eh eu preciso ter alguns cuidados né Eh primeiro a gente usa facilitadores né então em geral tem mais de uma pessoa controlando

os usuários enquanto eles estão fazendo no teste se tem especialista A ideia é que eles circulem né entre os usuários e capturem informação registrem as informações que ele acha que eles acham importante né se eu não tiver especialista né de fato qualquer pessoa pode ser treinado e vira a ser um especialista né como é que eu preparo os meus usuários então primeiro do mesmo jeito do teste convencional eu não vou poder usar a técnica de fing alal né aquela técnica que Eu mencionei antes que era de pensar em voz alta porque não vai funcionar Tá

todo mundo na mesma sala todo mundo falando isso não vai dar certo porque um vai interferir no experimento do outro né e eu preciso garantir que tem o a menor quantidade de distração possível tá então de preferência eh a gente diz pros US os usuários que cada um tá fazendo uma tarefa diferente para que eles não não ten a tentação de uns olhar o que os outros estão fazendo aqui a gente tem um exemplo também vindo da Microsoft que é um exemplo de um laboratório de usabilidade para múltiplos usuários então basicamente né Qual é a

ideia eu tenho várias pessoas aqui esse esse laboratório é usado para teste de games Cada Um Na Sua baia aqui né Cada um tem um computador então o que que eu garanto aqui lembra que eu falei que a gente usava laboratório de usabilidade para garantir para ter uma maior evidência possível de que o que que eu tô medindo é o efeito da interface no usuário e não o efeito do meio ambiente ou o efeito da máquina né se uma máquina boa ou uma máquina não boa então no laboratório multiusuário eh eu não consigo ter aquele

aparato todo do laboratório mon usuário Mas coloco várias pessoas na mesma sala todos eles né cada um vai sentar numa cadeira igualzinha do outro então eu não posso dizer que o usuário teve melhor desempenho que o outro porque a cadeira era mais confortável eh todos os computadores são absolutamente iguais a sala tá refrigerada do mesmo jeito fone de ouvido é igual para todo mundo então basicamente eu faço o máximo possível para dar as mesmas condições para todos os usuários então no final do do dia o que eu tô comparando né Eu quero ter o máximo

de garantias possível de que o que eu tô comparando é realmente o efeito do meu sistema nos usuários Então como é que é o roteiro que a gente vai usar né para executar um ensaio de interação então primeiro ponto a gente comvido os usuários para fazer o teste depois a gente prepara a sala e deixa o usuário confortável aí a gente vai ter que explicar para ele como é que vai ser o procedimento né então o que que vai acontecer quanto tempo ele vai demorar fazendo aquilo quanto tempo a gente estima que demore Quais são

as tarefas que ele tem que fazer e por aí afora depois a gente aplica no usuário um questionário né um préquestionar que a gente chama que vem a ser um questionário de caracterização onde eu quero informações do usuário né então sei lá a idade gênero se ele é canhestro como é que é a visão dele se ela tá corrigido ou não né se entende não perfeita enfim eu quero saber coisas sobre ele né escolaridade coisas do gên depois que eu coletei os dados do usuário eu vou então fornecer a lista de tarefas que ele vai

ter que executar e observar a execução dessas tarefas depois a gente aplica um pós questionário ou faz uma entrevista ou faz as duas coisas no pós questionário aí eu quero a opinião dele aí eu quero saber o que que ele achou do experimento o que que ele achou do sistema que ele testou se tem alguma coisa que ele não gostou se tem alguma coisa que ele gostou especialmente então eu quero coletar essa informação que é qualitativo terminado isso eu agradeço e recompenso os participantes então o participante ele sempre é um voluntário então é de bom

Tom a gente dá alguma coisa para ele né O que pode muitas vezes ser um bombom uma bala né mas é legal a gente recompensar a gentileza da pessoa que nos ajudou em o experimento Então essa é esse é o roteiro em linhas Gerais de como é que acontece um ensaio de interação então para concluir né O que que a gente pode comentar aqui que que tem de bom em usar ensaio de interação então primeiro que análise eu tô fazendo análise das tarefas por usuários reais e não mais por especialistas eu consigo também identificar eh

os problemas mais graves de usabilidade quando eu testo com usuário né então para isso ele é essa essa técnica é bem importante mas tem também problemas ele tem um alto custo de realização precisa de um laboratório desabilidade toma precisa de muito tempo do de quem tá aplicando teste né E esse avaliador ele precisa de Treinamento adequado porque ele tem que se comportar exatamente do mesmo jeito com cada um dos usuários que for passar pelo teste né então Eh assim quando as pessoas não são bem treinadas o resultado não necessariamente vai ser aquele que a gente

espera né a gente tem que cuidar para não fazer nada errado Então essa é a ideia dos ensaios de interação