2os Testes Escola De Eixo

Anexo 9 Resultado dos testes de usabilidade na Escola E.B 2/3 Integrada de Eixo

- Conteúdo

1 - Este foi o primeiro tutorial que estás a fazer?

Este foi o primeiro tutorial que estás a fazer?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas 2 - Achaste o tutorial muito difícil?

Achaste o tutorial muito difícil?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

3 - As indicações do tutorial eram fáceis?

As indicações do tutorial eram fáceis?

Nº de crianças inquiridas

5 4 3 3 2 1 0

1

2

3

4

5

Valores das respostas 4 - Achaste o tutorial muito grande?

Achaste o tutorial muito grande?

Nº de crianças inquiridas

5

4

3

1

0

SIM

NÃO

Valores das respostas

6

5 - Gostaste da história do tutorial?

Gostaste da história do tutorial?

Nº de crianças inquiridas

5 4 3 3 2 1 0

1

2

3

4

5

6

Valores das respostas 6 - Encontraste muitas palavras difíceis ao longo do tutorial?

Encontraste muitas palavras difíceis no tutorial?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

7 - Compreendeste o que é pedido ao longo do tutorial?

Compreendeste o que é pedido ao longo do tutorial?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

8 - Já conhecias o Scratch antes de fazeres este tutorial?

Já conhecias o Scratch antes (...)?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

9 - O tutorial ajudou-te a brincares melhor com o Scratch?

O tutorial ajudou-te a brincares melhor (...) ?

Nº de crianças inquiridas

5 4 3 2 1 0

1

2

3

4

5

Valores das respostas - Design 10 - Achaste o tutorial giro?

Achaste o tutorial giro?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

6

11 - As imagens do tutorial ajudaram-te a perceber melhor o que era para fazer?

As imagens do tutorial ajudaram-te (...) ?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

12 - Achas que o tutorial devia ter mais imagens?

Achas que o tutorial devia ter mais imagens?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

13 - Usaste os quadrados para assinalar os blocos que ias usando?

Usaste os quadrados para assinalar os blocos que ias usando?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

14 - Achas que isso te ajudou?

Achas que isso te ajudou?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Não Responde

Valores das respostas

- ìcones 15 - As imagens do desafio, obstáculo, meta e Screencast chamaram-te a atenção?

As imagens do desafio, obstáculo...

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas 16 - Estas imagens ajudaram-te a perceber melhor a história?

Estas imagens ajudaram-te a perceber melhor a história?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

17 - Achas que estas imagens indicam momentos importantes do tutorial?

Achas que estas imagens indicam momentos importantes do tutorial?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

- Screencast 18 - Conseguiste perceber quando tinhas um screencast para ver?

(...) screencast para ver?

Nº de crianças inquiridas

5 4 3 2 1 0

SIM

NÃO

Valores das respostas

19 - Os screencasts ajudaram-te a ultrapassar os obstáculos?

Os screencasts ajudaram-te a ultrapassar os obstáculos?

Nº de crianças inquiridas

5 4 3 2 1 0

1

2

3

4

Valores das respostas

5

6

20 - Compreendeste o que a Dani disse?

Compreendeste o que a Dani disse? 5

Valor

4 3 2 1 0

SIM

NÃO

Valores das respostas

Conclusões Como se explana em seguida, as conclusões derivadas dos testes realizados foram significativamente melhores que as primeiras. Primeiro, há que realçar que ao contrário do que aconteceu nos primeiros testes, estas crianças não conheciam o Scratch. Em relação aos resultados obtidos na parte do conteúdo, como já vimos nas conclusões do teste anterior, 40% das crianças acharam o tutorial difícil, no entanto, nesta segunda fase apenas 20% das crianças o acharam difícil. Esta diferença poderá dever-se ao facto de que as crianças que realizaram estes testes tinham entre os 10 e os 14 anos de idade e as crianças que realizaram os testes anteriores tinham entre os 10 e 12 anos. Esta diferença de 20% ficaria assim a dever-se, não ao facto da dificuldade do tutorial "Gato Comilão" ser de nível intermédio e pressupor algum conhecimento anterior, que estas crianças não tinham, mas ao facto de elas terem um nível cognitivo superior e estarem num grupo mais pequeno e um apoio maior por parte dos formadores fez com que as crianças tivessem mais atenção na leitura e realização do tutorial. Pedimos às crianças para classificarem se “As indicações do tutorial eram fáceis?” (questão 3) numa escala de 1 a 6. As respostas concentraram-se entre o 4 (40%) e o 5 (60%). A percentagem de 40% é relativamente significativa porque se encontra perto de uma classificação neutra. Mais uma vez, estas respostas nos levam a dizer que o facto de as crianças não conhecerem o Scratch dificulta, à primeira vista, a compreensão do tutorial. Tal como nos testes anteriores, à pergunta “Encontraste muitas palavras difíceis?” (questão 6), as crianças responderam unanimemente que não encontraram palavras difíceis. Esta resposta, a par com a questão “Compreendeste o que é pedido ao logo do tutorial?” (questão 7) que obteve 100% de respostas “Sim”, bem como a nossa observação directa de que todas as crianças terminaram o tutorial permitem-nos concluir que conseguimos transpor para uma linguagem simples e clara os conhecimentos inerente à literacia Scratch. Relativamente ao design, tal como aconteceu nos testes anteriores, as crianças disseram que gostam das imagens e consideram-nas importantes para a correcta interpretação da história, tal como indica o resultado de 100% de respostas “Sim” obtido nas questões “Achaste o tutorial giro?” e “As imagens do tutorial ajudaramte a perceber melhor o que era para fazer?” (questões 10 e 11). É interessante referir que 60% das crianças refere que o guia de orientação não devia ter mais imagens como é podemos pelas respostas dadas à questão “achas que o tutorial devia ter mais imagens?” (questão 12), o que nos leva a dizer que a relação “textoimagem” é satisfatória.

Acrescentámos ainda outra pergunta para saber se as crianças utilizaram os quadrados ao lado dos blocos para ir assinalando aqueles que iam utilizando. 40% das crianças responderam que os utilizaram. Apesar de não ser algo que tenha tido uma utilização muito forte, 40% é ainda assim um número significativo, o que nos leva a pensar que é algo a manter e a melhorar, num futuro próximo, através de testes. Como já referimos, nos resultados dos primeiros testes verificámos que as crianças referiram o facto de algumas imagens não terem cor. Assim, os ícones referentes aos momentos do “desafio”, “obstáculo”, “Screencast” e “meta” passaram a ser coloridos e com a descrição do seu significado. Mesmo depois desta alteração, apenas 20% das crianças associou os ícones a momentos importantes do tutorial e apenas 40% consideraram que os ícones ajudam a perceber melhor a história. Mais uma vez, estes valores levam-nos a repensar os ícones para associar a determinados momentos. Em relação aos Screencasts, 80% das crianças conseguiram perceber, através do ícone da lupa, que existia um vídeo para ver. E, ao contrário, do que aconteceu no teste anterior, a maioria das crianças consideraram que os Screencasts ajudavam a ultrapassar os obstáculos. Isto leva-nos a dizer que, para quem não conhece o Scratch, toda a ajuda é bem-vinda. De um modo geral, na nossa opinião, os resultados obtidos nesta segunda fase de testes indicaram-nos que estas crianças, que não tiveram qualquer sessão de formação, nem estiveram presentes no festival Scratch’ando com o Sapo, mostraram-se mais atentas durante a realização do tutorial. Este facto pode deverse aos seguintes factores: - era um grupo de apenas 5 crianças que tiveram apoio numa base de 1 para 1 e não uma turma com quase 25 crianças; - o desconhecimento face à aplicação aumentou o nível de concentração e, o facto de ainda não conhecerem o Scratch, fez com que lessem todo o tutorial e não andassem “a saltar de ponto para ponto”, como aconteceu nos testes anteriores. No entanto, perante o desafio de fazerem algo sem o apoio do tutorial mostraramse receosas, preferindo ver apenas o ficheiro final.