Este trabalho apresenta implicações para a preparação de materiais para o ensino mediado por computador, constatadas através de uma pesquisa na qual um teste de usabilidade foi aplicado a uma atividade de compreensão textual em inglês como LE. O conceito de usabilidade foi dividido em usabilidade de design - com foco na superfície do material - e usabilidade pedagógica - concentrada na apresentação de feedback e de estratégias de leitura. Cinco alunos iniciantes de inglês leram um texto e responderam a perguntas de compreensão usando a atividade mediada por computador. Esse material fornecia desempenho assistido na forma de dicionário acoplado ao texto, perguntas de compreensão com respostas abertas, e vários tipos de feedback ativados automaticamente. Os dados foram coletados por meio de auto-relato dos sujeitos, observação anotada e questionário pós-teste. Os resultados revelaram que os alunos - através do desempenho assistido - construíram sentido de um texto que estava além de sua competência lingüística.