Avaliação Digital no Ensino Superior em Portugal: Projeto @ssess.he Alda Pereira, Isolina Oliveira, Lúcia Amante, Teresa Cardoso & Mª do Carmo Pinto

Objetivo geral do projeto Estudar as estratégias de avaliação digital, adequadas e válidas aos ambientes virtuais de aprendizagem no Ensino Superior, contribuindo para a clarificação de processos e visando a definição de indicadores que garantam a sua autenticidade e validade na avaliação de competências em contextos de elearning.

Questões de investigação Que modelos e estratégias de avaliação são usadas no ES em ambientes virtuais (b-learning e elearning)? Como definir a autenticidade das tarefas de avaliação? Quais os indicadores a usar de forma a garantir a validade da avaliação realizada de modo digital? Como pode ser equacionada a relação entre a certificação de competências e o uso de estratégias de avaliação alternativa em ambientes virtuais?

Etapas do Projeto O projeto, foi financiado pela FCT e decorreu ao longo de 3 anos. Nesta 1ª fase teve como etapas: 1) Estabelecimento de uma matriz teórica sobre avaliação digital, onde se pretendia contribuir para a clarificação de conceitos e aspetos fundamentais; 2) Aplicação Inquérito (survey) sobre estratégias de avaliação em ambientes virtuais no Ensino Superior português; 3) Estudos de caso de utilização de avaliação digital em ambientes de e-learning no ES, com recurso a entrevistas individuais semi-estruturadas. 4) Análise comparativa dos estudos de caso. Conceitos tais como: , a exemplo de competência, avaliação de competências, avaliação alternativa, avaliação autêntica, validade e fiabilidade da avaliação alternativa. 2. procurando elencar estratégias de avaliação usadas no ensino superior em contextos de avaliação digital (presencial, blended-learning e online) e o racional para a sua utilização. 3. Estes estudos de caso visavam identificar estratégias bem sucedidas de avaliação digital no ES, procurando ainda identificar a relação entre as estratégias de avaliação digital usadas e o processo de certificação.

Desenvolvimento Usou-se uma pluralidade de métodos e técnicas, inspiradas no método de investigação baseada no desenho DBR, design-based research. Foi elaborada uma 1ª versão de um quadro conceptual resultante da pesquisa e discussão teórica no seio da equipa bem como do contributo dos consultores externos; Foi traçado um panorama sobre a utilização das tecnologias na avaliação no âmbito do ensino superior, a partir dos resultados do questionário realizado junto dos docentes desse nível de ensino; Estas duas primeiras etapas fizeram emergir uma matriz conceptual global capaz de responder aos desafios da avaliação eletrónica num quadro de avaliação de competências no ES; Com base nesta matriz foram realizados 12 estudos de caso, permitindo um aprofundamento qualitativo de várias práticas de avaliação em contextos diversificados. , correspondendo a um segundo ciclo de design based research. Pretendia-se deste modo analisar e validar contextualmente as assunções teóricas entretanto formuladas.

Ruptura nos pressupostos da avaliação Cultura do teste Cultura da avaliação Avaliação do processo e do produto Participação do estudante Pluralidade de formas não estandardizadas Tarefas de avaliação próximas do real Valorização da descrição qualitativa Avaliação integrada em contextos Reforço da reflexão dos estudantes Quantitativa Exercícios descontextualizados Testes estandardizados Formação de rankings

Dimensões da avaliação alternativa digital

Principais conclusões O conceito de competências não está ainda estabilizado junto dos docentes do Ensino Superior; Utilização significativa de dispositivos tecnológicos e serviços integrados em plataformas, com particular relevo para a submissão de documentos (texto, áudio, vídeo). Há uma grande incidência no uso da tecnologia como “meio” de entrega de trabalhos;

Principais conclusões O professor continua a ser por excelência o único avaliador, minimizando o papel do estudante; A transparência nos processos avaliativos é limitada. Foca-se na divulgação prévia por parte do professor dos momentos e formas de avaliação e de alguns critérios gerais; É notório o déficit de participação do estudante nas práticas avaliativas no Ensino Superior.

Continuidade do projeto O projeto deu lugar a diversas publicações e continua em desenvolvimento, agora numa 2ª fase. O quadro conceptual evoluiu para o atualmente designado Modelo PrACT (Praticabilidade, Autenticidade, Consistência e Transparência) tendo este modelo vindo a ser aplicado à análise de processos de avaliação digital em novos contextos, designadamente de ensino não superior, na sequência de processos de formação e de desenvolvimento de trabalhos de pós-doutoramento na área.

Obrigada! Alda.Pereira@uab.pt Lucia.Amante@uab.pt Isolina.Oliveira@uab.pt Teresa.Cardoso@uab.pt Maria.Pinto@uab.pt