Itens mais relevantes da Ficha

Apresentação em tema: "Itens mais relevantes da Ficha"— Transcrição da apresentação:

1 Itens mais relevantes da Ficha
Ficha de Avaliação PARTE I Identificação dos Itens mais relevantes da Ficha Base: Resultados da Trienal 2007 (1ª etapa da avaliação)

2 QUESITOS da Ficha de Avaliação
1 – Proposta do Programa 2 – Corpo Docente 3 – Corpo Discente, Teses e Dissertações 4 – Produção Intelectual 5 – Inserção Social 6 – Atribuição notas 6 e 7

3 Quesitos desdobrados em ITENS
Exemplo: Quesito 3

4 Ponderações para cálculo
QUESITOS da Ficha de Avaliação Ponderações para cálculo da média ponderada: 1 – Proposta do Programa 2 – Corpo Docente 3 – Corpo Discente, Teses e Dissertações 4 – Produção Intelectual 5 – Inserção Social 6 – Atribuição notas 6 e 7 30% +/- 5 pp 10% 4 Atributos (Q’s 2 a 5) convertidos em Notas Média ponderada Tendência Dominante (atributo) Conceito 1 a 5 Conceito 1 a 5 Conceito 5 a 7 Alguns 5 1 Atributo (Q 6)

5 Dos Itens ao Quesito Exemplo:

6 Dos Quesitos ao Conceito

7 Quesitos desdobrados em ITENS
Nº de áreas Ex.: Quesito 3 (QUADRO 1) Itens utilizados (Quesitos 2 a 5): Química = 14 Economia = 15 Engªs IV = 16 Artes = Demais áreas (41): 17 a 19 itens 17 itens são comuns a pelo menos 40 áreas (negrito) [Ex.: ; ; ; ; ]

8 Conclusão do trabalho: 7 itens selecionados da Ficha de Avaliação
seriam suficientes para que a Tendência Dominante de uma significativa parcela dos PPGs chegasse, praticamente, ao mesmo nível apurado quando considerados todos os itens da Ficha de Avaliação (em torno de 18). e 3.7 e 5.5

9 7 itens mais significativos, do ponto de vista quantitativo:
3.4) Orientações de teses e dissertações concluídas no período de avaliação em relação ao corpo docente permanente e à dimensão do corpo discente; 3.5) Participação de discentes autores da pós-graduação e da graduação na produção científica do programa; 3.7) Qualidade das Teses e Dissertações: Teses e Dissertações vinculadas a publicações; 4.2) Distribuição de publicações qualificadas em relação ao corpo docente do Programa; 4.5) Outras produções consideradas relevantes (produção, técnica, patentes, produtos etc.); 4.7) Publicações qualificadas do Programa por docente permanente; 5.5) Inserção e impacto regional e (ou) nacional do programa.

10 Primeira etapa: Ponto de partida os 17 itens comuns a pelo menos
40 áreas de avaliação, sem observar os pesos definidos pelo CTC; única restrição: peso de cada item maior do que 5%; Média Efetiva: média (*) das notas atribuídas aos itens utilizando os pesos (**) fixados pelo CTC. (*) Média aritmética ponderada das notas de todos os itens, sem arredondar a nota do quesito. (**) Quando necessário, os pesos fixados pelo CTC foram recalculados de forma linear. Média Calculada: média aritmética ponderada utilizando os pesos obtidos no exercício, calculados por programação linear com o auxílio da ferramenta Solver/Excel, utilizando o método dos mínimos quadrados. Quais são os pesos implícitos que tornam a diferença entre as médias, efetiva e calculada, a menor possível ?

11 Ao final da 1ª etapa foram excluídos 4 itens
(aqueles relacionados ao menor número de áreas: 2.3 (10 áreas); (9 áreas) 5.6 ( 10); (8áreas). Em etapas sucessivas foram excluídos os itens 2.8; 2.5 e 2.9, restando 10 itens. Desses, 3 eram relacionados a indicadores meio (2.2; 2.7 e 3.1). Ao final esses 3 itens foram excluídos e considerada a restrição de que os pesos calculados deveriam ficar dentro de uma faixa de +/- 5 p.p em torno dos pesos fixados pelo CTC (quando necessário recalculados linearmente).

12 Ao final, pôde-se constatar que a Tendência Dominante apurada
seria a mesma para 82% dos PPGs, quer utilizando como referência Média Efetiva quer a Média Calculada. Aquele porcentual de convergência seria ampliado para 90% caso um segundo critério fosse empregado para apurar a taxa de convergência. Por esse critério, também são contabilizados como convergentes aqueles casos em que pelo menos uma das duas médias aritméticas ponderadas, efetiva ou calculada, se aloja na estreita faixa que encerra os limites de classe que demarcam as fronteiras entre as notas (limite +/- 0,05 pontos). Ver QUADRO 2, detalhamento por área de avaliação. % de convergência por área: 11 áreas: 95% ou + 25 áreas: 88 a 93% 8 áreas: 81 a 86% 1 área: 76%

13 Itens relacionados a PROCESSO X Itens relacionados a RESULTADOS
Ficha de Avaliação PARTE II Itens relacionados a PROCESSO X Itens relacionados a RESULTADOS Base: Resultados da Trienal 2007 (1ª etapa da avaliação)

14 Média aritmética simples das Notas consignadas a 17 itens selecionados [1/]
Q2 Q3 Q4 Q5 [1/] Itens relativos aos Quesitos 2 a 5, utilizados por pelo menos 40 áreas de avaliação.

15 Média aritmética simples das Notas consignadas a 17 itens selecionados
de acordo com o Conceito proposto pelas CAs ao CTC (1ª etapa da avaliação) Universo: PPGs acadêmicos; 17 itens selecionados, relativos aos Quesitos 2 a 5, utilizados por pelo menos 40 áreas de avaliação. continua ...

16 ... continuação

17 % Estratificação dos PPGs acadêmicos (2.100 Programas): N = 1.177
Legenda: M: apenas Mestrado M/D: Mestrado e Doutorado ou apenas Doutorado “Novo”: Ano início PPG após 2001 “Velho” : Ano início PPG até 2001

18 [1/] 12 itens: [2/]: 5 itens:

19 12 Itens relacionados a PROCESSO: 5 Itens relacionados a RESULTADOS:
Legenda: M: apenas Mestrado M/D: Mestrado e Doutorado ou apenas Doutorado “Novo”: Ano início PPG após 2001 “Velho” : Ano início PPG até 2001 Subconjunto: PPGs acadêmicos das áreas que utilizam, no máximo, 12 itens atinentes a processo E 5 a resultados Subconjunto: PPGs acadêmicos das áreas que utilizam, no máximo, 12 itens atinentes a processo 12 Itens relacionados a PROCESSO: 5 Itens relacionados a RESULTADOS:

20 Universo: 2.100 PPGs acadêmicos
[C]: Média aritmética simples dos CONCEITOS (1 a 5) [N]: Média aritmética simples dos atributos convertidos em NOTAS Diferença: [N] – [C] Diferença entre as médias, Processo (-) Resultado: