Revista Diálogos Pedagógicos A UEL comenta suas provas Vestibular 2012 DIÁLOGOS PEDAGÓGICOS LONDRINA, PR P. 1 - 199 2012 Caro(a) Leitor(a) É com grande satisfação que apresentamos o quarto número da Revista Diálogos Pedagógicos, periódico voltado a profissionais de ensino, alunos e público em geral, envolvidos de alguma forma com o processo seletivo vestibu- lar da Universidade Estadual de Londrina (UEL). Diálogos Pedagógicos é resultado de um projeto pautado na transparência, no compromisso e na seriedade com a avaliação por que passam os candidatos aos cursos de graduação de nossa Universidade. Sabemos o quão importante é a certeza de como se dá o processo e é isso que nos move. Já tem sido tradição comentar o resultado da Redação e divulgar os gabaritos da prova de Conhecimentos Gerais acrescido da análise dos seus resultados. A partir deste ano, esse processo abrangerá também as questões da nova Prova de Conhecimentos Específicos. Como se trata da primeira prova discursiva do nosso Processo Se- letivo, entendemos como de suma importância trazer à comunidade reflexões sobre a sua elaboração, formato, gabarito e resultados. Se tais avaliações já foram feitas e se obviamente não se repetirão, por que voltar a elas? Que relevância isso tem a não ser para fazer um balanço do processo? É preciso que o retorno a uma avaliação do desempenho dos candidatos traga, em seu bojo, a revisão dos passos norteadores do processo. Qual a validade de determinadas questões? O que as tornou capazes de discriminar grupos de candidatos e ao mesmo tempo se revelarem justas? O que as classifica como ruins na sua capacidade de avaliar o conhecimento escolar e de mundo dos candidatos? O que podemos fazer para aprimorar o Vestibular da UEL? O que pensam e o que sabem os alunos? Essas são perguntas que nos fazemos a todo instante. Sabemos que, ao fazê-las – e compartilhá-las –, estamos consoli- dando o laço necessário que deve unir a Universidade à comunidade externa. E isso não é pouco. Iniciamos com a análise de metade das 60 questões da Prova de Conhecimentos Gerais. Nesse momento, nós nos deteremos sobre o conteúdo programático, as habilidades requeridas, além do gabarito comentado, seguido de comentários a respeito do nível de dificuldade da questão e sua capacidade de discriminar os candidatos, em outras palavras, de distinguir o grupo mais bem preparado do menos preparado. Assim, isso nos possibilita captar se a questão ratificou as expectativas: o bom candidato tende a sair-se melhor do que aquele que não se preparara tão bem. Isso é importante, uma vez que se espera das questões justiça e capacidade de avaliar o conhecimento, sem a intervenção do acaso. Em seguida, apresentamos a análise das questões discursivas da Prova de Conhecimentos Específicos da 2ª fase. Apostamos na relevância dessa análise porquanto se desvelarão nossos critérios e, ao mesmo tempo, uma pequena amostra dos textos dos candidatos ao nosso Vestibular. A propósito desse recorte, apresentaremos algu- mas reflexões que, acreditamos, serão úteis ao trabalho nas escolas e cursinhos. Por fim, parte-se para a análise de algumas redações representativas das duas propostas apresentadas no Vesti- bular 2012 da UEL: a primeira solicitava a elaboração de um resumo a partir de uma reportagem sobre o fundador da Apple, Steve Jobs. A segunda apresentava outra reportagem, desta vez sobre o confronto entre o Brasil e a Fifa devido à Copa do Mundo de 2014. Como se poderá conferir, a seleção dos textos dos candidatos obedecerá a parâmetros bem definidos: textos satisfatórios, parcialmente satisfatórios e insatisfatórios. A presente análise procura revelar as bases que sustentam as avaliações dos textos dos alunos e, embora assentada sobre o já feito, serve como guia aos futuros candidatos sobre o que evitar ou estimular. Desejamos, pois, uma ótima leitura e um bom proveito deste material. A Universidade Estadual de Londrina deseja que este diálogo se revele produtivo e promova, mais uma vez, uma troca com a comunidade externa. Cristina Valéria Bulhões Simon Gladys Plens de Quevedo P. de Camargo Coordenadora/Cops Diretora Pedagógica/Cops Índice 1 Primeira Fase: Conhecimentos Gerais 7 1.1 Prova Comentada 10 2 Segunda Fase: Conhecimentos Específicos 72 2.1 Critérios gerais de avaliação 72 2.2 Atribuição de notas 72 2.3 Gabaritos, análises e amostras de respostas 74 Artes 74 Biologia 84 Filosofia 94 Física 106 Geografia 118 História 126 Língua Portuguesa e Literatura 136 Matemática 146 Química 158 Sociologia 168 Língua Estrangeira (Inglês) 176 Língua Estrangeira (Espanhol) 185 3 Redação 193 3.1 Critérios de avaliação 193 3.2 Análise de provas de redação -- Tema 1 193 3.2.1 Exemplo de texto satisfatório 194 3.2.2 Exemplo de texto parcialmente satisfatório 195 3.2.3 Exemplo de texto insatisfatório 195 3.2.4 Exemplo de texto que foge à proposta 196 3.3 Análise de provas de redação -- Tema 2 196 3.3.1 Exemplo de texto satisfatório 197 3.3.2 Exemplo de texto parcialmente satisfatório 198 3.3.3 Exemplo de texto insatisfatório 198 3.3.4 Exemplo de texto que foge à proposta 199 DIÁLOGOS PEDAGÓGICOS UEL – VESTIBULAR 2012 1 Primeira fase: Conhecimentos Gerais A divulgação da prova comentada da 1ª fase do Vestibular da UEL tornou-se uma prática a partir de 2009. Esse trabalho que realizamos com o suporte da Teoria Clássica de Testes (TCT) nos permite analisar o instrumento com base em dois critérios: a dificuldade de cada questão, medida pelo percentual de acertos dos candidatos, e seu potencial de discriminação, medido pela relação entre as respostas dos candidatos a uma determinada questão e as pontuações totais no conjunto dos itens. Quanto à dificuldade, os itens são classificados de muito fácil até muito difícil, considerando-se o percentual de acertos dos candidatos envolvidos. Nesta prova, quando a porcentagem de candidatos que responderam correta- mente a determinado item for maior do que 80%, este item é considerado muito fácil; entre 60% e 80%, fácil; entre 40% e 60%, intermediário; entre 20% e 40%, difícil; abaixo de 20%, muito difícil. O índice de discriminação, por sua vez, é calculado pela diferença entre as médias obtidas pelos candidatos do grupo inferior e do grupo superior em cada item, considerando-se o grupo inferior, formado por 27% dos candida- tos que obtiveram as menores notas no conjunto das 60 questões, e o grupo superior, constituído por 27% dos candidatos que obtiveram as melhores notas no conjunto das 60 questões. Por exemplo, a questão 4 foi respon- dida corretamente por 89,0% dos candidatos com as melhores notas e por 50,0% dos candidatos com as piores notas, resultando em uma discriminação de 89,0 - 50,0 = 39. De modo geral, quanto maiores forem os índices de discriminação (entre -1 e 1), melhores serão os itens em relação à discriminação e mais equilibrada será a prova. A correlação bisserial fornece um coeficiente que associa a habilidade do candidato com a probabilidade de este responder ao item corretamente, e é calculado para cada uma das 5 alternativas do item. Este número varia entre -1 e 1, e deve ser positivo e alto para a alternativa correta e negativo para as incorretas. Quando isto não ocorre, provavelmente o item apresenta algum tipo de problema em sua formulação, levando os candidatos mais bem preparados a optarem pela alternativa incorreta, caracterizando o item como pobre em relação à discriminação. O índice de discriminação, juntamente com a correlação bisserial, proporciona parâmetros para uma análise qua- litativa de cada item da prova. Dentre os 25.119 candidatos inscritos na Primeira Fase do Vestibular 2012, 1.865 (7,42%) estiveram ausentes e, entre os que compareceram, 9.002 (35,83%) foram convocados para a Segunda Fase. A análise clássica, ou quantitativa, que apresentamos considera o universo total dos candidatos. Entretanto, a análise do grau de discriminação foi feita somente para os 7.839 candidatos que realizaram a "Prova 1". Este conjunto de um terço dos candidatos é suficientemente significativo para a análise que fazemos, cujo propósito é nos oferecer elementos para o aprimoramento da avaliação. Antes da análise qualitativa das questões selecionadas para este fim, é pertinente considerar alguns aspectos gerais que os números revelam. Das 60 questões da prova da 1ª fase do Vestibular 2012, tem-se o seguinte quadro: Quadro 1: Grau de Dificuldade das questões Grau de Dificuldade Quantidade de questões Percentual Muito difícil 8 13,3% Difícil 25 41,7% Intermediária 12 20,0% Fácil 15 25,0% TOTAL 60 100% Os números revelam predomínio de questões difíceis. Ao contrário do que se presume, provas com alto número de itens difíceis continuam selecionando os melhores candidatos aos cursos mais disputados, sem contribuir ne- cessariamente para o acesso de quem busca os cursos menos concorridos. Para este vestibular, as disciplinas de Física e Química foram as que tiveram maior número de questões difíceis, sendo que dos 7 itens de Física, 4 foram difíceis, e dos 6 itens de Química, 4 foram difíceis. No outro extremo, o maior número de questões fáceis diz respeito à disciplina de Geografia, como se pode ver no quadro seguinte: 7 DIÁLOGOS PEDAGÓGICOS UEL – VESTIBULAR 2012 Quadro 2: Distribuição das áreas, segundo o grau de Dificuldade Grau de Dificuldade Área Muito Difícil Difícil Intermediária Fácil Total Geral ARTES 4 1 1 6 0,0% 16,0% 8,3% 6,7% 10,0% ARTES/HISTORIA 1 1 0,0% 0,0% 0,0% 6,7% 1,7% BIOLOGIA 1 2 2 1 6 12,5% 8,0% 16,7% 6,7% 10,0% FILOSOFIA 2 2 1 1 6 25,0% 8,0% 8,3% 6,7% 10,0% FÍSICA 2 4 1 7 25,0% 16,0% 8,3% 0,0% 11,7% GEOGRAFIA 2 1 4 7 0,0% 8,0% 8,3% 26,7% 11,7% HISTÓRIA 2 1 2 2 7 25,0% 4,0% 16,7% 13,3% 11,7% MATEMÁTICA 3 2 2 7 0,0% 12,0% 16,7% 13,3% 11,7% QUÍMICA 1 5 6 12,5% 20,0% 0,0% 0,0% 10,0% SOCIOLOGIA 2 2 3 7 0,0% 8,0% 16,7% 20,0% 11,7% TOTAL DE QUESTÕES 8 25 12 15 60 PORCENTAGEM 100,0% 100,0% 100,0% 100,0% 100,0% É importante destacar que isso, por si, não caracteriza o perfil da questão tampouco permite avaliar sua relevân- cia.