[Prévia] [Próxima] [Prévia por assunto] [Próxima por assunto]
[Índice cronológico] [Índice de assunto]

mensagem do Professor Setzer

Apenas com o objetivo demais informação copio aqui a mensagem do professor Waldemar Setzer sobre o ENEM o TRI etc. 
Quero esclarecer que não é minha opinião assim como as outras que enviei.
carlinhos

 Olá a todas/os,


Vou aproveitar o e-mail do Caio para tecer algumas considerações sobre  
as provas dos vestibulares e do ENEM. Falo em grande parte de minha  
experiência no CESCEM da Fundação Carlos Chagas, que começou a onda  
dos vestibulares unificados nas provas de 1965, e também foi o  
primeiro a usar apenas testes (acho que o primeiro vestibular com  
testes foi o do ITA em 1959, ano em que entrei lá). Eu fazia parte do  
Conselho da Fundação e era responsável pelo processamento de dados dos  
exames.

1. Se os alunos pudessem ver as correções das provas de redação,  
aposto que seria o fim do uso desse tipo de provas, pois iria ficar  
provado que elas simplesmente não funcionam do ponto de vista de  
correção objetiva. Vou dar um exemplo. Uma vez, talvez lá por 1967-68,  
eu fui à sala onde estavam sendo corrigidas as provas dissertativas de  
Matemática da MAPOFEI. Lembro muito bem que um examinador levantou-se  
e disse algo como ?O que aconteceu com essa prova?? Ele tinha  
corrigido a questão que lhe cabia, tinha dado a nota máxima, e teve  
curiosidade de olhar as outras já corrigidas. Acho que todas, ou  
algumas, estavam com zero. Então ele examinou as respostas e viu que  
estavam todas certas.

2. Suponhamos que se queira objetividade total nas correções, isto é,  
que a nota seja totalmente independente de quaisquer outros fatores  
além das respostas dadas pelos candidatos. Nesse caso, a única solução  
é usar testes de múltipla escolha.

3. O saudoso Prof. Walter Leser dizia que havia várias pesquisas  
indicando que um bom teste era equivalente a uma boa prova  
dissertativa bem corrigida, inclusive em português.

4. O maior argumento a favor das provas dissertativas é a influência  
disso no ensino, especialmente o médio. Aí há, em minha opinião, um  
erro terrível: organizar o ensino escolar visando os exames do ENEM e  
os vestibulares (eu passei por isso, pois fiz o Bandeirantes -- mas  
naquela época, isso se refletia apenas na quantidade de aulas de cada  
matéria , e não no conteúdo, que visava o conhecimento). O próprio  
CESCEM tinha como meta influenciar as escolas, por isso fazia exames  
de laboratório de física, química e biologia, que funcionavam. Não sei  
como contornar esse problema sem mudar a mentalidade dos professores e  
dos pais, mas as escolas Waldorf mostram que é possível ter um ensino  
de qualidade sem levar em conta os vestibulares. Talvez uma solução  
seria tornar os cursinhos públicos (mas, por favor, não estatais, como  
o são as assim chamadas "escolas públicas").

5. Por que provas dissertativas não funcionam? Muito simples, por dois  
motivos. O primeiro é a exaustão, física e psicológica. Quem acha que  
um examinador que examina sua primeira prova do dia vai corrigi-la com  
os mesmos critérios que usará ao examinar sua centésima prova do dia,  
levante a mão por e-mail. O segundo são os fatores físiológicos e  
psicológicos de cada examinador; por exemplo, não dormiu direito na  
noite anterior, está fazendo um regime violento para deixar de ter  
sobrepeso (a propósito, mal que já aflige 60% dos brasileiros), brigou  
com o/a parceiro/a, está preocupado com uma dívida impagável etc. etc.

6. Em um país de corrupção deslavada, em todos os níveis, é realmente  
impossível evitar vazamentos de provas e questões. Se é para evitar  
isso, um exame não pode envolver talvez nem mesmo centenas de milhares  
de candidatos, quanto mais milhões.

7. Um exame para todo o Brasil parece-me não fazer nenhum sentido,  
pois as diferenças culturais são muito grandes. Lembro-me que há  
muuuitos anos o INPE tinha um projeto de desenvolver uma TV e um  
sistema com satélites para ensino até no meio da mata. Um dos exemplos  
de programas educacionais falava de galochas, coisa desconhecida no  
Nordeste e no Norte, que continha a população-alvo principal, e em  
desuso aqui no Sul. Será que a formulação de uma questão prática de  
matemática ou de física deveria usar o mesmo linguajar em qualquer  
canto do país? Lembro de uma questão, acho que do ENEM, envolvendo  
taxa de conversão de moeda estrangeira. Ora bolas, quantos dos  
candidatos já estiveram no exterior e vivenciaram esse problema para  
entender do que se trata?

8. Esse critério de ajuste dos pesos das questões do ENEM baseado em  
sua dificuldade, a Teoria das Respostas ao Item (TRI) parece-me uma  
aberração, pois quero ver quantos candidatos conseguem entender como  
sua nota final é calculada, mesmo se isso fosse possível. É válido uma  
pessoa prestar um exame e não saber como sua nota é calculada? No  
mínimo, no mínimo, já que aparentemente o critério de dificuldade é  
avaliado em testes anteriores, cada questão deveria ter o seu peso  
especificado na prova (se é que ele não depende dos resultados dela  
mesma).

9. Na época do CESCEM e em anteriores, havia em algumas faculdades um  
problema de excedentes, alunos que tinham sido ?aprovados? mas não  
conseguiram vaga e que faziam um ba-fa-fá para serem considerados  
aprovados. Tratava-se de exames com nota mínima de aprovação e não  
selecionadores dos ?melhores?.(A propósito, que melhor é esse? A única  
coisa que se pode afirmar de um aluno aprovado em um vestibular é que  
no momento da prova ele soube responder as questões dela melhor do que  
outros; não se pode afirmar que ele será um bom aluno na universidade  
e muito menos um bom profissional.) Pois naquela época um professor  
que era largamente considerado meio maluco, inventou um sistema  
matricial para calcular as notas de modo que só fossem aprovados  
exatamente o número de vagas (será que não havia desistências naquela  
época?). Obviamente ele foi rejeitado pois os pesos usados para o  
cálculo, a fim de eles darem justinho o número desejado de aprovados,  
eram arbitrários, isto é, poderiam prejudicar alguns candidatos e  
favorecer outros. Será que isso não está acontecendo com esse critério  
misterioso (para mim, que não o conheço) do ENEM?

10. Achei um artigo sobre o TRI

Entenda a Teoria de Respostas ao Item (TRI), utilizada no Enem

(Se o vínculo não funcionar, faça uma busca no google com esse texto.)


Dei uma olhada no artigo; ele é genérico, sem mostrar os cálculos que  
são feitos. Estou em dúvidas quanto à isonomia mencionada nele, isto  
é, se todos os candidatos são realmente tratados da mesma maneira.  
Suponhamos que essa isonomia seja estatística. Ora, um resultado  
estatístico não pode ser aplicado a um indivíduo isolado. Se um  
remédio tem 10% de chance de matar uma pessoa e 90% de curar, se você  
tomá-lo e morrer, para você a primeira chance foi de 100% (mas não se  
preocupe, você não saberá disso...).

aaaaaaaaaaaaaaaaaaa, Val.

Carlos Alberto de Braganca Pereira <cpereira@ime.usp.br>