As vantagens e desvantagens do uso de questões de julgamento em avaliações de aprendizagem, bem como a inserção da penalização de respostas erradas como mecanismo de ajuste sobre o acerto casual, já foram apresentadas e discutidas por diversos autores no contexto da avaliação de aprendizagem. No entanto, pouco estudo tem sido feito no Brasil no sentido de entender a extensão da influência do uso da penalização de respostas erradas na medida da proficiência do aluno no domínio avaliado. Neste sentido, este artigo apresenta um estudo realizado na Universidade de Brasília, com os alunos das disciplinas básicas de Física-1 e Física-2 oriundos de 20 cursos diferentes, no modelo das Disciplinas Unificadas da Física, que foram submetidos alternadamente a avaliações com penalidade e sem penalidade. O efeito da redução da confiabilidade do escore devido à penalidade é confrontado estatisticamente com o efeito do aumento do poder discriminativo da prova devido à redução do “chute”. Uma nova grandeza chamada ganho na qualidade γ é proposta para interpretar os resultados desses efeitos combinados. Ao final, fica demonstrado que o aumento do poder discriminativo da prova supera a redução da confiabilidade do escore quando se aplica a penalização de respostas erradas em itens de julgamento.

The advantages and disadvantages of using true/false tests in learning assessments, as well as the insertion of penalization (negative marking) of wrong answers as mechanism of adjustment on the guessing success, have already been presented and discussed by several authors in the context of learning assessment. However, few studies has been done in Brazil to understand the extent of the influence of using penalization of wrong answers in the measure of student proficiency in the evaluated domain. Hence, this article presents a study carried out at the University of Brasília, with the students of the basic disciplines of Physics-1 and Physics-2 coming from 20 different courses, in the unified Physics disciplines model. The students were alternately submitted to assessments with penalty and without penalty. The effect of reducing the reliability of the score due to the penalty is statistically compared with the effect of increasing the discriminatory power of the test due to the reduction of the guessworking. A new magnitude called “statistical yield” is proposed to interpret the results of these combined effects. To conclude, it is demonstrated that the increase in the discriminatory power of the test outweighs the reduction of the reliability of the score when applying penalization of wrong answers in true/false tests.

A queda na qualidade de ensino é muitas vezes considerada uma consequência inevitável do aumento no número de alunos atendidos por uma disciplina universitária. No entanto, unificar a avaliação e outros elementos envolvidos com as disciplinas pode trazer ganhos em vários níveis do processo pedagógico. Para tratar desse assunto, esse artigo divide-se em duas partes: a primeira discute a implementação da unificação das disciplinas de Física-1 e Física-2, e a segunda analisa, estatisticamente, os resultados obtidos. São apresentadas técnicas que podem ser utilizadas para lidar com um grande número de alunos de maneira satisfatória, a maior parte delas baseadas no uso de ferramentas computacionais, adotadas no Instituto de Física da Universidade de Brasília para melhorar a formação dos alunos e a utilização dos recursos humanos. É apresentada a demanda de trabalho envolvida na unificação, permitindo avaliar a sua viabilidade em outras instituições. Diversas análises são realizadas a partir dos dados dos alunos da unificação, para determinar como a taxa de abandono e o desempenho dos alunos depende do professor, do comprometimento dos alunos com a disciplina, da existência de uma prova final e da formação pregressa do aluno. Ao final, fica demonstrado que o aumento na quantidade de alunos, aliado à adoção de práticas pedagógica unificadas, pode trazer benefícios ao processo como um todo.

The decline in the quality of education is often considered an inevitable consequence of increasing the number of students of the university courses. However, the unification of assessments and other changes in the courses can bring gains at various levels of the educational process. In order to address this issue, this article is divided into two parts: the first part discusses the implementation of the unification of the disciplines of Physics 1 and Physics 2, and the second part is a statistical analysis of results. Techniques are presented that can be used to satisfactorily handle a large number of students. Most of them are based on computational tools, and were used at the Physics Institute at the University of Brasilia to improve the training of students and the use of human resources. It is discussed the effort to propose this unification in other institutions. Several analyzes are performed from the data of students, in order to determine how the dropout rate and student performance depends on the teacher, on the commitment of students with the course, on the existence of a final exam, and on the educational background of the students. Finally, it is shown that the increase in the number of students, coupled with the adoption of unified pedagogical practices, can bring benefits to the whole educational process.