Avaliação da aprendizagem - Cipriano Luckesi

Summary

The speaker discusses the historical context of educational assessment, highlighting its origins in societal selection methods and its evolution into a tool for success across various domains. They emphasize the importance of assessment not just for student learning but also for evaluating institutional effectiveness. The talk advocates for a balanced approach to assessment that includes both pedagogical support for individual learners and a political perspective on promoting social equality through education.

Takeaways

• 😀 Traditional assessment methods have been used in Western education for the past 500 years, with exams being introduced to determine student learning since the 10th century.
• 🏫 The shift from individual master-apprentice relationships to teaching many students led to the adoption of exams as a way to select and ensure learning.
• 📊 The purpose of assessment is to ensure success in various fields, acting as a diagnostic tool to indicate whether results are satisfactory or not.
• 🔍 Assessment does not solve problems but identifies the quality of outcomes, with management and decision-making being responsible for addressing any issues.
• 📚 The concept of educational failure has often been attributed to the student, but since the 1980s, the idea that institutions can also fail has been considered.
• 🌐 Large-scale assessments like the National Assessment of Higher Education (Enade) in Brazil serve to evaluate not just student performance but also the effectiveness of the educational system.
• 📈 Teachers should track student learning outcomes to identify the effectiveness of their teaching methods, using simple statistical curves to reveal the success or failure of their educational approach.
• 📝 Assessment tools should be systematic, comprehensible, aligned with taught content, and precise to accurately measure student performance.
• 🔄 The process of assessment involves gathering data, comparing it to quality standards, and intervening to improve outcomes if necessary.
• 🌟 Assessment is not only pedagogically important for achieving desired learning outcomes but also politically significant for promoting social equality and democratization.
• 🙌 The speaker emphasizes the importance of investing in assessment practices to improve learning outcomes and contribute to a more democratic society.

Q & A

What has been the traditional method of assessing learning in Western education for the past 500 years?

The traditional method of assessing learning in Western education for the past 500 years has been through school exams, which were imported from societal practices of the pre-16th century for the purpose of selection and elitism.

Why was the shift to teaching larger groups of students accompanied by the introduction of exams in education?

The shift to teaching larger groups of students required a method to assess if they had learned effectively. Exams, which were used for societal selection, were introduced to serve this purpose within the educational system.

What is the primary function of evaluation according to the script?

The primary function of evaluation is to ensure success in various aspects of life, including business, religious experience, politics, and family life. It serves as a diagnostic tool to signal whether the results achieved are satisfactory or not.

How does the script differentiate between the roles of evaluation and management in achieving desired outcomes?

Evaluation is responsible for diagnosing the quality of results, while management is responsible for administering actions to achieve the desired outcomes. Evaluation provides an indicator, and the solution comes from management decisions and investments.

What is the script's perspective on the traditional view of student failure in education?

The traditional view has been to blame the student for failure, attributing it to a lack of desire to learn or other personal factors. However, the script suggests that institutional failure should also be considered as a contributing factor.

What changes began to occur in the late 1980s regarding the perception of educational failure?

In the late 1980s, there was a shift in thinking to include the possibility that the educational institution itself could be failing, not just the student. This led to the concept of institutional evaluation.

What is the role of large-scale evaluations like the National Course Exam or the Enade in the educational system?

Large-scale evaluations like the National Course Exam or the Enade serve to assess not only student performance but also the effectiveness of the educational system itself, to determine if it is meeting its promises or failing.

Why is it important for a teacher to track the learning curve of their students?

Tracking the learning curve of students can reveal the effectiveness of a teacher's methods and highlight any fragility or failure in their teaching approach, allowing for necessary adjustments and improvements.

What are the key characteristics that the script suggests should be present in assessment tools used in education?

The key characteristics of assessment tools should include systematic coverage of all taught content, comprehensible language for students, compatibility with the taught content in terms of difficulty and methodology, and precision in the questions to ensure clear understanding.

How does the script relate the act of evaluating to scientific research?

The script relates the act of evaluating to scientific research by stating that both aim to produce knowledge. While scientific research seeks to understand how reality works, evaluation seeks to understand the quality of reality, with the difference being the expected outcome.

What is the script's stance on the importance of investing in the practice of learning evaluation?

The script emphasizes that investing in the practice of learning evaluation is crucial as it not only ensures the efficiency of the pedagogical project but also has a revolutionary political consequence, contributing to the democratization of society by ensuring that all students learn what is necessary.

Outlines

00:00

📚 The Evolution of Educational Assessment

This paragraph discusses the historical context of educational assessment, tracing its roots back to the 16th century when the concept of exams was introduced to gauge student learning. It highlights the shift from a master-apprentice model to a more collective teaching approach, necessitating a method to assess large groups of students. The paragraph emphasizes the role of assessment as a tool for success across various domains, not just education, and clarifies that while assessment measures the quality of outcomes, it is management and decision-making that drive improvements.

05:01

🎓 Rethinking School Failure: A Broader Perspective

The second paragraph addresses the issue of school failure, traditionally attributed to students themselves. It points out a shift in perspective since the 1980s, recognizing that institutional factors may also contribute to educational failure. The paragraph introduces the concept of institutional evaluation, such as the National Course Exam (Enade) in Brazil, to assess the effectiveness of the educational system itself. It suggests that assessments should not only focus on individual students but also on the system and classroom practices to identify where improvements are needed.

10:02

🔍 The Scientific Rigor of Assessments

This paragraph draws a parallel between scientific research and educational assessment, emphasizing the importance of rigor in the assessment process. It discusses the need for systematic and comprehensive tools to measure student learning effectively. The paragraph stresses the importance of aligning assessment instruments with the content taught, ensuring they are understandable to students, and maintaining precision in the questions asked. It also touches on the comparison of performance against quality standards as a fundamental step in the assessment process.

15:04

🌟 The Impact of Assessment on Educational and Social Equality

The final paragraph explores the broader implications of assessment practices, viewing them as not only pedagogical tools but also as political resources that can contribute to social democratization. It argues that by planning and investing in the learning process to ensure everyone acquires necessary knowledge, education can empower individuals to participate more fully in society. The paragraph concludes by highlighting the revolutionary potential of assessment to support the pursuit of better outcomes for all, thereby promoting a more significant sociocultural development.

Keywords

💡Assessment

Assessment in the context of the video refers to the process of evaluating learning outcomes in education. It is a key concept as it is discussed as both a tool for ensuring success and a method for diagnosing the effectiveness of teaching methods. The video emphasizes that the purpose of assessment is not just to select or exclude students but to provide feedback that can guide improvements in teaching and learning.

💡Educational Tradition

The term 'educational tradition' is used to describe the historical practices in Western education systems that have persisted for centuries. In the video, it is mentioned in the context of how the examination system was imported into schools from societal practices for selection, indicating a shift from individualized teaching to a more selective and standardized approach.

💡Success

Success in the video is presented as the ultimate goal of assessment. It is defined as achieving the desired outcomes in various areas, including education, business, and politics. The speaker argues that assessment plays a crucial role in signaling whether the results obtained are satisfactory or not, thereby guiding efforts to achieve success.

💡Management

Management is discussed as the process of administering or organizing resources to achieve a specific outcome. In the video, it is differentiated from assessment, with the latter providing the necessary data and the former being responsible for making decisions and taking actions to improve outcomes based on the assessment results.

💡Student Failure

The concept of 'student failure' is mentioned as a traditional view that attributes educational shortcomings solely to the student. The video script challenges this notion, suggesting that institutional factors may also contribute to educational failure, and that a more comprehensive assessment should consider the system's role in addition to the student's.

💡Institutional Failure

Institutional failure is introduced as a shift in perspective from viewing failure as a student's problem to recognizing that the educational system itself may be at fault. The video mentions the emergence of institutional assessment in the late 1980s as a way to evaluate the system's effectiveness in delivering on its promises.

💡National Assessment System

The 'National Assessment System' is a specific example of institutional assessment mentioned in the video. It refers to a system in Brazil that includes large-scale evaluations like the Enade, which is used to assess higher education programs, indicating a move towards evaluating the system's performance rather than just the students.

💡Learning Curve

A learning curve in the video is suggested as a tool for teachers to track the learning progress of their students. It is used to reveal the effectiveness of teaching methods by showing the distribution of grades among students, which can indicate whether the teaching is reaching all students or just a select few.

💡Methodological Rigor

Methodological rigor is emphasized as a critical aspect of conducting assessments. It refers to the need for assessments to be systematic, comprehensive, and based on scientific methodology to ensure objectivity and minimize subjective judgments. The video argues that without this rigor, assessments may become mere expressions of subjectivity.

💡Systematic Assessment

Systematic assessment is described as an organized and comprehensive approach to evaluating student learning. It involves creating instruments that cover all aspects of what has been taught, ensuring that the assessment is aligned with the content, skills, and competencies that students are expected to learn.

💡Democratization of Education

The term 'democratization of education' is used to discuss the broader social implications of assessment practices. It suggests that by ensuring that all students learn what is necessary, education can contribute to a more equal and democratic society. The video posits that assessment, when done correctly, can support the goal of providing educational opportunities and outcomes for all.

Highlights

Traditionally, for the past 500 years in Western education, exams have been used to assess learning.

The shift from individual master-apprentice relationships to teaching many students in the 16th century led to the adoption of exams.

The purpose of assessment is to ensure success in various aspects of life, including education, business, and politics.

Assessment is not just about diagnosing unsatisfactory results but also about signaling satisfactory outcomes.

Assessment is a diagnostic tool that indicates whether the desired quality of results has been achieved.

Management, not assessment, is responsible for resolving issues and achieving desired outcomes.

The concept of educational failure has traditionally placed blame on the student rather than the institution.

Since the 1980s, there has been a shift to consider institutional failure as a contributor to educational outcomes.

Large-scale assessments like the National Assessment of Higher Education (ENADE) in Brazil aim to evaluate the system, not just the student.

Teachers should track student learning curves to assess the effectiveness of their teaching on the group, not just individuals.

A learning curve can reveal the fragility of a teacher's work and the potential failure of their teaching methods.

Assessment should not only focus on student learning but also on the system's effectiveness in the classroom.

The act of assessing is an investigative act that produces knowledge, similar to scientific research.

Assessment tools must be systematic, comprehensible, and aligned with the taught content and its level of difficulty.

Assessment instruments should be precise and avoid generic questions to accurately measure student understanding.

Comparison with a standard or criterion is essential to determine the qualitative positivity or negativity of the reality being assessed.

Intervention is a crucial step in the assessment process, allowing for the improvement of unsatisfactory results.

Assessment from a pedagogical perspective aims to ensure success and inclusivity in learning outcomes.

Politically, assessment can be a tool for social democratization by ensuring that all students learn what is necessary.

Investing in assessment practices can lead to a more significant sociocultural development for all, contributing to social democratization.

Transcripts

tô me dirigindo a você coordenador da

pedagógico da escola e nós vamos

conversar um pouquinho sobre questões da

avaliação da aprendizagem

tradicionalmente eu diria assim nos

últimos 500 anos da educação eh

ocidental nós praticamos exames

escolares ou seja nós trouxemos para

dentro da escola mas os modos de agir os

modos de ser

que ocorriam na sociedade anterior ao

século 16 que era e continua sendo a

seletividade ou seja eh importamos para

dentro da escola como é que nós vamos

saber se o estudante aprendeu ou não

aprendeu Essa foi a questão que se

colocou a educação no século X porque

eh anterior ao século X a escola não era

como nós temos hoje a escola era uma

relação de um mestre dois aprendizes um

mestre três aprendizes chamavam-se as

oficinas de mestres e aprendizes e a

partir do século X começou a se pensar

que Um não ensinaria dois ou três mas

ensinaria muitos e como se começou a

pensar na ensinar uma quantidade

relativamente grande de estudantes E

então a pergunta subsequente era assim

como que nós vamos saber se eles

aprenderam para saber isso se importou

da vida social os exames que eram

utilizados para

seleção seleção de profissionais seleção

de soldados pro exército

eh enfim diversos âmbitos da atividade

social e

eh se era seletivo se eu se esse

processo era seletivo ele foi importado

para dentro da escola como seletivo e

então ficou assim quem aprende permanece

quem não aprende é reprovado ou quem

aprende eh prossegue quem não aprende é

retido e esse modelo de de esse modelo

seletivo ele perdurou do século X ao

século XX na na educação ocidental Qual

que é a função da avaliação a função da

avaliação é garantir o

sucesso em qualquer lugar né na empresa

na na na experiência religiosa na

política

eh no nosso cotidiano na família em todo

lugar a função da avaliação é garantir o

sucesso ela é a parceira de quem de quem

produz algum resultado é parceira no

sentido assim de encontrar o melhor

resultado de uma determinada de um

determinado curso de ação né então

H nesse sentido

eh todos nós apostamos no sucesso eu

vocês

eh todos os seres humanos afinal de

contas apostam no sucesso né e a

avaliação é a nossa parceira nesse

sentido não porque a avaliação

eh

ela produz efeitos positivos mas porque

ela é um

diagnóstico que sinaliza olha os

resultados Que você obteve ainda não são

satisfatórios ou os resultados Que você

obteve são plenamente satisfatórios

então a função da avaliação vai ser

nossa parceira na na na busca do Sucesso

na medida que ela sinaliza né que nós

não atingimos ainda a qualidade que nós

esperávamos estar atingindo que nós

desejávamos estar está atingindo eh

eh muitas vezes eh o eu recebo uma

pergunta assim a avaliação resolve isso

avaliação não resolve nada avaliação só

pesquisa a qualidade do resultado agora

o que resolve é a gestão

a gestão significa aquele que administra

alguma coisa para chegar num num

determinado resultado então a avaliação

diz assim ó o que você tá fazendo

ou o produto da sua atividade ainda não

tem o resultado que você deseja você

espera e então você quer fazer o quê

quer produzir o resultado que você

espera ou quer aceitar que o resultado

não é satisfatório e permanecer por aí

então a avaliação ela produz um

indicativo e a solução decorre da gestão

decorre da decisão e do

investimento na na produção do resultado

que se deseja que se que se espera se

deseja e se investe nele paraa

construção existe

uma uma uma experiência na educação

brasileira e fora do Brasil que é o

fracasso escolar e nessa questão do

fracasso escolar Nossa tradição eh do

século X para cá e nos nossos dias é

sempre dizer assim quem fracassa é o

estudante né então é o estudante que não

não tem desejo de estudar o estudante

que não aprende o estudante que não lê o

estudante que se dispersa por outros eh

outras experiências do dia a dia do

cotidiano

enfim ou então até às vezes se se amplia

um pouquinho e usa alguns recursos

sociológicos assim sujeito que vem das

camadas populares e camadas

desfavorecidas da população depauperados

do ponto de vista econômico eh

financeiro mas também cultural eles têm

dificuldade de aprender então produzem

um fracasso

escolar e pouco tem-se pensado assim

será que o fracasso escolar só decorre

do estudante ou decorre também da

instituição então

eh a partir de finais do do dos anos

1980 começou a se pensar assim que

também a instituição fracassa né e nesse

período se no mundo e no Brasil começou

a se falar da avaliação institucional Ou

seja a instituição fracassa ou ela pode

fracassar o exame Nacional de cursos eh

já agora dentro do do governo Lula com

Cristóvão Bararque como ministro da

educação foi substituído pelo sistema

por um sistema chamado Sistema Nacional

de avaliação do ensino superior dentro

do qual tem uma prova chamada Enade

Exame Nacional do ensino superior né

Essas avaliações de larga escala elas t

a função de dizer assim não é só o

estudante que fracassa o sistema pode

fracassar então nós precisamos Observar

se o sistema produz o efeito que promete

ou se ele fracassa então as avaliações

de larga escala T essa função de olhar

do lado do

Estudante na sala de aula que parece que

não é um não não faria sentido uma

avaliação de larga escala faz sentido

uma avaliação de pequena escala mas que

é maior do que avaliar só só acompanhar

o estudante individualmente então

um um professor deveria fazer pelo menos

uma curva de

aproveitamento do da aprendizagem dos

seus estudantes e essa curva de

aproveitamento revelaria

Ah vamos dizer assim os efeitos que as

suas aulas produz sobre o grupo não

sobre o o estudante individual Então

vamos dizer assim se eu a curva é muito

simples não precisa nenhuma sofisticação

estatística se eu tenho 50 alunos

quantos desses tiraram nota um numa

escala de 0 a 10 por exemplo quantos

tiraram dois quantos tiraram três

quantos tiraram 4 5 6 7 8 9 e 10 vamos

supor que dos 50 estudantes cinco

tiraram 8 9 10 45 tir AR 5 4,5 4 3 E5 3

2,5 2 etc etc o que que isso está

revelando que esse professor né ou posso

ser eu como professor estou ensinando

cinco pessoas e 45 não então

ah uma pequena curva estatística pode

demonstrar a fragilidade do meu trabalho

o fracasso do meu trabalho não é e é

claro eu posso dizer assim ah mas nesse

fracasso tem também o Estudante tem as

condições tem tudo isso mas é importante

com uma curva de de

aprendizagem que revela uma fragilidade

é importante a gente olhar pro que tá

ocorrendo pro sistema

então a avaliação não pode ser só da

aprendizagem do Estudante mas precisa

ser do sistema e dentro do sistema sala

de aula de tal forma que a gente possa

olhar sim quem

fracassa pode ser que quem fracassa é

quem ensina não é é o sistema que pode

tá fracassando e se o sistema tá

fracassando o que é que vamos fazer para

ele não fracassar se o estudante

individual Tá fracassando o que que nós

vamos fazer é o que tradicionalmente vem

se chamando de recuperação né então são

soluções do gestor para encontrar uma

solução satisfatória no sentido de

buscar um resultado positivo é

importante a gente pensar que o ato de

avaliar é um ato de investigar é um ato

de produzir conhecimento né ele se

assemelha à pesquisa científica ou ele

equivale à pesquisa científica a

diferença está na no resultado que se

espera a pesquisa científica

eh pretende eh desvendar como que

funciona a realidade a avaliação

pretende desvendar Qual é a qualidade da

realidade então

ah pela ciência me interessa saber qual

é a causa e qual é o efeito ou Quais são

as múltiplas causas que produzem um

determinado efeito E se eu puder

manipular as causas ou trabalhar operar

com as causas eu posso modificar os

efeitos e eu poder trabalhar com as

causas é o que nós chamamos hoje de

tecnologia então a ciência produz um

conhecimento a tecnologia produz

soluções a partir do

conhecimento Vamos fazer um paralelo com

avaliação avaliação produz um

conhecimento da qualidade do resultado

de alguma coisa e eh na medida que eu

produzo essa esse conhecimento da

qualidade a tecnologia seria intervenção

se o resultado que eu obtenho da minha

ação ainda é

insatisfatório a pergunta o que é que eu

vou fazer para ele vir a ser

satisfatório a avaliação necessita de

ser praticada com o Rigor da metodologia

científica se ela não for praticada com

esse Rigor ela é pura e simplesmente

expressões de subjetividade de juízos

subjetivos de juízos emocionais e assim

por diante não é que a subjetividade a a

vida emocional não estejam presente na

avaliação mas o Rigor metodológico vai

propiciar minorar muito as expressões

emocionais que muitas vezes eh se fazem

bastante presentes nas práticas

avaliativas porque parece que elas são

só subjetividade E no caso de coleta de

dados sobre aprendizagem do estudante é

preciso que tenha o instrumento tenha

sistematicidade ou seja ele cubra tudo o

que foi ensinado pro estudante e que é

essencial não pode ser um ponto que

outro ponto não pode ser perguntas

aleatórias mas precisam de ser perguntas

mapeadas consciente E logicamente Senão

nós vamos entrar naquela coisa assim ah

ele errou tudo errou tudo o quê não é é

preciso sistematicamente eu poder dizer

assim ele não aprendeu isso não aprendeu

isso não aprendeu aquilo para isso eu

tenho que ter um mapa do que que eu

quero saber e esse mapa vai guiar conção

do instrumento vai guiar a construção

vai guiar a correção do instrumento vai

guiar a leitura dos resultados né então

eu tenho um mapa um

descritivo da aprendizagem do Estudante

isso é preciso levar em consideração num

teste numa redação numa monografia num

enfim né nos múltiplos instrumentos que

a gente usa segunda coisa é que esses

instrumentos precisam ser vazados numa

linguagem compreensível ISO estudante

terceira característica que esses

instrumentos eh tem uma compatibilidade

de conteúdo com o que foi

ensinado conteúdo que foi ensinado

portanto informações habilidades e

competências que tenha o mesmo nível de

dificuldade o mesmo nível de

complexidade e a mesma metodologia com

que foi ensinado senão eu ensinei Uma

coisa peço outra essa essa distorção

entre eu ensinar uma coisa e pedir outra

significa que eu não estou descrevendo

bem o desempenho do Estudante né e a

última coisa tem que ter alguma

precisão então o instrumento precisa as

perguntas precisa ter alguma precisão

significa que

eh eh eh O Estudante tem que entender

como eu entendo a pergunta ou eu tenho

que entender como o estudante entende a

pergunta ela não pode ser genérica Pois

é a outro passo é assim depois que eu

descrevo isso que eu descrevi já é

satisfatório então para para saber se

alguma coisa satisfatória a ú o único

caminho disponível

epistemologicamente é a comparação é

comparar o descrito com um padrão Ou um

critério tem um critério que permite

Observar se a realidade é

qualitativamente positiva ou

negativa esse critério no caso da

aprendizagem nós estabelecemos no dia

que nós planejamos o ensino eu vou

ensinar alguma coisa e espero que

qualidade não é qual é o padrão de

qualidade Qual é o padrão de expectativa

então o instrumento a coleta de dados

através do instrumento me revela o

desempenho e eu comparo esse desempenho

revelado pelo instrumento com o padrão

de qualidade se for satisfatório ótimo

se não for satisfatório é o terceiro

passo da avaliação que é a intervenção

então disso nós podemos tirar duas

conhece tu avaliar uma é do ponto de

vista pedagógico e a outra do ponto de

vista

político do ponto de vista pedagógico a

avaliação ela como subsidiária do

Sucesso Ela garante pedagogicamente que

a gente possa chegar que nós possamos

chegar ao resultado desejado não chegou

ainda vamos reinvestir para chegar ao

resultado desejado eh

pedagogicamente ainda o a avaliação é

inclusiva né enquanto os exames

escolares que excluem que reprovam ou

que retém a avaliação eh diria assim

olha ainda precisa trabalhar mais para

que essa criança esse adolescente ou

esse adulto aprenda o necessário

significa que eh ela convida a produção

do resultado pedagógico porque nós

estamos trabalhando p

pedagogicamente politicamente a a

avaliação eh ela é um recurso que sugere

e propicia educadores que assim

desejarem

eh está investindo na equalização social

não é que a a educação Equalize a

sociedade mas ela junto com outras

instâncias sociais ela equaliza ela

democratiza

vamos dizer assim a a sociedade mas para

democratizar a

sociedade é preciso que todos aprendam

tudo o que for necessário de ser

aprendido então se eu planejo aquilo que

é necessário de ser ensinado e aprendido

mas não foi aprendido serviu para nada

mas se eu planejo aquilo que é

necessário de ser aprendido e Eu

verdadeiramente invisto para que todos

aprendam necessário eu dem priso não só

o conhecimento não só a cultura mas Eu

ofereço aos educandos um recurso de

democratização da vida social eles vão

disputar o seu lugar na vida social

então

a a prática da avaliação da aprendizagem

ela não só tem uma eficiência do ponto

de vista eh da execução do projeto

pedagógico mas ela tem uma consequência

política revolucionária fundamental que

é

eh subsidiar a busca do melhor resultado

para todos portanto ela tem a ver com a

democratização não só do ensino mas a

democratização da sociedade e por isso

que vale a pena

eh investir nela né Eu

agradeço essa oportunidade de estar aqui

agradeço a SM essa oportunidade de estar

aqui fazendo esse depoimento e esse

contato com um um coordenador os

coordenadores das escolas e que se

desdobraram eh acredito se desdobraram

para os educadores desse país né

Eh eu sou muito grato por isso e desejo

a todos vocês desejo a mim desejo a

educação brasileira

eh mais sucesso né mais sucesso

significa melhores resultados da

aprendizagem dos nossos educant portanto

uma elaboração sociocultural mais

significativa para todos nós muito

agradecido