Professional Documents
Culture Documents
Braslia - DF
2014
Braslia - DF
2014
Braslia - DF
2014
A minha famlia, esposa Franciele e filhas, Fernanda Gabriela e Ana Clara, que em
razo da execuo deste trabalho tiveram pacincia e me apoiaram nos inmeros momentos
em que precisei me ausentar.
Aos colegas e amigos de curso, com os quais convivemos no decorrer dessa longa
caminhada.
Aos mestres com carinho, por todo o tempo dedicado no decorrer do curso, com
seus ensinamentos, broncas e brincadeiras que tanto me ajudaram a manter firme o
propsito de concluir mais essa caminhada.
Agradecimentos
Agradeo primeiramente a Deus, nosso criador, a minha me Maria das Graas
que tanto me ajudou a ser o que sou hoje, a minha esposa Franciele e filhas, Fernanda
Gabriela e Ana Clara, pelo amor, carinho e respeito diante de minhas escolhas, aos meus
familiares, aos meus amigos e a todos os Professores desse curso que contriburam para a
ampliao de meus conhecimentos, aos Professores Dr. Ricardo Ruviaro e Dr. Romildo da
Silva Pina, que gentilmente aceitaram o convite para participar da banca e, em especial,
ao meu orientador Professor Dr. Mauro Luiz Rabelo, que se disps a me acompanhar e
orientar de forma rdua e gratificante.
Agradecimentos Institucionais
CAPES Coordenao de Aperfeioamento de Pessoal de Nvel Superior.
IMPA Instituto Nacional de Matemtica Pura e Aplicada.
UNB Universidade de Braslia.
EAPE Escola de Aperfeioamento dos Profissionais da Educao do DF.
SE Secretaria de Estado de Educao do DF.
Resumo
O Exame Nacional do Ensino Mdio (ENEM) uma avaliao individual, de carter
voluntrio, oferecido anualmente desde 1998 aos concluintes e egressos do ensino mdio,
que permite ao indivduo fazer uma autoavaliao do aprendizado adquirido por ele durante
sua educao bsica e das suas expectativas em relao continuidade de seus estudos,
alm de auxiliar o governo na elaborao de polticas educacionais de melhoria da qualidade
da educao no pas. A partir de 2009 foram agregadas novas funcionalidades ao exame,
ampliando sobremaneira seu carter de processo seletivo para acesso s instituies de
educao superior. Hoje, quase a totalidade das instituies federais de ensino superior
utilizam as notas obtidas pelos estudantes no ENEM como critrio de seleo de ingresso
em seus cursos de graduao. O exame passou a ser a avaliao de maior impacto e interesse
da sociedade brasileira. Nesse cenrio, este trabalho contribui com uma reflexo acerca da
abrangncia da Matriz de Referncia do ENEM com relao s habilidades avaliadas nos
itens de matemtica aplicados nas provas de 2009 a 2013. Os questionamentos a serem
respondidos incluem: Em que medida a avaliao est coerente com o propsito estabelecido
na matriz? Qual a abrangncia dos itens aplicados no que diz respeito s competncias de
rea e s habilidades estabelecidas na matriz? De que maneira a distribuio dos itens
por competncia de rea est relacionada com a distribuio dos campos de conhecimento
matemtico tradicionalmente presentes nos livros didticos? A metodologia utilizada no
trabalho englobou anlise documental, de dados e de contedo. O estudo evidenciou, aps
anlise criteriosa dos itens que compem os exames aplicados de 2009 a 2013, que as
competncias e habilidades esto bem distribudas, cumprindo adequadamente o que est
estabelecido na Matriz de Referncia. O fato de a prova ser de mltipla escolha faz com
que algumas habilidades sejam avaliadas na perspectiva da escolha pelos estudantes do
argumento que justifica o desafio proposto na situao-problema apresentada, e no na
perspectiva da construo de argumentos, conforme sugerem essas habilidades. Acredita-se
que essas capacidades seriam melhor avaliadas em questes abertas, o que se torna muito
complexo em um processo de larga escala como esse exame. A anlise documental de uma
coleo de livros didticos recomendada pelo Programa Nacional do Livro Didtico (PNLD)
sinalizou que a distribuio feita na obra para os campos de conhecimento matemtico
no est em sintonia com a nfase dada nas provas do ENEM, pois, enquanto a coleo
valoriza mais a parte algbrica, o exame foca mais os contedos geomtricos.
Abstract
The National High School Exam (ENEM) is an individual and not mandatory assessment
examination. It has been given annually since 1998 to graduates from highschool. It allows
the applicants to measure the knowledge acquired by them during their basic education
learning and their expectations for the continuation of their studies, besides assisting the
government in developing educational policies to improve the quality of education in the
country. Starting in 2009 new features were added to the examination, expanding it to
a selection process for access to higher education institutions. Nowadays almost all the
federal institutions of higher education use the grades obtained by students in ENEM as a
selection criterion for admission to their college degree. The exam has become the greatest
university entry exam of the Brazilian society. In this scenario, this work contributes to a
reflection on the scope of the ENEM Reference Matrix regarding the abilities assessed in
math items applied in the tests from 2009 to 2013. The questions to be answered include:
the evaluation is consistent with the purposes established in the Reference Matrix? What
is the scope of the items applied with regard to the skills area and skills established in
the Reference Matrix? How does the distribution of items by competency area relate to
the distribution of the area of mathematical knowledge traditionally found in textbooks?
The methodology used in this work comprised documentary, data and content analysis.
The study showed that the competencies and abilities are well distributed in the tests
applied from 2009 to 2013, fulfilling adequately what is established in the Reference
Matrix. This multiple choice test makes some abilities be evaluated from the perspective
of choice of the argument. It justifies the proposed problem situation presented in the
challenge itself, but not from the perspective of constructing arguments, as suggested
by these abilities. It is believed that these skills would be best evaluated in open questions, which becomes very complex in a large-scale process such this examination. The
documental analysis of a collection of textbooks recommended by the National Textbook
Program (PNLD) indicated that the distribution made in the textbooks in the area of
mathematical knowledge is not in line with the emphasis given in the ENEM because,
while the collection values over the algebraic part, the exam focuses more geometric content.
Sumrio
1
1.1
1.2
1.3
INTRODUO . . . . . . . .
Objetivo Geral. . . . . . . . . .
Objetivo Especficos. . . . . . .
Procedimentos Metodolgicos.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
. . . . . . . . . . . . .
. . . . . . . . . . . . . .
. . . . . . . . . . . . . .
. . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
10
13
13
14
2
2.1
2.2
2.3
2.4
HISTRICO DO ENEM . . . . .
Evoluo do ENEM . . . . . . . .
O novo ENEM . . . . . . . . . . .
O Sisu . . . . . . . . . . . . . . . .
Matriz Referncia para o ENEM
. . . . . . . . . . . . . . . . . . .
. . . . . . . . . . . . . . . . . . . .
. . . . . . . . . . . . . . . . . . . .
. . . . . . . . . . . . . . . . . . . .
Matemtica e suas Tecnologias .
16
19
22
27
29
3
3.1
3.2
3.3
4
4.1
CONSIDERAES FINAIS . . . . . . . . . . . . . . . . . . . . . . . 52
REFERNCIAS BIBLIOGRFICAS . . . . . . . . . . . . . . . . . . 54
APNDICES . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
34
35
40
42
10
1 INTRODUO
A garantia de um ensino de qualidade primordial para que possamos construir
uma sociedade justa, dando a todos cidadania plena, alm de promover o desenvolvimento
socioeconmico de nosso pas. Temos essa inteno descrita tanto na Constituio Federal
de 1988 quanto na Lei de Diretrizes e Base da Educao Nacional Lei 9.394, de 1996
(LDB).
Mas como garantir essa tal qualidade? Como medir essa qualidade? E como avaliar
essa qualidade?
Captulo 1. INTRODUO
11
Captulo 1. INTRODUO
12
Dias Sobrinho (2003) afirma que existe uma diversidade de conceitos e usos da
avaliao e, dependendo de cada um desses usos, haver um efeito. No pretendemos fazer
aqui uma anlise crtica da poltica de avaliao implantada pelo Estado brasileiro, mas
apenas analisar algumas peculiaridades da avaliao do ensino mdio promovida pelo
ENEM.
O processo que envolve a avaliao em larga escala composto por diversas etapas,
que incluem escolha dos instrumentos a serem utilizados e da metodologia a ser usada
para coletar as informaes sobre o aprendizado dos estudantes.
Captulo 1. INTRODUO
13
Para auxiliar nessa compreenso, desenvolveremos neste trabalho uma anlise das
provas de Matemtica e suas Tecnologias do ENEM, aplicadas de 2009 a 2013, visando
verificar a abrangncia da matriz do exame com relao s habilidades avaliadas nos
conjuntos de itens que compem essa prova. Para tentar entender melhor isso, ser feita
uma classificao desses itens de acordo com a Matriz de Referncia do ENEM, no que se
refere s competncias, s habilidades e aos objetos de conhecimento avaliados.
Captulo 1. INTRODUO
14
Objetivo Geral
Analisar a abrangncia da Matriz de Referncia do ENEM com relao s habilidades
avaliadas nos itens de matemtica aplicados nas provas de 2009 a 2013.
Objetivos Especficos
Procedimentos
Captulo 1. INTRODUO
15
A categorizao uma operao de classificao de elementos constitutivos de um conjunto, por diferenciao e, seguidamente, por reagrupamento segundo o gnero (analogia), com os critrios previamente
definidos. As categorias, so rubricas ou classes, as quais renem um
grupo de elementos (...) sob um ttulo genrico, agrupamento esse efectuado em razo dos caracteres comuns destes elementos. O critrio de
categorizao pode ser (...), lxico (classificao das palavras segundo o
seu sentido, com emparelhamento dos sinnimos e dos sentidos prximos)
e (...). (BARDIN, 1977, p. 117-118)
16
2 HISTRICO DO ENEM
Criado em 1998, o Exame Nacional do Ensino Mdio (ENEM) j ultrapassou,
na edio de 2014, a marca dos 8,7 milhes de inscritos, superando as expectativas do
Ministrio da Educao.
17
IV. Relacionar informaes, representadas em diferentes formas, e conhecimentos disponveis em situaes concretas, para construir argumentao consistente.
V. Recorrer aos conhecimentos desenvolvidos na escola para elaborao de propostas de
interveno solidria na realidade, respeitando os valores humanos e considerando a
diversidade sociocultural.
Habilidades ( ENEM perodo 1998-2008 )
1. Dada a descrio discursiva ou por ilustrao de um experimento ou fenmeno, de
natureza cientfica, tecnolgica ou social, identificar variveis relevantes e selecionar
os instrumentos necessrios para realizao ou interpretao do mesmo.
2. Em um grfico cartesiano de varivel socieconmica ou tcnico-cientfica, identificar
e analisar valores das variveis, intervalos de crescimento ou decrscimo e taxas de
variao.
3. Dada uma distribuio estatstica de varivel social, econmica, fsica, qumica
ou biolgica, traduzir e interpretar as informaes disponveis, ou reorganiz-las,
objetivando interpolaes ou extrapolaes.
4. Dada uma situao-problema, apresentada em uma linguagem de determinada rea
de conhecimento, relacion-la com sua formulao em outras linguagens ou vice-versa.
5. A partir da leitura de textos literrios consagrados e de informaes sobre concepes
artsticas, estabelecer relaes entre eles e seu contexto histrico, social, poltico ou
cultural, inferindo as escolhas dos temas, gneros discursivos e recursos expressivos
dos autores.
6. Com base em um texto, analisar as funes da linguagem, identificar marcas de
variantes lingusticas de natureza sociocultural, regional, de registro ou de estilo, e
explorar as relaes entre as linguagens coloquial e formal.
7. Identificar e caracterizar a conservao e as transformaes de energia, em diferentes
processos de sua gerao e uso social, e comparar diferentes recursos e opes
energticas.
8. Analisar criticamente, de forma qualitativa ou quantitativa, as implicaes ambientais,
sociais e econmicas dos processos de utilizao dos recursos naturais, materiais ou
energticos.
9. Compreender o significado e a importncia da gua e de seu ciclo para a manuteno
da vida, em sua relao com condies socioambientais, sabendo quantificar variaes
de temperatura e mudanas de fase em processos naturais e de interveno humana.
18
10. Utilizar e interpretar diferentes escalas de tempo para situar e descrever transformaes na atmosfera, biosfera, hidrosfera e litosfera, origem e evoluo da vida,
variaes populacionais e modificaes no espao geogrfico.
11. Diante da diversidade da vida, analisar, do ponto de vista biolgico, fsico ou qumico,
padres comuns nas estruturas e nos processos que garantem a continuidade e a
evoluo dos seres vivos
12. Analisar fatores socioeconmicos e ambientais associados ao desenvolvimento e s
condies de vida e sade de populaes humanas, por meio da interpretao de
diferentes indicadores.
13. Compreender o carter sistmico do planeta e reconhecer a importncia da biodiversidade para preservao da vida, relacionando condies do meio e interveno
humana.
14. Diante da diversidade de formas geomtricas planas e espaciais, presentes na natureza
ou imaginadas, caracteriz-las por meio de propriedades, relacionar seus elementos,
calcular comprimentos, reas ou volumes e utilizar o conhecimento geomtrico para
leitura, compreenso e ao sobre a realidade.
15. Reconhecer o carter aleatrio de fenmenos naturais ou no e utilizar em situaesproblema processos de contagem, representao de frequncias relativas, construo
de espaos amostrais, distribuio e clculo de probabilidades.
16. Analisar, de forma qualitativa ou quantitativa, situaes-problema referentes a
perturbaes ambientais, identificando fonte, transporte e destino dos poluentes,
reconhecendo suas transformaes; prever efeitos nos ecossistemas e no sistema
produtivo e propor formas de interveno para reduzir e controlar os efeitos da
poluio ambiental.
17. Na obteno e produo de materiais e de insumos energticos, identificar etapas,
calcular rendimentos, taxas e ndices e analisar implicaes sociais, econmicas e
ambientais.
18. Valorizar a diversidade dos patrimnios etnoculturais e artsticos, identificando-a em
suas manifestaes e representaes em diferentes sociedades, pocas e lugares.
19. Confrontar interpretaes diversas de situaes ou fatos de natureza histricogeogrfica, tcnico-cientfica, artstico-cultural ou do cotidiano, comparando diferentes
pontos de vista, identificando os pressupostos de cada interpretao e analisando a
validade dos argumentos utilizados.
20. Comparar processos de formao socioeconmica, relacionando-os com seu contexto
histrico e geogrfico.
19
21. Dado um conjunto de informaes sobre uma realidade histrico-geogrfica, contextualizar e ordenar os eventos registrados, compreendendo a importncia dos fatores
sociais, econmicos, polticos ou culturais.
O diagrama a seguir, que pode ser representado graficamente sob forma de uma
estrela, mostra como cada uma das habilidades est relacionada com uma ou mais competncias, de tal forma que se estabelece um conjunto de interconexes entre elas.
O grfico 2.1 foi construdo a partir de dados retirados dos relatrios pedaggicos
do ENEM, dos documentos: Indicadores educacionais e dados consolidados ENEM 2013 e
Balano de inscries ENEM 2014.
Em 2001, o exame teve um grande salto, e alcanou um total de mais de 1,6 milho
de inscritos. A iseno do pagamento de inscrio para alunos da escola pblica foi uma
medida que impulsionou a democratizao, que contava ento com o apoio maior das
20
Secretarias Estaduais de Educao e das escolas de ensino mdio. A prova mantinha ainda
a mesma estrutura de 63 questes e uma redao.
21
O grfico 2.1 mostra que essa iniciativa fez com que a procura pelo ENEM 2005
praticamente dobrasse em relao a 2004. O ENEM 2005 teve mais de 3 milhes de
inscritos, pois se tornou atrativo para os alunos oriundos da rede pblica de educao
bsica estudarem em instituies particulares de ensino superior sem a necessidade de
pagar mensalidade. O ENEM agora tinha uma outra dimenso, pois j extrapolava sua
funo inicial de promover a avaliao do ensino mdio brasileiro, e isso, com certeza, foi
um dos motivos para sua reestruturao.
Essa crescente procura pelo ENEM se reflete, inclusive, nos processos seletivos de
muitas instituies de ensino superior que passam a usar o exame como forma de ingresso,
em primeira ou segunda etapa de seus vestibulares ou at mesmo adicionando pontos a
sua classificao de seu vestibular, como se infere do seguinte excerto:
22
Fonte: INEP: Proposta Associao Nacional dos Dirigentes das Instituies Federais de
Ensino Superior.
De acordo com o documento intitulado "Proposta: unificao dos processos seletivos das Instituies Federais de Ensino Superior a partir
da reestruturao do Exame Nacional do Ensino Mdio (ENEM)", encaminhado pelo presidente do Inep/MEC Associao Nacional dos
Dirigentes das Instituies Federais de Ensino Superior (Andifes) em
30 de maro de 2009, o que se deseja com a reformulao do exame
democratizar as oportunidades de concorrncia s vagas federais de
ensino superior por meio da unificao da seleo s vagas das IFES,
23
Como justificativa para a implantao de um sistema de seleo unificado, foi apontado que, de acordo com dados da Pnad/IBGE/2007, de todos os estudantes matriculados
no seu primeiro ano do ensino superior, apenas 0,04% residem h menos de um ano no
estado onde estudam. Enquanto que em pases como os Estados Unidos, cerca de 20% dos
estudantes americanos cruzam as fronteiras estaduais para estudarem em universidades
de sua escolha. Desse modo, o ENEM passaria a ampliar tambm as oportunidades para
acesso educao brasileira em instituies superiores de outros estados, principalmente
para aqueles estudantes que no tm uma condio financeira de viajar para prestar
vrios vestibulares pelo Brasil afora. A Portaria Inep/MEC no 109, de 27 de maio de 2009,
estabeleceu a sistemtica para a realizao do ENEM 2009 como procedimento de avaliao
do desempenho escolar e acadmico dos participantes, para aferir o desenvolvimento das
competncias e habilidades fundamentais ao exerccio da cidadania. Nesse dispositivo legal,
so estabelecidos os seguintes objetivos para o exame:
I. oferecer uma referncia para que cada cidado possa proceder sua auto-avaliao
com vistas s suas escolhas futuras, tanto em relao ao mundo do trabalho quanto
em relao continuidade de estudos;
II. estruturar uma avaliao ao final da educao bsica que sirva como modalidade
alternativa ou complementar aos processos de seleo nos diferentes setores do mundo
do trabalho;
III. estruturar uma avaliao ao final da educao bsica que sirva como modalidade
alternativa ou complementar aos exames de acesso aos cursos profissionalizantes,
ps-mdios e Educao Superior;
IV. possibilitar a participao e criar condies de acesso a programas governamentais;
V. promover a certificao de jovens e adultos no nvel de concluso do ensino mdio
nos termos do artigo 38, 1o e 2o da LDB;
VI. promover avaliao do desempenho acadmico das escolas de ensino mdio, de forma
que cada unidade escolar receba o resultado global;
VII. promover avaliao do desempenho acadmico dos estudantes ingressantes nas
Instituies de Educao Superior.
24
Uma novidade acrescida aos objetivos do novo ENEM a incorporao da possibilidade da certificao de jovens e adultos no nvel de ensino mdio. No ato da inscrio, o
participante dever indicar a Instituio Certificadora na qual solicitar a certificao para
fins de concluso do Ensino Mdio. Essa funo era atribuda anteriormente ao Exame
Nacional para Certificao de Competncias de Jovens e Adultos (ENCCEJA) do ensino
mdio.
Outra funo adicional do exame promover a avaliao do desempenho dos estudantes ingressantes nas Instituies de Educao Superior, cumprindo uma das atribuies
que at ento estava reservada para o ENADE, no mbito dos SINAES.
Para implantar essas mudanas, foi necessrio recorrer s tcnicas oriundas da TRI (Teoria de Resposta ao Item). A utilizao dessa teoria no
ENEM abriu a possibilidade de se construir uma srie histrica do desempenho dos estudantes e dos egressos do Exames Nacionais de Avaliao
Educacional ensino mdio brasileiro, como feito com os resultados do
SAEB e da Prova Brasil. (RABELO, 2013a, p.50)
Uma nova Matriz de Referncia foi elaborada a partir das matrizes de competncias e habilidades que compem o ENCCEJA do ensino mdio e da prpria matriz do
ENEM do perodo 1998-2008 mencionada anteriormente, para subsidiar a reestruturao
metodolgica do ENEM. O exame passou de 63 questes para 180 questes, distribudas
igualmente nas quatro reas de conhecimento que compem a prova:
25
(...) extradas de um banco de itens calibrados, elaborados sob a superviso do prprio INEP, em um ambiente informatizado, mas sob
rgidas regras de segurana. Os itens so pr-testados e escolhidos para
compor as provas a partir de anlises psicomtricas oriundas da aplicao da teoria clssica dos testes e da teoria de resposta ao item. A
funo terico-metodolgico est fortemente presente na concepo de
sua matriz referncia. (RABELO, 2013a, p.59)
A construo desse banco de itens teve incio em 2009, com a criao do novo
modelo do ENEM. Esses itens so submetidos a um pr-teste para sua calibrao. Rabelo
explica como ocorre esse processo:
Em cada dia do exame so aplicados 4 cadernos de provas, que apenas se diferenciam pelas cores e pela ordem de seus itens dentro de cada rea do conhecimento. Todos os
participantes fazem a mesma prova, sendo que, no primeiro dia, so aplicadas as questes
de Cincias Humanas e suas Tecnologias, numeradas de 1 a 45, junto com as de Cincias
da Natureza e suas Tecnologias, numeradas de 46 a 90. No segundo dia, as provas seguem
a mesma numerao do dia anterior sendo a de Linguagens, Cdigos e suas Tecnologias
com questes de 91 a 135, e a de Matemtica e suas Tecnologias com questes de 136 a
180. A Redao aplicada no segundo dia de prova.
Tabela 2.2: A prova.
26
Nessa proposta, assume-se o pressuposto de que os conhecimentos adquiridos ao longo da escolarizao deveriam possibilitar ao jovem o
domnio de linguagens, a compreenso de fenmenos, o enfrentamento
de situaes-problema, a construo de argumentaes e a elaborao de
propostas. Na matriz do novo exame, essas competncias correspondem
aos eixos cognitivos bsicos, a aes e operaes mentais que todos os
jovens e adultos devem desenvolver como recursos mnimos que os habilitam a enfrentar melhor o mundo que os cercam, com todas as suas
responsabilidades e desafios. (RABELO, 2013a, p.51)
Na nova configurao da Matriz de Referncia, organizou-se um conjunto de competncias amplas a serem avaliadas para cada uma das quatro reas. E essas competncias
foram desdobradas em habilidades mais especficas (em cada rea), resultantes da associao dos contedos gerais aos cinco eixos cognitivos, totalizando 30 habilidades para cada
uma das reas. Mais a frente veremos uma tabela que mostra a relao entre competncias,
habilidades e eixos cognitivos.
As competncias de rea foram submetidas ao tratamento cognitivo
das competncias do sujeito do conhecimento e permitiram a definio
de habilidades especficas, que estabelecem as aes ou operaes que
descrevem desempenhos a serem avaliados na prova. Nessa concepo,
as referncias de cada rea descrevem as interaes mais abrangentes
ou complexas (nas competncias) e as mais especficas (nas habilidades)
entre as aes dos participantes, que so os sujeitos do conhecimento,
com os objetos de conhecimento, selecionados e organizados a partir das
Orientaes Curriculares Nacionais para o Ensino Mdio (OCNEM). Essa
estrutura aproxima o novo ENEM dessas Orientaes, sem abandonar
o modelo de avaliao centrado no desenvolvimento de competncias.
(RABELO, 2013b, p.36-37)
27
2.3 O Sisu
A crescente adeso ao ENEM ao longo dos anos para a seleo de candidatos s
instituies de ensino superior, substituindo o tradicional vestibular, , muito provavelmente, consequncia do fato de os candidatos poderem fazer suas escolhas de curso e
instituio superior aps a divulgao dos resultados de desempenho no exame. Mas como
isso acontece?
28
29
No sendo selecionado nem na 1a e 2a chamada, o candidato tambm pode participar da lista de espera mencionada acima, que ser utilizada pelas IFES no preenchimento
de vagas remanescentes.
ii. Compreender fenmenos (CF): construir e aplicar conceitos das vrias reas do
conhecimento para a compreenso de fenmenos naturais, de processos histricogeogrficos, da produo tecnolgica e das manifestaes artsticas.
iii. Enfrentar situaes-problema (SP): selecionar, organizar, relacionar, interpretar dados e informaes representados de diferentes formas, para tomar decises e
enfrentar situaes-problema.
iv. Construir argumentao (CA): relacionar informaes, representadas em diferentes formas, e conhecimentos disponveis em situaes concretas, para construir
argumentao consistente.
30
31
32
OC3 Conhecimentos de estatstica e probabilidade: representao e anlise de dados; medidas de tendncia central (mdias, moda e mediana); desvios e varincia;
noes de probabilidade.
OC5 Conhecimentos algbricos/geomtricos: plano cartesiano; retas; circunferncias; paralelismo e perpendicularidade, sistemas de equaes.
33
Essa tabela, elaborada por Rabelo (2013a), mostra como os eixos cognitivos, que
so as aes e operaes mentais que todos os jovens e adultos devem desenvolver como
recursos mnimos que os habilitam a enfrentar melhor o mundo que os cercam, com
todas as suas responsabilidades, esto relacionados com as competncias e as habilidades
requeridas. Podemos observar que o enfrentamento de situaes-problemas e a construo
de argumentao esto presentes em todas as competncias.
34
um exerccio bastante interessante de anlise de contedo identificar a competncia e a habilidade requeridas pelo elaborador em cada item construdo para o exame.
Porm, nem sempre to simples interpretar a inteno do elaborador ao propor algumas
situaes-problema. Como j vimos, os itens so pr-testados antes de serem escolhidos
para compor as provas a partir de anlises psicomtricas. Caso no seja aprovado nesse
pr-teste, provavelmente o item descartado.
35
A classificao nos dois ltimos eixos da matriz, conforme tabela 2.3, ou seja,
nas habilidades relacionadas ao eixo de construo de argumentos (CA) e elaborao de
propostas (EP) demandou uma anlise de contedo bastante criteriosa. O fato de a prova
ser de mltipla escolha faz com que as habilidades H4, H9, H13, H17, H22, H25 e H29
sejam avaliadas na perspectiva da escolha pelos estudantes do argumento que justifica o
desafio proposto na situao-problema apresentada, e no na elaborao de argumentos.
O enquadramento nas habilidades H5, H14, H18, H23, H26 e H30, do eixo EP, foi feito
a partir da identificao dos contextos das questes que descreviam alguma proposta
simplificada de interveno na realidade.
Para alcanarmos os objetivos traados neste trabalho, faremos uso dessa metodologia sistemtica, pois, segundo Bardin (1977), a Anlise de Contedo se apresenta como
um:
Conjunto de tcnicas de anlise das comunicaes visando obter, por
procedimentos sistemticos e objectivos de descrio do contedo das
mensagens, indicadores (quantitativos ou no) que permitam a inferncia
de conhecimentos relativos s condies de produo/recepo (variveis
inferidas) destas mensagens. (BARDIN, 1977, p.42)
36
exame, so aplicados 4 cadernos de provas, que apenas se diferenciam pelas cores e pela
ordem de seus itens dentro de cada rea do conhecimento. Neste trabalho, para anlise dos
itens, foi utilizado o caderno de prova azul dos anos de 2009 a 2012, sendo que o caderno
de prova de 2013 foi o amarelo, j que at a data de realizao desse trabalho no stio do
INEP ainda no havia sido divulgados os cadernos de provas. O caderno de prova de 2010
utilizado na anlise de itens foi o da 2a aplicao.
O grfico 3.1 aponta para um equilbrio entre a distribuio das competncias, apesar de sugerir que a competncia de rea 6 tenha menos itens avaliados. Cabe, no entanto
salientar que a quantidade de habilidades vinculadas a essa competncia so apenas trs, enquanto s competncias de rea 1, 3 e 5 esto relacionadas com cinco habilidades cada uma.
37
deseja-se dar abrangncia a tudo aquilo que se imaginou importante em sua criao.
Lanamos mo desse critrio toda vez que surgiu alguma dvida acerca da classificao
do item. Por exemplo, h item cuja informao apresentada em tabela, mas o contexto
pode ser considerado uma proposta de interveno. A escolha foi feita levando em conta a
classificao dos demais itens.
Rodrigues (2013) faz uma proposta de classificao dos itens de matemtica aplicados de 2009 a 2012, sem, contudo explicitar critrios utilizados para anlise, limitando-se
a referenciar tcnica de anlise de contedo de BARDIN. Na proposta apresentada por
ele, h competncia de rea e habilidades que no teriam sido contempladas em algumas
provas, o que difere do entendimento aqui explicitado. Nesse sentido, este trabalho amplia
e faz ajustes na distribuio das competncias e habilidades avaliadas, demonstrando maior
abrangncia da matriz com relao aos itens aplicados no perodo de estudo.
Fonte: Artigo: Anlise das Questes de Matemtica do Novo Enem (2009 a 2012):
Reflexes Para Professores de Matemtica.
38
Segundo a anlise feita neste trabalho, temos em mdia mais de 5 questes relacionadas a essa competncia (C4), e todas as respectivas habilidades esto presentes nos
exames de 2009 a 2013. No apndice, esto listadas tabelas que contemplam classificaes
dessas questes segundo as habilidades avaliadas. Em relao a 2009, Rodrigues no
classifica nenhum item na competncia C4. No entanto, o exemplo a seguir evidencia um
resultado diferente.
Resoluo da questo: de acordo com o texto, nos vinte dias restantes de campanha,
50 alunos trabalharam 4 horas por dia. Temos que o montante arrecadado nos primeiros
10 dias de campanha so 120 kg. Todas grandezas envolvidas nessa situao-problema que
se relacionam so diretamente proporcionais, e organizando os dados:
x=
39
120 50 20 4
= 800.
20 10 3
40
41
mentais, saberes tcnicos e prticos, habilidades psicomotoras, caractersticas pessoais e interpessoais, escolhas estticas, princpios ticos, entre
outros). (RABELO, 2013a, p.189)
Nos itens de mltipla escolha, exige-se do estudante que ele selecione uma nica
alternativa de resposta entre as vrias apresentadas. Assim, essa opo precisa ser inequivocadamente certa, e as demais devem ser incorretas, mas plausveis. As opes incorretas
so denominadas distratores, e no podem ser construdas ao acaso, pois tem de fazer parte
do contexto do item e ser uma possvel resposta para o aluno que ainda no desenvolveu a
competncia avaliada no item.
Rabelo (2013a) descreve as partes que um item de mltipla escolha deve apresentar,
bem como a relao entres elas, conforme trecho abaixo.
O item de mltipla escolha divide-se em trs partes: texto-base, enunciado(comando) e opes (alternativas). Em um texto, o significado de
uma parte no costuma ser autnomo, mas depende das outras com que
se relaciona. O seu significado global no simplesmente uma soma do
que representa cada parte, mas de uma combinao geradora de sentido.
Cada uma deve manter relao com as demais, inter-relacionando-se
e formando um todo organizado. Desse modo, o texto deve apresentar
coerncia entre elas, no evidenciando contradies. Assim como qualquer
texto, apesar de divido em trs partes, o item de mltipla escolha deve
ser estruturado de modo que se configure uma unidade de proposio e
que contemple as orientaes da matriz de referncia. Para tanto, devem
ser observadas a coerncia e a coeso entre suas partes, apresentando
uma articulao entre ela, explicitando uma nica situaao-problema
e uma abordagem homognea contedo selecionado. (RABELO, 2013a,
p.189-190)
Para isso, faremos a anlise de alguns itens aplicados nas edies do ENEM de
2009 a 2013, com o intuito de investigar em que medida a avaliao est coerente com o
propsito estabelecido na matriz de referncia do exame.
42
43
O prximo item fez parte do ENEM 2010, tendo sido classificado no estudo
aqui apresentado como C1 H4, relacionado ao objeto de conhecimento: Sequncias e
progresses.
S150 =
(1 + 150) 150
= 11325.
2
Portanto, como 12.000 o nmero mais prximo de 11.325, segue que o gabarito
correspondente resposta correta a opo C, j que o funcionrio III apresentou o
melhor palpite. Mas a questo sugere que ao estudante estime a resposta. O aluno verifica
que a quantidade 200 estrelas pouca, j que em uma s linha h 150 estrelas, e 6000,
tambm pouco, j que so mais de 50 linhas com mais de 100 estrelas, e como 22500
muita, j que teramos que ter todas as linhas com 150 estrelas, logo 12000 estrelas
um nmero razovel. Em H4 Avaliar a razoabilidade de um resultado numrico na
construo de argumentos sobre afirmaes quantitativas nessa questo possvel avaliar
a razoabilidade do resultado fazendo uma estimativa aproximada do resultado esperado,
estando assim de acordo com o estabelecido na Matriz de Referncia. Mas, a questo
poderia ser simplesmente resolvida como descrito acima, aplicando a frmula.
O item abaixo fez parte do ENEM 2011, tendo sido classificado no estudo aqui
apresentado como C3 H13, relacionado ao objeto de conhecimento: Comprimento e rea.
44
O item abaixo fez parte do ENEM 2009, tendo sido classificado no estudo aqui
apresentado como C7 H29, sendo o objeto de conhecimento: Medidas de tendncia
central.
45
Resoluo da questo: As notas obtidas pela equipe Gama tm mediana 7,0, pois
colocando as notas em ordem crescente, a mediana seria a mdia aritmtica entre 7,0 e
7,0, j que a quantidade de notas um nmero par.
Retirando a nota 0,0; as cinco menores notas da equipe Gama seriam 6,0; 6,5;
6,5; 7,0 e 7,0, a mediana que alteraria a classificao se o aluno faltante obtivesse nota x
seria tal que 7,0 x 27,6 (nota da equipe Delta). Assim, uma nota x 8,2, poderia alterar a
mediana e, por conseguinte, mudar a classificao. Mas, como a 8 passaria a ser a sexta
nota, a colocao da equipe Delta no mudaria. Observamos que, se a questo fosse do
tipo aberta, e se o questionamento estivesse na hiptese de uma nota diferente do aluno
faltante, o estudante construiria seu argumento. Porm, nessa questo, o estudante escolhe
o argumento que justifica o desafio proposto na situao-problema apresentada. Este
mais um exemplo no qual a habilidade requerida no avaliada na sua totalidade.
46
O ano de 2012 contemplou a escolha dos livros do ensino mdio. A avaliao das
obras ocorreu ao longo do ano de 2010, tendo sido concluda com a divulgao do Guia de
47
Livros Didticos PNLD 2012, no qual foram apresentados os princpios e critrios utilizados
na avaliao, bem como as resenhas das colees aprovadas. Aqui estamos interessados
na anlise das colees de livros didticos da rea de matemtica aprovadas no PNLD
2012, no que diz respeitos aos seus contedos e distribuio dos campos de conhecimentos
matemticos (porcentagem) dentro da composio desse livro. O PNDL 2012 Matemtica
teve 7 colees aprovadas.
48
O grfico a seguir mostra como foi feita a distribuio dos diferentes campos de
conhecimento matemtico da obra 25117, uma das selecionadas no PNLD 2012, que vamos
utilizar em nossa anlise. Dessa forma, possvel fazer uma estimativa razovel da ateno
dedicada aos diferentes campos, em cada um dos trs volumes.
Podemos observar pelo grfico apresentado acima que a distribuio dos campos
matemticos nos trs volumes no equilibrada. Temos contedos que dominam grande
parte em cada um dos volumes. Aproximadamente, o contedo de funes domina 70%
do volume 1, o de geometria 43% do livro 2, assim como a geometria analtica ocupa a
metade do livro da 3a srie. Alm disso, estatstica e probabilidades esto ausentes no 1o
volume. Desse modo, compete ao professor procurar outras fontes, para complementar o
seu trabalho dentro de sala de aula.
49
CONHECIMENTO
MATEMTICO
COMPETNCIA DE REA
ASSOCIADA
Conhecimento numrico.
50
pelos trs volumes do livro analisado, e se encontra bem concentrado em dois momentos, na
1a srie, funes, e 3a srie geometria analtica. Diferentemente, o conhecimento geomtrico
do livro selecionado, grande parte est situado na 2a srie e representa cerca de 20% do
total da obra (os 3 volumes), um pouco mais da metade da porcentagem avaliada na prova.
Algo semelhante ocorre tambm com os conhecimentos de estatstica e probabilidade, que
so poucos explorados no livro em comparao ao que cobrado na avaliao do ENEM.
51
Comparando o grfico 4.3, o qual mostra a concentrao dos campos de conhecimentos ao longo dos anos de 2009 a 2013, com o grfico 4.2, notamos que no houve uma
mudana substancial na comparao da distribuio dos contedos envolvidos no somatrio
dos exames com o relativo a ENEM 2013 apenas. O grfico 4.3 indica que os conhecimentos
algbricos e algbricos/ geomtricos representam 16% enquanto, no grfico 4.2 do ENEM
52
5 CONSIDERAES FINAIS
Uma educao de qualidade a que contribui na formao dos estudantes em
diversos aspectos, para que desempenhem seu papel de cidado no mundo. (BRASIL,
2013). Assim, somente um ensino de qualidade capaz transformar a realidade em que
vivemos.
O ENEM foi concebido com o intuito de permitir aos concluintes e egressos do ensino mdio fazer uma autoavaliao do aprendizado adquirido por eles durante a educao
bsica, alm de auxiliar o governo na elaborao de polticas educacionais de melhoria da
educao do pas. Com o passar dos anos, foram incorporadas novas funcionalidades ao
ENEM, ampliando sobremaneira seu carter de processo seletivo para acesso s instituies
de educao superior, e uma nova Matriz de Referncia foi elaborada em 2009, instrumento
que explicita a fundamentao torico-metodolgica do exame.
53
Tendo em vista a importncia que esse exame adquiriu no cenrio nacional e como
este trabalho aponta somente alguns aspectos relevantes sobre esse tema, ainda h muitos
aspectos a ser explorados que ampliariam os estudos aqui realizados, tais como: descrio
da escala de proficincia do exame; anlise da efetividade dos contextos utilizados nas
situaes-problema propostas nos itens; anlise da plausibilidade dos distratores presentes
nas alternativas dos itens; distribuio dos itens nas provas segundo o parmetro de
dificuldade.
54
6 REFERNCIAS BIBLIOGRFICAS
[1] BARDIN, L. Anlise de contedo. Lisboa: Edies 70, 1977.
[2] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2001) ENEM. Relatrio Pedaggico ENEM 2001.
Braslia: INEP/MEC.
[3] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2002) ENEM. Relatrio Pedaggico ENEM 2002.
Braslia: INEP/MEC
[4] BRASIL. Ministrio da Educao. Secretaria de Educao Bsica. (2006) Orientaes curriculares para o ensino mdio, vol. 2:Cincias da natureza,
matemtica e suas tecnologias. Braslia: MEC.
[5] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2007a) ENEM. Relatrio Pedaggico ENEM 2003.
Braslia: INEP/MEC.
[6] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2007b) ENEM. Relatrio Pedaggico ENEM 2004.
Braslia: INEP/MEC.
[7] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2007c) ENEM. Relatrio Pedaggico ENEM 2005.
Braslia: INEP/MEC.
[8] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2008a) ENEM. Relatrio Pedaggico ENEM 2006.
Braslia: INEP/MEC.
[9] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2008b) ENEM. Relatrio Pedaggico ENEM 2007.
Braslia: INEP/MEC.
[10] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2009a) Matriz de Referncia para o ENEM 2009.
Braslia: INEP/MEC.
[11] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2009b) ENEM. Relatrio Pedaggico ENEM 2008.
Braslia: INEP/MEC.
55
[12] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2009c) Proposta Associao Nacional dos Dirigentes
das Instituies Federais de Ensino Superior. Braslia: INEP/MEC.
[13] BRASIL. Ministrio da Educao. Secretaria de Educao Bsica. (2011a) Guia de
Livros Didticos PNLD 2012 Apresentao. Braslia: MEC.
[14] BRASIL. Ministrio da Educao. Secretaria de Educao Bsica. (2011b) Guia de
Livros Didticos PNLD 2012 Matemtica. Braslia: MEC.
[15] BRASIL. (2012a) Todos pela educao. De Olho nas Metas 2011, So Paulo:
Moderna. 4 ed.
[16] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2012b) Entenda a sua Nota no ENEM: guia do
participante. Braslia: INEP/MEC.
[17] BRASIL. Ministrio da Educao. Conferncia Nacional de Educao. (2013a) Documento Referncia Elaborado pelo Frum Nacional de Educao. Braslia:
CONAE/MEC.
[18] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2013b) Indicadores educacionais e dados consolidados
Enem 2013. Braslia: INEP/MEC.
[19] BRASIL. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. (2014) Balano de inscries ENEM 2014. Braslia:
INEP/MEC.
[20] COSTA, D. M. Avaliao educacional em larga escala: a opo pela democracia participativa. Jornal de polticas educacionais. No 6, jul-dez de 2009, p.
12-21.
[21] DIAS SOBRINHO, J. Avaliao: polticas educacionais e reformas da Educao Superior. So Paulo: Cortez, 2003.
[22] NES, Isauro Beltrn; RAMALHO, Betnia Leite. (2011) Aprendendo com o
ENEM: Reflexes para melhor se pensar o ensino e a aprendizagem das
cincias naturais e da matemtica. Braslia: Liber Livro Editora.
[23] RABELO, M. L. (2013a) Avaliao Educacional: fundamentos, metodologia
e aplicaes no contexto brasileiro. Rio de Janeiro: SBM, 2013.
[24] RABELO, M. L. (2013b) Metodologia de Construo de itens para avaliao
em larga escala. Campinas/SP: UNICAMP/ IMECC, 108p.
56
57
7 APNDICES
APNDICE A relaes entre os eixos cognitivos, as competncias de rea e as
habilidades - Matemtica e suas Tecnologias ENEM 2009 (Prova Azul).
Captulo 7. APNDICES
58
Captulo 7. APNDICES
59
Captulo 7. APNDICES
60
Captulo 7. APNDICES
61
Captulo 7. APNDICES
62
Captulo 7. APNDICES
63