AVALIAO DE HABILIDADES DE LEITURA EM LNGUA

INGLESA: REFLEXES SOBRE O EXAME NACIONAL DO ENSINO

MDIO DE 2011
Marina Morena dos Santos e Silva1
Adriana Mendes Porcellato2
Patrcia Melo Muradas3

Introduo
Grandes transformaes no campo da avaliao e da aprendizagem tm ocorrido no Brasil nos
ltimos anos. Conhecer no significa mais acumular conceitos, mas sim saber encontrar e
interpretar informaes, com o intuito de solucionar problemas.
Nesta perspectiva, mtodos de avaliao so constantemente reavaliados e reajustados para
que possam assegurar de forma acurada e segura seus resultados. De acordo com McNamara
(2000), importante que estudos sobre testes e avaliaes sejam realizados, pois testes so
mecanismos para o controle institucional dos indivduos e devem, portanto, ser
comprometidos com a qualidade de suas questes.
Para assegurar que os testes tenham de fato a qualidade esperada e que possam ser usados
como instrumentos de medio de conhecimentos de seus candidatos e como instrumentos na
tomada de decises quanto s polticas pblicas, existem certos critrios que precisam ser
definidos e observados na elaborao dos mesmos.
Desta forma, o presente trabalho visa analisar e compreender as ferramentas utilizadas no
Exame Nacional do Ensino Mdio (ENEM), para medir o conhecimento e a habilidade de
leitura em lngua inglesa de seus candidatos.
No ENEM, a prova de lngua estrangeira s foi includa em 2010, 12 anos aps a criao do
Exame. Como aponta DellIsola (2005), a leitura nem sempre foi valorizada pelas abordagens
pedaggicas do ensino de lnguas estrangeiras e, embora a pesquisa sobre leitura seja
consistente, o contexto de lngua estrangeira nem sempre mereceu a devida ateno.

Universidade Federal de Minas Gerais. Mestranda em Lingustica Aplicada. Contato:

marinamorenass@yahoo.com.br
2
Universidade Federal de Minas Gerais. Mestranda em Lingustica Aplicada. Contato: adry84@gmail.com
3
Universidade Federal de Minas Gerais. Mestranda em Lingustica Aplicada. Contato: jedepat@terra.com.br

154
Revista Contempornea de Educao N 13 janeiro/julho de 2012

A leitura em lngua estrangeira

De acordo com DellIsola (2005), nas abordagens mais tradicionais, ler significava
estabelecer uma relao entre a lngua materna e a lngua estrangeira, por isso, a
compreenso baseava-se muito na traduo e valorizava-se, principalmente, a bagagem
lexical do aprendiz. Com a abordagem cognitiva, volta o foco de interesse para o sentido das
palavras, fazendo com que o principal objetivo da leitura seja a procura de sentido e que
sejam utilizados vrios documentos escritos para motivar os estudantes e possibilitar a
aquisio de vocabulrio.
Segundo Bezerra e Tabosa (2006, s/d),

do ponto de vista cognitivo, a leitura se processa na interao do leitor com

o texto: o leitor ativa seus conhecimentos prvios, levantando hipteses e
criando expectativas sobre os possveis significados do texto; essas
expectativas podero ser confirmadas ou negadas ao longo da reconstruo
dos sentidos sempre num processo de relao entre a macro e a
microestrutura textuais e os conhecimentos de mundo do leitor.

Ainda segundo DellIsola (2005), os conceitos de leitura apontam para, pelo menos, trs
concepes. A primeira trata a leitura como um fenmeno de identificao em que a
informao textual deve ser decifrada pelo leitor (DELLISOLA, 2005, p. 62, grifo do
autor). A segunda concepo afirma que a leitura um processo seletivo e que, neste
processo, o leitor ativo e responsvel pela construo de sentido do texto. Por fim, a
terceira concepo defende a ideia de que a leitura um processo interativo em que o leitor
seleciona informaes, elimina outras, cria novas relaes, adiciona elementos e, finalmente,
reconstri o sentido do texto (DELLISOLA, 2005, p. 63).
De acordo com a proposta do ENEM, a terceira concepo de leitura parece ser a mais
adequada, pois como afirma Murrie (2005, p. 57), ao descrever a rea de Linguagens,
Cdigos e suas Tecnologias do ENEM, no documento oficial do Exame,

a noo de cdigo implica a conveno de um acordo social por um

mecanismo regido por regras. No so regras que fecham as possibilidades
de uso da linguagem, mas sim que permitem gerar ocorrncias infinitas,

155
Revista Contempornea de Educao N 13 janeiro/julho de 2012

tendo em vista o contrato social estabelecido entre os participantes do

processo interlocutivo.

Assim, a leitura parece exigir dos candidatos ao Exame um posicionamento, um julgamento,

uma interpretao dos dados e no apenas uma mera relao de termos, tradues.
Segundo Colao (1998 apud BEZERRA e TABOSA, 2006), leitores proficientes so aqueles
capazes de realizar suas leituras em trs nveis: explcito, implcito e metaplcito. Ou seja,
leitores que sejam capazes de entender no apenas aquilo que est claramente dito pelo autor
no texto ou o que deve ser inferido a partir de pistas textuais dadas, mas leitores que sejam
capazes de reconstruir o contexto no qual o texto foi escrito, para dar-lhe sentido.
Para cada um desses nveis, determinadas habilidades so necessrias para que a leitura possa
se realizar. Como apontam Bezerra e Tabosa (2006, s/d), citando o trabalho de Colao
(1998), no nvel explcito, a leitura ocorre de maneira automtica, pois se exige o que est
claramente dito pelo autor no texto. Nesse nvel, preciso que haja decifrao do lxico,
familiaridade com as palavras lidas, leitura fluente, associao dos significados na ordem
gramatical em que aparecem e interpretao referencial correta; no nvel implcito, preciso
realizar inferncias, reconhecer pressupostos do texto, reconhecer subentendidos, ter a
ateno voltada para idias mais amplas e entender a maneira de se expressar do autor; j no
nvel metaplcito, preciso, dentre outros, o conhecimento do contexto, o estabelecimento de
relaes intertextuais, a compreenso das intenes do autor, o conhecimento da lngua como
reflexo do conhecimento da sociedade, o posicionamento crtico diante do lido e a
identificao das possibilidades de leitura do texto.
Logo, como apontam as autoras, esses pontos tericos apresentados relacionam-se s
competncias e s habilidades de leitura, que podem estar presentes em testes de avaliao
em larga escala, dentre eles os propostos pelos rgos pblicos, como no caso do Exame
Nacional do Ensino Mdio.

Uma breve viso panormica sobre a avaliao de leitura em lngua estrangeira

Bachman e Palmer (1996) destacam que, ao desenvolver e preparar um teste ou um exame de
lngua estrangeira, o principal fator a se tomar em considerao seria sua utilidade. Mas o que
seria a utilidade de um teste? E como podemos medi-la?

156
Revista Contempornea de Educao N 13 janeiro/julho de 2012

Para responder essas perguntas os autores propem um modelo de utilidade que se baseia
em trs princpios e seis caractersticas. Cientes de que no existe uma receita que possa
funcionar de forma igual para todos os testes, pois sempre necessrio levar em considerao
o contexto em que o teste ser aplicado, Bachman e Palmer (ibid) apresentam os seguintes
trs princpios que regem o modelo: o teste precisa ser desenvolvido (1) com uma inteno
especfica, (2) para um grupo especfico de candidatos, dos quais esperado (3) um domnio
lingustico determinado.
Quanto s caractersticas que compem o modelo de utilidade, Bachman e Palmer (ibid)
individuam as seguintes seis: confiabilidade, validade de construto [construct validity],
autenticidade, interatividade, impacto e praticidade. Todas essas caractersticas so
importantes na hora de se medir a utilidade de um teste, contudo, de acordo com o contexto
especfico de cada prova, algumas caractersticas podem ter um peso maior que as outras. Em
exames de larga escala, como no caso do ENEM no Brasil, h duas caractersticas que so de
importncia essencial: a validade e a confiabilidade. Esse posicionamento de Bachman e
Palmer (ibid) compartilhado por outros estudiosos do campo, entre os quais Brown (2007) e
McNamara (2000).
De acordo com Bachman e Palmer (1996) e Brown (2007), a confiabilidade de um teste se
refere diretamente aos resultados do mesmo. Portanto, um teste confivel demonstra
consistncia em medir os conhecimentos e em assegurar pontuaes e resultados acurados.
Sempre segundo Bachman e Palmer (ibid), o resultado de um teste, para ser considerado
vlido, precisa demonstrar que o candidato possui aquelas habilidades lingusticas que o teste
se prope a avaliar. Para isso, antes de desenvolver uma prova, necessrio definir o
construto que se quer medir atravs desta prova, ou seja, as habilidades que devem ser
testadas. Quando se fala em validade de construto, ento, se faz referncia capacidade de um
teste de avaliar com preciso as habilidades propostas.
No caso especfico do ENEM, como iremos ver a seguir, a validade de construto uma
caracterstica de grande importncia, pois cada questo da prova estruturada de forma a
avaliar uma habilidade especfica dentro de um leque preestabelecido de habilidades.
Ao pontuarmos umas diretrizes gerais a serem observadas na hora de desenvolver uma prova
de lngua estrangeira, devemos tambm considerar que o ENEM constitui uma prova peculiar,
pois se trata de uma prova de leitura.

157
Revista Contempornea de Educao N 13 janeiro/julho de 2012

Por isso, baseamos parte das nossas anlises nas diretrizes apresentadas por Alderson (2000)
em seu livro Assessing Reading. O autor se concentra especificamente na avaliao do
processo de leitura, atentando para diversos fatores que devem ser considerados ao momento
de desenvolver testes neste mbito. Dentre eles, Alderson (ibid) menciona diversos pontos
que se aplicam diretamente nossa anlise de questes do ENEM. Em primeiro lugar, ele
destaca a importncia do contedo dos textos a serem utilizados nas provas: precisa tratar-se
de textos interessantes, significativos e adequados ao nvel dos candidatos. importante
tambm que a prova seja elaborada com o intuito de testar diferentes habilidades e estratgias
de leitura e que, ao mesmo tempo, seja adequada ao tempo disponvel para faz-la, tanto no
tamanho dos textos como no nmero das questes. Finalmente, Alderson acredita na
importncia de se levar em considerao o conhecimento prvio dos candidatos que, como
reconhecido, influencia toda e qualquer compreenso. Por isso, o autor defende que uma boa
avaliao faz com que o candidato possa fazer uso de seus conhecimentos prvios e do
contexto na hora de responder s questes.
Como iremos ver a seguir, muitos dos princpios e diretrizes que so observados na
elaborao de testes de lngua estrangeira no contexto internacional so retomados tambm na
fundamentao terico-metodolgica do ENEM.

O contexto: O ENEM (Exame Nacional do Ensino Mdio)

O Exame Nacional do Ensino Mdio (ENEM) foi criado em 1998 para ser, de acordo com
Alves (2005, p.7),

um exame individual e de carter voluntrio, oferecido anualmente aos

concluintes e egressos do ensino mdio, com o objetivo principal de
possibilitar uma referncia para auto-avaliao, a partir das competncias e
habilidades que o estruturam.

Alm disso, o Exame tambm poderia servir como uma modalidade alternativa ou
complementar aos processos seletivos de acesso ao ensino superior. Atualmente adotado em
inmeras instituies, o ENEM um instrumento importante de avaliao, que focaliza,
especificamente, as competncias e habilidades bsicas desenvolvidas, transformadas e
fortalecidas com a mediao da escola (ALVES, ibid, p. 8). Seus resultados permitem a
158
Revista Contempornea de Educao N 13 janeiro/julho de 2012

identificao das lacunas no aprendizado de seus participantes, bem como as potencialidades

que os mesmos apresentam ao final da escolaridade bsica.
Para isso, as questes do Exame so baseadas em problemas, que devem exigir de seus
participantes no apenas a interpretao da questo proposta, mas tambm planejamento,
execuo e avaliao para a sua resoluo.
Como desafio fundamental para seus participantes, o Exame prope, em cada uma de suas
questes, uma situao-problema. Para Macedo (2005b, p. 31),

uma boa questo deve propor um percurso entre uma situao de partida,
que corresponde proposio do enunciado, at um ponto de chegada, que
corresponde escolha da alternativa, suposta pelo avaliado, como a que
melhor representa a resposta correta.

Portanto, essas situaes de partida, ou situaes-problema, deveriam propor uma tarefa que
faa com que os participantes mobilizem seus conhecimentos e recursos para tomar uma
deciso.
De acordo com Macedo (ibid), para avaliarmos se uma situao-problema adequada,
devemos avaliar se a questo realmente pede a soluo de um problema e exige que as
pessoas se posicionem, julguem e interpretem. Para isso, preciso que as alternativas se
articulem com o enunciado, que a questo nos comprometa com uma resposta e que esta
resposta nos projete para uma situao de vida real. Assim, segundo Macedo (ibid, p.33),

uma boa situao-problema representa, por seu enunciado, a criao de

uma perturbao, que altera algo no sujeito e que possibilita, ao propor o
conjunto das alternativas, a oportunidade de fechamento do ciclo aberto
pelo enunciado.

J as alternativas devem expressar diferentes solues ou modos de compensar essa

perturbao, que foi criada pelo enunciado, sendo que apenas uma ser considerada como a
soluo ideal para o problema apresentado, nos termos da situao-problema. Macedo (ibid,
p. 34) ainda complementa que na elaborao das questes, evitam-se afirmaes
preconceituosas, dicas ou indutores de respostas e pegadinhas. Segundo o autor, o que
159
Revista Contempornea de Educao N 13 janeiro/julho de 2012

interessa que o aluno tenha uma relao construtiva com o processo de conhecimento e no
um jogo, em que a malcia, a esperteza, etc. ocupem o lugar mais importante (p.34).

As tcnicas e critrios de elaborao de itens do ENEM

Segundo Fini (2005) as tcnicas de elaborao do ENEM no so novas, mas sim um
conjunto de procedimentos que devem ser observados em qualquer tipo de teste de mltipla
escolha. No entanto, o que diferencia o ENEM dos outros exames que as questes do
ENEM so apresentadas no contexto de uma situao-problema, como descrito acima.
Desta maneira, como descreve Fini (ibid, p.103),

o participante dever receber uma situao-problema bem articulada, a

partir da qual so formuladas uma ou mais questes no formato de mltipla
escolha. Ou seja, a questo apresenta um enunciado e um conjunto de
supostas respostas, dentre as quais apenas uma a alternativa que
responde corretamente ao problema proposto no enunciado.

Alm disso, o Exame deve ser elaborado para que o participante possa recorrer s suas
competncias e habilidades, adquiridas ao longo de seus anos de estudo na educao bsica,
para determinar a alternativa correta, que responde ao problema que lhe foi proposto.
Segundo Fini (2005, p. 103), a elaborao de uma questo para o ENEM est condicionada
aos seguintes pressupostos:

1. a situao-problema deve ser elaborada de modo a oferecer ao

participante informaes tais que ele possa tomar decises em face do que
lhe foi proposto;
2. a questo relacionada com a situao-problema deve conter na estrutura
do seu enunciado os elementos necessrios e adequadamente organizados
para a tomada de deciso;
3. as alternativas propostas devem ser coerentes com a questo formulada,
no sentido de expressarem os diferentes graus de associao com a
questo;

160
Revista Contempornea de Educao N 13 janeiro/julho de 2012

4. conjunto situao-problema, questo e alternativas deve revelar uma

estrutura articulada que, como um todo, d sentido proposta feita ao
participante;
5. uma questo pode estar vinculada prioritariamente a uma habilidade e,
de forma complementar, a outras. No caso de uma situao-problema ter
mais de uma questo a ela vinculada, poder relacionar-se a mais de uma
habilidade;
6. para cada uma das habilidades so elaboradas trs questes e, aps
anlise dos resultados do pr-teste, so selecionadas aquelas que
apresentam pertinncia mais direta com a habilidade, originalidade e
coeficiente bisserial maior de 30; e
7. a seleo de itens procura atender maior distribuio possvel de temas
e graus de dificuldade variados de modo a compor uma prova com 20%,
40% e 40% das questes e nvel fcil, mdio e difcil, respectivamente.

Quanto situao-problema, cuja apresentao, segundo Fini (2005, p.104), muitas vezes o
prprio enunciado, deve ser atraente para o participante e verificar se o texto: (1) est correto
quanto ao contedo; (2) envolve interdisciplinaridade e contextualizao; (3) adequado
compreenso do participante; e (4) adequado extenso da prova.
Quanto ao enunciado da questo, Fini (2005, p.104, grifos do autor) afirma que preciso
verificar se o mesmo:

apresenta claramente um nico problema proposto para o participante;

contm as informaes essenciais para a soluo do problema

proposto, evitando elementos suprfluos;

adequado em relao dificuldade pretendida;

adequado em relao ao tempo disponvel para a prova;

adequado em relao quantidade de tarefas a serem executadas

para a escolha da alternativa;

no contm afirmaes preconceituosas; e possibilita a incluso de

elementos que se repetem nas alternativas, visando diminuir o tamanho da

questo e tornar mais evidente o elemento variante que aparece nas
alternativas.

161
Revista Contempornea de Educao N 13 janeiro/julho de 2012

Quanto s alternativas, Fini (2005, p.104, grifos do autor) aponta que preciso assegurar se:

a alternativa correta indiscutivelmente a nica;

as alternativas incorretas (distratores) representam relaes possveis

de serem estabelecidas pelo participante, mas no so condies suficientes

para a resoluo dos problemas;

so adequadas em relao ao tempo disponvel para a prova;

esto colocadas em ordem lgica, crescente ou decrescente, sempre

que envolvem valores numricos;

so homogneas no contedo, integrando uma mesma famlia de fatos

e ideias;

so homogneas na forma;

so independentes, sem subentendidos ou referncias s alternativas

anteriores;

no contm pistas que possam ajudar o participante na resoluo da

questo;

no contm elementos (pegadinhas) que possam induzir o participante

a erros;

no constituem um conjunto de afirmaes falso-verdadeiras

independentes;

no contm certas palavras que induzem a afirmaes falsas ou

verdadeiras. Frases onde aparecem sempre ou nunca, tudo ou todo,

s ou somente so, em sua grande maioria, falsas. As que contm
alguns ou geralmente so quase sempre verdadeiras; e

a alternativa correta no pode ser decidida pelo participante, sem que

ele necessite estabelecer qualquer relao com o enunciado ou texto. O

mesmo critrio vale para os distratores.

Quanto questo como um todo, segundo Fini (2005, p.104-105) preciso verificar se:

162
Revista Contempornea de Educao N 13 janeiro/julho de 2012

est redigida de forma clara e correta, segundo os padres da norma

culta da Lngua Portuguesa (ortografia, pontuao, gramtica), evitando

regionalismos;

os textos base utilizados na situao-problema ou no enunciado

esto corretos, contm informaes pertinentes e necessrias e apresentam

citao bibliogrfica segundo as normas da ABNT. A escolha dos autores
deve ser bastante criteriosa, uma vez que toda avaliao sinaliza para uma
desejvel apropriao de contedo;

as representaes grficas e/ou pictricas esto na proporo correta,

so pertinentes e necessrias, com informao completa e boa visualizao

de legendas, incluindo a fonte original dessas representaes;

a resposta a uma questo no depende da (s) resposta(s) de outra(s),

para evitar a propagao de erros;

o conjunto das partes (situao-problema, questo e alternativas)

apresenta o nvel de dificuldade (alto, mdio, baixo) pretendido; e

a habilidade que se pretende avaliar com a questo est de fato

contemplada.

A prova de Lngua Estrangeira Moderna (Ingls) no ENEM

Antes de proceder com a anlise dos dados, importante esclarecer como so estruturadas as
questes de ingls como lngua estrangeira e quais habilidades a prova se prope a medir.
Em termos de estrutura, os textos so sempre de tamanho relativamente reduzido e
inteiramente em lngua inglesa. Trata-se de textos autnticos, por vezes reproduzidos em
verso integral ou, outras vezes, reduzidos a fragmentos ou adaptados. A situao problema,
assim como as alternativas, apresentada em portugus. Acreditamos que isso se deve
comprovao de que, ao testar a compreenso escrita de aprendizes iniciantes em L2, as
perguntas em L1 (no caso do ENEM, o portugus) facilitariam a ativao de estratgias de
leitura por parte dos candidatos, resultando em respostas mais acuradas. (LIN, 2007).
Como j foi mencionado, uma das caractersticas mais importantes em exames de larga escala
como o ENEM a validade de construto, ou seja, o grau em que o exame realmente mede as

163
Revista Contempornea de Educao N 13 janeiro/julho de 2012

habilidades que se prope a medir. Para isso, o ENEM possui um nmero definido de
habilidades a serem testadas. Estas habilidades so divididas por rea de conhecimento e rea
de competncia. Na parte da prova dedicada a Linguagens, Cdigos e suas Tecnologias,
existem nove reas de competncias, para cada uma das quais so definidas certas
habilidades. A parte de lngua estrangeira corresponde Competncia de rea 2 que visa a
avaliar o conhecimento e uso das lngua(s) estrangeira(s) moderna(s) como instrumento de
acesso a informaes e a outras culturas e grupos sociais. Dentro desta rea de competncia,
existem as seguintes habilidades a serem abordadas e testadas na prova:

H5 Associar vocbulos e expresses de um texto em LEM ao seu tema.

H6 - Utilizar os conhecimentos da LEM e de seus mecanismos como meio de ampliar as
possibilidades de acesso a informaes, tecnologias e culturas.
H7 Relacionar um texto em LEM, as estruturas lingusticas, sua funo e seu uso social.
H8 - Reconhecer a importncia da produo cultural em LEM como representao da
diversidade cultural e lingustica

Tabela 1: As habilidades da Competncia de rea 2 Lngua Estrangeira1 (BRASIL, 2011)

Como explicitado a seguir, nossa anlise levar em conta as habilidades que cada questo se
prope a analisar, assim como o formato em que a questo se apresenta.

Anlise dos dados

Para a anlise, foram selecionados os cinco itens da prova de lngua inglesa do ENEM do ano
de 2011, os quais se encontram no anexo 1 deste artigo. Os itens foram avaliados para se
observar: (1) a habilidade de leitura exigida; (2) a seleo dos textos-base; (3) a construo do
enunciado situaes-problema e comandos e (4) a constituio das alternativas.
Ao analisarmos as questes, nos atentamos aos critrios estabelecidos para a elaborao dos
itens do ENEM, como supracitado, e no critrio da validade, que, no caso da prova de lngua

Essas habilidades foram retiradas da Matriz de Referncia para o Enem 2011, documento anexo verso
eletrnica do Edital do Enem (BRASIL, 2011).

164
Revista Contempornea de Educao N 13 janeiro/julho de 2012

inglesa do ENEM, corresponde ao grau em que o conhecimento e a habilidade de leitura em

lngua inglesa de fato so avaliados no exame.

As questes do Exame de 2011

A questo nmero 91 do Exame, primeiro item da prova de lngua inglesa, est de acordo com
a Habilidade 71 do ENEM, conforme citado em sua matriz de referncia. Fini (2005, p. 104-5)
preconiza que a habilidade que se pretende avaliar com a questo [seja] de fato
contemplada. Observamos que esta questo atendeu a alguns critrios estabelecidos, mas
apresentou tambm problemas em sua elaborao.

Figura 1 Questo 91 ENEM 2011 (Fonte: Exame Nacional do Ensino Mdio 2011)

H7 - Relacionar um texto em LEM, as estruturas lingusticas, sua funo e seu uso social.

165
Revista Contempornea de Educao N 13 janeiro/julho de 2012

De acordo com Alderson (2000), textos que conseguem motivar leituras ricas e profundas so
aqueles que geram interesse no leitor, que conseguem atingi-lo relacionando-se com ele, com
suas formas de lazer e com seu nvel intelectual, dentre outros aspectos. Acreditamos que o
texto apresentado neste item atendeu a este propsito, pois se adequou ao pblico-alvo do
exame, apresentando tamanho, tema e gnero textual apropriados. Entretanto, o enunciado da
questo apresenta o texto como charge, quando deveria se referir a um cartoon. Sabe-se que a
charge localizada no tempo e se trata de um gnero discursivo que consiste em uma reao a
uma situao vigente na sociedade, tendo alto teor ideolgico, no sendo o caso do texto deste
item. O gnero trazido nesta questo um cartoon, pois um texto atemporal, de senso
comum, de certo tom de humor. A prpria fonte do texto o apresenta como tal.
No que se refere s alternativas, observamos que foram homogneas em seu contedo,
integrando uma mesma famlia de fatos e ideias (FINI, 2005, p. 104), ou seja, apresentaramse como adequadas, plausveis e coerentes. Ademais, as alternativas demonstraram ser
homogneas quanto forma, pois possuem tamanhos similares - embora a correta tenha sido
um pouco menor que as demais e esto paralelas, apresentando semelhanas sintticas entre
elas.
Finalmente, notamos que o enunciado desta questo poderia ser direto, como: No texto, a
professora ouve... ou No cartoon, a professora ouve... ao invs de: No caso da cena da
charge, a professora ouve.
Um aspecto a ser destacado desta questo embora no seja um critrio de elaborao do
Exame que seu texto traz elementos de multimodalidade (Kress, 2009). A combinao da
imagem e do texto favorece a compreenso, a leitura e a realizao da questo. Porm, a
situao problema, apesar de contextualizar o enunciado, elimina a possibilidade de trabalho
com os aspectos multimodais oferecidos.

166
Revista Contempornea de Educao N 13 janeiro/julho de 2012

Figura 2 - Questo 92 ENEM 2011 (Fonte: Exame Nacional do Ensino Mdio 2011)

A segunda questo (de nmero 92) est relacionada Habilidade 51. Apontamos como
aspectos positivos deste item somente o tamanho do texto-base e a citao da sua fonte,
aspecto de relevncia para um exame de larga escala como o ENEM.
Observamos, entretanto, que esta questo apresenta problemas de ordens variadas.
Destacamos que o texto foi retirado da revista Speak Up, uma revista de propsitos didticos
que faz adaptaes visando facilitar a linguagem. Ademais, parece tratar-se de um fragmento
do texto, sem ttulo e em formato diferente do layout original. Na referncia, contudo, no
consta nenhuma informao sobre adaptaes ou fragmentaes do material. Acreditamos que
o texto original deveria ter sido utilizado, pois teria sido extrado do meio social, do seu
verdadeiro suporte. Desta forma, no teramos dvidas do nvel de interveno que o texto
sofreu, pois teramos a primeira fonte citada.
Outro ponto a destacar que a questo no prope uma situao de partida ao avaliado, ou
seja, uma situao-problema. Sabe-se que a ausncia de uma situao-problema est contra o
que Macedo (2005b) define como uma boa questo. Alm disso, o enunciado apresenta um
comando confuso, comprometendo a questo. Inicialmente, o texto aborda apenas um estudo
e o enunciado se refere s pesquisas. A questo sobre o tema do texto e no sobre
vocbulos isolados. O termo university graduates por si s, como foi apresentado, no traz
1

H5 - Relacionar um texto em LEM, as estruturas lingusticas, sua funo e seu uso social.

167
Revista Contempornea de Educao N 13 janeiro/julho de 2012

nenhuma evidncia de que o maior nvel de estudo reduz riscos de ataque. O uso da
expresso no enunciado se faz, portanto, desnecessrio.
Como um ltimo aspecto destacado, as alternativas no esto homogneas em contedo ou
forma (FINI, 2005). A alternativa A menor que as demais, as alternativas D e E destoam das
outras e as alternativas A e B no apresentam uma variedade de vocabulrio, pois ambas
utilizam as doenas.

Figura 3 - Questo 93 ENEM 2011 (Fonte: Exame Nacional do Ensino Mdio 2011)

No que diz respeito questo 93, a Habilidade exigida parece ser a de nmero 61. Quanto s
alternativas, apesar de todas as alternativas da questo 93 trazerem a mesma famlia de fatos e
1

H6 - Utilizar os conhecimentos da LEM e de seus mecanismos como meio de ampliar as possibilidades de

acesso a informaes, tecnologias e culturas.

168
Revista Contempornea de Educao N 13 janeiro/julho de 2012

idias, atendendo o critrio da homogeneidade de contedo, percebe-se falta de conformidade

na forma (FINI, 2005). As alternativas possuem tamanhos diferentes: a alternativa A
consideravelmente menor do que a E. Tal caracterstica evidenciou o distrator E, sendo ainda
a nica opo a fazer referncia imagem do texto. Alm disso, apesar de trazer um
enunciado claro e objetivo, h ausncia de situao-problema, aspecto que compromete a
qualidade da questo (MACEDO, 2005), o enunciado apenas retoma uma informao
explicitada no texto e apenas parte da fonte do texto-base apresentada. Sabe-se que a fonte
completa do texto-base utilizado deve ser citada. Tal fato no ocorre visto que o autor, nem a
data da notcia so apresentados, ferindo a autenticidade do texto.

Figura 4 - Questo 94 ENEM 2011 (Fonte: Exame Nacional do Ensino Mdio 2011)

J na questo 94, alguns aspectos podem ser observados. Constata-se adequao na escolha
do gnero textual desta questo letra de msica por ser este um texto que motiva a leitura
e gera interesse no pblico-alvo do ENEM (ALDERSON, 2000). A abordagem de trabalho
com a msica vincula esta questo com a Habilidade 8 do ENEM1. Nesta questo,
apresentada uma situao-problema, o que lhe caracteriza como uma boa questo. Contudo,

H8 - Reconhecer a importncia da produo cultural em LEM como representao da diversidade cultural e

lingustica.

169
Revista Contempornea de Educao N 13 janeiro/julho de 2012

apesar das alternativas apresentarem paralelismo, falta homogeneidade na forma, pois as

opes D e E so consideravelmente maiores.

Figura 5 - Questo 95 ENEM 2011 (Fonte: Exame Nacional do Ensino Mdio 2011)

A ltima questo de lngua inglesa do Exame, a questo 95, explora a Habilidade 71 e

apresenta-se como adequada, pois prope ao avaliado uma situao-problema que relaciona
um enunciado de comando adequado, claro e objetivo at a chegada s alternativas. Estas se
apresentam homogneas na forma, com paralelismo e tamanhos similares. Entretanto, duas
delas so, de certa maneira, excludentes, atraindo a ateno do avaliado e evidenciando a
resposta. De acordo com Fini (2005), as alternativas no podem conter pistas que
favoream o avaliado na soluo da questo. J o texto-base adequado ao pblico-alvo do
exame quanto ao tamanho, ao tema e ao gnero. Porm, constata-se que Garfield tem sido
utilizado com frequncia nos exames do ENEM, por isso acreditamos que uma alternativa
ainda no explorada no exame seria utilizar tirinhas nacionais como, por exemplo, as da
Turma da Mnica em ingls. Desta forma, se teria a oportunidade de apresentar um texto
familiar e mais prximo da realidade dos candidatos, aproximando assim a prpria lngua
inglesa cultura brasileira. .

H7 - Relacionar um texto em LEM, as estruturas lingusticas, sua funo e seu uso social.

170
Revista Contempornea de Educao N 13 janeiro/julho de 2012

Consideraes Finais
Os resultados da nossa anlise revelam que nem sempre os itens da prova de lngua inglesa do
ENEM de 2011 condizem com os parmetros estabelecidos para a formulao das questes
deste exame.
Encontraram-se problemas diversos: alguns mais superficiais, relativos estrutura das
questes; outros mais profundos, que parecem ir contra a fundamentao tericometodolgica do exame.
Acreditamos que a ausncia da situao-problema em alguns dos itens analisados constitua
um problema grave, pois Fini (2005) e Macedo (2005b), em documento que explicita os
fundamentos terico-metodolgicos do ENEM, insistem exatamente na importncia da
situao-problema, aspecto fundamental de todas as questes do exame. A ausncia de tal
situao-problema, portanto, vai contra as bases tericas e metodolgicas desta prova, pois
afeta negativamente a integrao do texto com a questo a ele relacionada.
Outro problema mais srio destacado nas anlises diz respeito ao formato original do texto.
Vimos que em um dos itens analisados, este formato no foi respeitado, o que pode resultar
em problemas de identificao do gnero textual por parte dos candidatos.
Os outros problemas encontrados so de carter mais superficial, tratando-se nos demais
casos de falta de homogeneidade entre as alternativas ou falta de clareza no enunciado.
No podemos deixar de mencionar que os resultados da anlise apontam tambm para muitos
aspectos positivos: a escolha dos textos a serem trabalhados sempre adequada quanto ao
tamanho e aborda temas apropriados e interessantes para o pblico-alvo, facilitando ento a
leitura e a ativao do conhecimento prvio sobre os assuntos. Outro aspecto positivo foi a
abordagem clara da habilidade que cada item pretende testar, conferindo assim validade ao
ENEM.
Conclumos que, mesmo tendo sido contemplada somente nas ltimas duas verses do exame,
a prova de lngua inglesa, em geral, se apresenta como uma prova vlida e bem estruturada.
Contudo, h ainda aspectos que precisam ser melhorados para que essa parte da prova esteja
em total consonncia com os fundamentos terico-metodolgicos do exame.

171
Revista Contempornea de Educao N 13 janeiro/julho de 2012

Referncias bibliogrficas
ALDERSON, J. C. Assessing Reading. Cambridge: Cambridge University Press, 2000.
ALVES, A. Apresentao. In: Instituto Nacional de Estudos e Pesquisas Educacionais Ansio
Teixeira. Exame Nacional do Ensino Mdio (ENEM): fundamentao terico-metodolgica.
Braslia, DF: O Instituto, 2005, p. 7-9.
BACHMAN, L. F.; PALMER, A. S. Language Testing in Practice. Oxford: Oxford
University Press, 1996.
BEZERRA, M. A.; TABOSA, M. Q. Habilidades de leitura requeridas e demonstradas em
provas de vestibular. Revista Intercmbio, volume XV. So Paulo: LAEL/PUC-SP, ISSN
1806-275X, 2006.
BROWN, H. D. Language Assessment: Principles and Issues. In: BROWN, H. Douglas.
Teaching by principles: an interactive approach to language pedagogy. 3. ed. Nova Iorque:
Longman, 2007. Cap. 23, p. 444-465.
CASTILLO ARREDONDO, S.; DIAGO, Jess C. Prticas de avaliao educacional:
materiais e instrumentos. So Paulo: Unesp, 2009.
COLAO, M. Nveis de processamento de sentido. Congresso Nacional de Linguagem e
Ensino. Pelotas, UCPel, 1998.
DELLISOLA, R. L. P. O sentido das palavras a interao leitor texto. Belo Horizonte:
Faculdade de Letras da UFMG, 2005.
FINI, M. E. Erros e acertos na elaborao de itens para a prova do ENEM. In: Instituto
Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira, Exame Nacional do Ensino
Mdio (ENEM): fundamentao terico-metodolgica. Braslia, DF: O Instituto, 2005, p.
101-106.
BRASIL. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira Inep.
Exame

Nacional

de

Ensino

Mdio

2011.

Braslia:

2011.

Disponvel

em:

<

http://enem.inep.gov.br/ >. Acesso em 03/03/2012

BRASIL. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira - Inep.
Edital N 7, de 18 de maio de 2011: Exame nacional do ensino mdio ENEM 2011.
Braslia: 2011. 62 p. Disponvel em:

172
Revista Contempornea de Educao N 13 janeiro/julho de 2012

<http://download.inep.gov.br/educacao_basica/enem/edital/2011/edital_n07_18_05_2011_2.
pdf >. Acesso em 22/02/2012.
LAPKOSKI, G. A. O. A avaliao de leitura em ingls como lngua estrangeira no centro de
lnguas da UFPR-CELIN. 2005. 69 f. Monografia. Universidade Federal do Paran, Curitiba:
2005.
LIN, Z. Setting EFL Reading Comprehension Questions in Learners L1? Asian ESL Journal.
Vol.

06,

No.

02,

Junho

2007.

Disponvel

online:

<

http://www.asian-efl-

journal.com/June_07_zl.php>. Acesso em 22/02/2012.

KRESS, G; VAN LEEUWEN, T. Reading images: the grammar of visual design. 2.ed.
London; New York: Routledge, 2006.
MACEDO, L. de. Competncias e habilidades: elementos para uma reflexo pedaggica. In
Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira, Exame Nacional do
Ensino Mdio (ENEM): fundamentao terico-Metodolgica. Braslia, DF: O Instituto
2005a, p. 13-28.
______. A situao-problema como avaliao e como aprendizagem. In Instituto Nacional de
Estudos e Pesquisas Educacionais Ansio Teixeira, Exame Nacional do Ensino Mdio
(ENEM): fundamentao terico-metodolgica. Braslia, DF: O Instituto, 2005b, p. 29-36.
MCNAMARA, Tim. Language Testing. Oxford: Oxford University Press, 2000.
MURRIE, Z. de F. A rea de linguagens e cdigos e suas tecnologias no ENEM. In Instituto
Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira, Exame Nacional do Ensino
Mdio (ENEM): fundamentao terico-metodolgica. Braslia, DF: O Instituto, 2005, p. 5760.

173
Revista Contempornea de Educao N 13 janeiro/julho de 2012