Formação Continuada em Apropriação de Resultados do SAERO Prof. Aline Gruppi Lanini

1. Formação Continuada em Apropriação de Resultados do SAERO Prof. Aline GruppiLanini Analista de Instrumento de Avaliação

2. Objetivo geral Analisar e interpretar os resultados do SAERO/2012 para (re)planejamento das ações pedagógicas implementadas em sala de aula. Objetivos específicos • Refletir sobre a avaliação externa; • Analisar a Matriz de Referência; • Apresentar e analisar exemplos de itens; • Apresentar e interpretar a Escala de Proficiência, considerando os Padrões de Desempenho; • Analisar e interpretar os resultados da avaliação de Língua Portuguesa.

3. DE OLHO NA AVALIAÇÃO Vídeo 1

4. Avaliar é refletir sobre uma determinada realidade, a partir de dados e informações, e emitir um julgamento que possibilite uma ação.

5. Tipos de avaliações Somativa Formativa Diagnóstica Interna (pequena escala) Externa (larga escala) SAERO

6. Avaliação Educacional Externa

7. Conceitos relacionados à Avaliação Educacional Externa • Os Testes de Proficiência têm como objetivo aferir habilidades que são esperadas dos estudantes em diferentes etapas de escolarização. • Essas habilidades são descritas por descritores. • Um conjunto de descritoresformam uma Matriz de Referência. • A Matriz de Referência apresenta o objeto de uma avaliação.

8. Matriz de Referência para Avaliação • Elemento base de origem dos testes utilizados no SAERO. Garante legitimidade e transparência à avaliação. • É formada por um conjunto de descritores que, agrupados em tópicos/temas, apresentam as habilidades consideradas básicas e possíveis de serem aferidas por meio do instrumento utilizado em avaliações em larga escala. • Não abarca todo currículo escolar. Por isso, não pode ser confundida com parâmetros curriculares, nem com o conteúdo a ser trabalhado pelo professor em sala de aula.

9. Concepções que fundamentam a construção das matrizes de referência de Língua Portuguesa • Língua: interação entre sujeitos em contextos sociais específicos. • Letramento: práticas sociais de leitura e escrita que se constituem na interação entre sujeitos ou grupos de sujeitos. • Perspectiva dos tipos e gêneros textuais. • Papel da escola: instância de aprendizagem da escrita em seus aspectos gráficos e formais e de vivências de práticas de letramento. Como transpor concepções e conteúdos para a Matriz de Referência?

10. O que é avaliado? Competências e Habilidades • Segundo Perrenoud (1999), competências referem-se ao domínio prático de um tipo de tarefa ou situação. Tais domínios práticos só podem ser alcançados se junto com eles forem desenvolvidas as habilidades dos estudantes, as quais compreendem os conteúdos/conhecimentos que precisam ser acionados para que um determinado domínio/competência seja realizado. • Exemplo: • Para realizar procedimentos básicos de leitura o estudante precisa acionar diversas habilidades leitoras, tais como: localizar, identificar, inferir e distinguir elementos presentes na superfície textual ou sugeridas pelo texto. • O conjunto dessas habilidades constitui uma competência.

11. MATRIZ DE REFERÊNCIA Habilidades de leitura Conjunto de descritores Conteúdo programático da área de conhecimento a ser avaliada Nível de operação mental necessário para a aprendizagem Descritores originados do cruzamento entre conteúdos programáticos e as habilidades e competências cognitivas que lhes são próprias.

12. Atividade 1: Montando a Matriz de Referência

13. Analise os descritores/habilidades da Matriz de Referência que norteiam a elaboração dos itens que compõem os testes de Língua Portuguesa do SAERO. • Encontre o tópico que agrupa a habilidade que você representa.

14. Tópicos que compõem a Matriz de Referência

20. E ENSINO MÉDIO

21. A Matriz não esgota o conteúdo a ser trabalhado em sala de aula e, portanto, não pode ser confundida com propostas curriculares, estratégias de ensino ou diretrizes pedagógicas.

22. Matriz • Agrupa as habilidades passíveis de avaliação em um teste de proficiência. • Tema / Tópico • Representa uma subdivisão de acordo com o conteúdo, competências de área e habilidades. • Item • Avalia apenas uma única habilidade. • Descritor • Descreve cada uma das habilidades da Matriz . • Teste • Instrumento de Avaliação.

23. * Esse quantitativo de itens varia conforme o projeto. O teste do SAERO, é composto de 91 itens divididos em 7 blocos de 13 itens; e os cadernos são compostos de 2 blocos, totalizando 26 itens.

24. ENUNCIADO SUPORTE COMANDO DISTRATORES GABARITO Esse item avalia a habilidade de identificar efeitos de ironia ou humor (D16)

25. Item • É uma questão do teste em larga escala. • Avalia uma única habilidade, portanto o item é unidimensional. • Obtém um resultado por estudante, que permite avaliar as hipóteses levantadas por ele. • Todos os distratores devem ser plausíveis, para que indiquem hipóteses cognitivas levantadas pelos estudantes para a escolha de cada alternativa. • Na formulação de um item, deve-se considerar: Grau de Dificuldade (diz respeito à adequação entre a formulação do item e a capacidade de resposta do estudante) Discriminação (capacidade de o item de distinguir estudantes com diferentes níveis de habilidade)

26. Atividade 2: Conhecendo melhor o item.

27. Resolvam os itens. • Identifiquem a habilidade avaliada pelo item em análise. • Elaborem hipóteses cognitivas para os distratores.

28. Habilidades de leitura x realidade em sala de aula • Dentre essas habilidades, quais seriam as mais acertadas pelos estudantes? • E as menos acertadas?

29. I-Procedimentos de leitura II- Implic. III- Relação IV- Coesão e coerência no V- Relação entre VI- Variação suporte de textos processamento do texto recursos expressivos linguística

30. Escala de Proficiência • A ESCALA DE PROFICIÊNCIA foi desenvolvida com o objetivo de traduzir medidas em diagnósticos qualitativos do desempenho escolar. • Ela orienta, por exemplo, o trabalho do professor com relação as competências que seus estudantes desenvolveram, apresentando os resultados em uma espécie de régua, onde os valores obtidos são ordenados e categorizados em intervalos ou faixas que indicam o grau de desenvolvimento das habilidades para os estudantes que alcançaram determinado nível de desempenho.

31. PADRÕES DE DESEMPENHO NÍVEIS DE PROFICIÊNCIA DOMÍNIOS E COMPETÊNCIAS RELAÇÃO ESCALA - MATRIZ A gradação das cores indica o grau de complexidade da tarefa.

32. Identificam o tema em textos menos familiares que exijam a realização de inferências. Esses estudantes já consolidaram essa habilidade. Começam a desenvolver a competência. Identificam o tema de textos curtos, de linguagem simples, cujo tema vem indicado no título. Identificam o tema a partir da conjugação das pistas textuais e do conhecimento de mundo do leitor, desde que seja em textos de temática e gênero familiares. Identificam o tema de um texto valendo-se de pistas textuais. Ainda não desenvolveram a habilidade. A gradação das cores indica o grau de complexidade da tarefa.

33. Padrões de Desempenho Cortes feitos na Escala de Proficiência conforme a etapa de escolaridade Os Padrões de Desempenho são categorias definidas a partir de cortes numéricos que agrupam os níveis da Escala de Proficiência, com base nas metas educacionais estabelecidas pelo SAERO. Esses cortes dão origem a quatro Padrões de Desempenho – Abaixo do Básico, Básico, Adequado e Avançado –, os quais apresentam o perfil de desempenho dos estudantes de cada etapa de escolaridade.

34. Padrões de Desempenho – 9º EF Neste Padrão de Desempenho, os estudantes se limitam a realizar operações básicas de leitura, interagindo apenas com textos do cotidiano, de estrutura simples e de temáticas que lhes são familiares. Eles localizam informações explícitas e realizam inferências menos complexas. Quanto aos textos de estrutura narrativa, identificam personagem, cenário e tempo. Na apropriação de elementos que estruturam o texto, manifestam-se operações de retomada de informações, por meio de pronomes pessoais retos, por substituição lexical e por reconhecimento de relações lógico-discursivas no texto. No campo da variação lingüística, eles reconhecem expressões representativas da linguagem coloquial. Considerando as habilidades descritas, constata-se que esses estudantes, após nove anos de escolaridade, apresentam lacunas no processo de desenvolvimento da competência leitora.

36. Os estudantes cujas médias de proficiência estão situadas neste Padrão de Desempenho ampliam suas habilidades de leitura, sendo capazes de interagir com textos de temática menos familiar e de estrutura um pouco mais complexa. No que diz respeito à percepção de posicionamentos no texto, esses estudantes conseguem distinguir fato de opinião e identificar a tese e os argumentos que a defendem. Na apropriação de elementos que estruturam o texto, manifestam-se operações de retomada de informações, por meio de pronomes pessoais e, também, de indefinidos, por substituição lexical e por reconhecimento de relações lógico-discursivas no texto. Esses estudantes inferem o assunto de textos de temática do cotidiano. São capazes de selecionar informações do texto, distinguindo a principal das secundárias. No campo da variação linguística, identificam interlocutores por meio das marcas linguísticas. Com relação às operações inferenciais, eles depreendem informações implícitas, o sentido de palavras ou expressões e o efeito do uso de pontuação e de situações de humor. Além disso, eles reconhecem o efeito de sentido de notações em um texto de linguagem mista.

38. Neste Padrão de Desempenho, encontram-se habilidades mais elaboradas, exigindo dos estudantes uma autonomia de leitura em face das atividades cognitivas que lhes são exigidas e dos textos com os quais irão interagir. Esses estudantes já interagem com textos expositivos e argumentativos com temáticas conhecidas e são capazes de identificar informações parafraseadas e de distinguir a informação principal das secundárias. Recuperam informações referenciais baseadas na omissão de um item, elipse de uma palavra, um sintagma ou uma frase. Quanto à variação linguística, os estudantes identificam expressões próprias de linguagem técnica e científica. Fazem a leitura comparativa de textos que tratam do mesmo tema. Reconhecem o tema do texto; do sentido de expressões complexas; do efeito de sentido decorrente do uso de notações em textos que conjugam duas ou mais linguagens; do efeito de sentido decorrente do uso de recursos morfossintáticos. Com relação à leitura global de textos, os estudantes conseguem identificar a tese e os argumentos que a sustentam; reconhecem a função social de textos fabulares e de outros com temática científica, identificando, ainda, sua finalidade.

40. Analisando as habilidades encontradas neste Padrão, conclui-se que os estudantes que nele se encontram são capazes de interagir com textos de tema e vocabulário complexos e não familiares. Os estudantes reconhecem os efeitos de sentido do uso de recursos morfossintáticos diversos, de notações, de repetições, de escolha lexical, em gêneros de várias naturezas e temáticas. Eles realizam, ainda, operações de retomadas com alta complexidade. São capazes de analisar, com profundidade, uma maior gama de textos argumentativos, narrativos, expositivos, instrucionais e de relato, observando diversas categorias ainda não atingidas anteriormente, tanto no interior do texto quanto na comparação entre eles. No tocante à análise de textos que conjugam diversas tipologias, são capazes de identificá-las e analisá-las, reconhecendo seus objetivos separada ou conjuntamente. Em textos literários complexos, inferem o significado da metáfora e o efeito de sentido pretendido com seu uso. Assim, os estudantes deste Padrão estão próximos da manifestação de habilidades de leitura que os tornarão, efetivamente, leitores proficientes, ou seja, leitores que, de modo consciente ou não, conseguem perceber o ritmo do texto, firmando o pacto pretendido pelo autor ou criando um ritmo todo seu.

42. APROPRIAÇÃO DOS RESULTADOS Vídeo 2

43. Interpretação pedagógica dos resultados Língua Portuguesa

44. Resultados SAERO 2012 - Proficiência Média 9º ano EF - Língua Portuguesa

45. Os números na Escala de Proficiência Leitura dos resultados

46. ESCOLA CRE SAERO

47. SAERO 2012 9º ano EF - Língua Portuguesa Percentual de alunos por nível de proficiência e padrão de desempenho

48. SAERO 2012 9º ano EF - Língua Portuguesa Percentual de alunos por nível de proficiência e padrão de desempenho

49. SAERO 2012 9º ano EF - Língua Portuguesa Percentual de alunos por nível de proficiência e padrão de desempenho

50. ATIVIDADE 3: • Lendo e interpretando os resultados • Compare a proficiência média da escola com as outras médias apresentadas. • Como você interpreta a posição da sua escola? • E a participação? • De que forma você acha que a participação pode interferir nos resultados de nossa escola?