PREFEITURA DA CIDADE DO RIO DE JANEIRO SECRETARIA MUNICIPAL DE EDUCAÇÃO COORDENADORIA DE EDUCAÇÃO

Transcrição

1

2 SUMÁRIO APRESENTAÇÃO I. OBJETIVOS II. PÚBLICO ALVO III. TREINAMENTOS IV. DATAS DE APLICAÇÃO V. HORÁRIOS DE APLICAÇÃO VI. TEMPO DE DURAÇÃO VII. REPESCAGEM VIII. INSTRUMENTOS DA APLICAÇÃO IX. A CAIXA DA ESCOLA X. RETORNO DA CAIXA DA ESCOLA XI. LOGÍSTICA DE ENTREGA E RECOLHIMENTO DA CAIXA DA ESCOLA XII. PARTICIPANTES E ATRIBUIÇÕES XIII. PROCEDIMENTOS GERAIS DE ORDEM TÉCNICA XIV. PROCEDIMENTOS INDISPENSÁVEIS XV. A APLICAÇÃO 2

3 APRESENTAÇÃO Prezados Colaboradores, A Avaliação Educacional ALFABETIZA RIO, idealizada e promovida pelo Município do Rio de Janeiro, sob a responsabilidade da Secretaria Municipal de Educação (SME), tem como objetivo avaliar o desempenho dos alunos do 1º ano do Ensino Fundamental, no ano de 2014, nas áreas de Alfabetização/Leitura, Escrita e Matemática, visando produzir um diagnóstico que auxilie na ampliação da qualidade da educação. Para isso, tem-se a elaboração das provas com itens calibrados em escalas especialmente criadas para avaliação de alfabetização, produzidas a partir da TRI - Teoria da Resposta ao Item. As avaliações ocorrerão em três dias consecutivos, sendo o primeiro dia para avaliação de Matemática; o segundo dia para avaliação de Alfabetização/Leitura e o terceiro dia para avaliação da Escrita dos alunos do 1º ano do Ensino Fundamental das escolas da Rede Pública Municipal de Ensino do Rio de Janeiro. A Avaliação Educacional ALFABETIZA RIO tem como pressuposto fornecer dados e informações sobre o desempenho dos alunos em relação ao desenvolvimento de competências e habilidades cognitivas necessárias à sua inserção e participação na vida social, cultural e econômica do país. Seus resultados permitem estabelecer áreas de atuação prioritárias por parte da SME, de modo a atingir os objetivos traçados pela política educacional em vigor. A aplicação da Avaliação Educacional ALFABETIZA RIO requer que seus participantes conheçam os objetivos e a sistemática dessa avaliação, além das funções a eles atribuídas. Este Manual contém informações relevantes para todos os participantes envolvidos neste processo, referentes à organização, logística e aplicação dos instrumentos. O êxito dessa avaliação está estritamente vinculado à qualidade e fidedignidade dos dados obtidos a partir da aplicação dos instrumentos. Depende, portanto, dos esforços e da qualidade dos trabalhos realizados pelos agentes envolvidos na aplicação, antes, durante e após o processo. Por isso, a leitura atenta deste Manual e a execução dos procedimentos tal como descritos, visando à padronização na obtenção das informações é essencial. Contamos com o empenho e a colaboração de todos. Secretaria Municipal de Educação do Rio de Janeiro Subsecretaria de Ensino Coordenadoria de Educação 3

4 I. OBJETIVOS Objetivo Geral: Realizar avaliação do desempenho dos alunos do 1º ano do Ensino Fundamental no ano de 2014, visando produzir resultados sobre o desempenho desses alunos, oferecer subsídios para a formulação, reformulação e monitoramento de políticas públicas e definir estratégias para aperfeiçoar o processo e atingir resultados positivos na alfabetização dos alunos. Objetivos específicos: Avaliar o universo dos alunos do 1º ano em 2014, com testes compostos de itens de Leitura, Escrita e Matemática, calibrados em escalas produzidas a partir da TRI - Teoria da Resposta ao Item. Comparar resultados de desempenho dos alunos em 2014 com resultados dos anos anteriores, apresentados nas mesmas escalas. Identificar as características pessoais dos professores, seus contextos socioeconômicos e culturais, suas formações, experiências e práticas profissionais, por meio de questionários. Promover seminários de discussão dos resultados em II. PÚBLICO ALVO Todos os alunos do 1º ano do Ensino Fundamental de nove anos das escolas da Rede Pública Municipal de Ensino do Rio de Janeiro participarão da Avaliação Educacional ALFABETIZA RIO ANO Qtd Qtd Qtd ESCOLAR Escolas Turmas Alunos 1º ano

5 ABRANGÊNCIA DA EDIÇÃO 2014 Quantitativo de Unidades Educacionais avaliadas na Avaliação Educacional ALFABETIZA RIO 2014 CRE TOTAL DE ESCOLAS TOTAL DE TURMAS TOTAL DE ALUNOS CRE CRE CRE CRE CRE CRE CRE CRE CRE CRE CRE TOTAL III. TREINAMENTOS 1. DOS COORDENADORES E SUPERVISORES Responsável: Equipe Técnica da Consulplan Participantes: Coordenação Geral, auxiliares da Coordenação, Coordenadores de CREs e Supervisores Limite de participantes: 250 Espaço a ser utilizado: auditório com capacidade para 250 pessoas, com cadeiras confortáveis, climatizada e iluminação adequada. As salas serão equipadas com: tela para projeção, projetor de multimídia, computador e internet. Design: Os profissionais serão agrupados por CRE, em três grupos, sendo: 1º dia manhã CREs 1, 2, 3, 6 1º dia tarde CREs 4, 7, 11 2º dia manhã CREs 5, 8, 10, 9 5

6 Objetivos: Apresentar a avaliação Alfabetiza Rio 2014: objetivos, características, instrumentos, etc. Ressaltar a importância da avaliação e da contribuição de cada participante. Ler o Manual do Coordenador, do Supervisor e do Aplicador, quando serão ressaltados, entre outros, os procedimentos inerentes à função especifica de coordenador, supervisor e aplicador, a importância do cumprimento fiel dos procedimentos estabelecidos no respectivo Manual, a fim de garantir a padronização da aplicação, a necessidade de preservação do sigilo acerca de todas as provas e apresentar informação sobre os instrumentos e materiais a serem usados. Realizar sessão interativa para resolver dúvidas. 2. DOS APLICADORES Responsáveis: Coordenador Geral, Coordenadores das CREs, Supervisores Participantes: Aplicadores Local: Escola polo, por CRE Design: Descentralizado, realizado nas 11 CREs Período: 03 a 07 de novembro de 2014 Objetivos: Repassar o treinamento recebido Fazer a leitura integral do MANUAL ALFABETIZA RIO Resolver dúvidas Adotar procedimentos que sejam padrão ATENÇÃO! É obrigatória a participação nos treinamentos de todos os envolvidos na avaliação Alfabetiza Rio. Os participantes devem assinar a ata do treinamento, que deverá ser encaminhada para o Coordenador Geral. 6

7 IV. DATAS DE APLICAÇÃO PREFEITURA DA CIDADE DO RIO DE JANEIRO A aplicação das provas ocorrerá em todo município do Rio de Janeiro, em três dias, nas turmas do 1 ano do Ensino Fundamental, das escolas da rede Municipal, divididas por Coordenadoria Regional de Ensino (CRE), sendo que na primeira semana serão avaliadas as escolas das CREs e na segunda semana as das CREs , a saber: 1ª semana: CREs Data Prova Ano /11/14 Matemática 1º ano do Ensino Fundamental /11/14 Alfabetização/Leitura 1º ano do Ensino Fundamental /11/14 Escrita 1º ano do Ensino Fundamental 2ª semana: CREs Data Prova Ano /11/14 Matemática 1º ano do Ensino Fundamental /11/14 Alfabetização/Leitura 1º ano do Ensino Fundamental /11/14 Escrita 1º ano do Ensino Fundamental 7

8 V. HORÁRIOS DE APLICAÇÃO PREFEITURA DA CIDADE DO RIO DE JANEIRO As aplicações começarão sempre no mesmo horário em todas as escolas, da seguinte forma: MANHÃ INTERMEDIÁRIO TARDE INÍCIO TÉRMINO INÍCIO TÉRMINO INÍCIO TÉRMINO ESCOLAS COM 2 TURNOS 8h 10h h30min 15h30min ESCOLAS COM 3 TURNOS 8h 10h 12h30min 14h30min 15h30min 17h30min ESCOLAS DE TEMPO INTEGRAL 8h 10h VI. TEMPO DE DURAÇÃO As provas de Leitura e Matemática terão até 2 horas para sua realização, e a prova de Escrita poderá ser realizada em até 1 hora. O Aplicador deve aplicar a prova de tal forma que todos os alunos cheguem ao final da prova ao mesmo tempo, para tanto o Aplicador deve aguardar, após cada questão, que todos os alunos terminem e passem para a questão seguinte, NÃO PODENDO NENHUM ALUNO FICAR ABANDONADO DO PROCESSO. ATENÇÃO! NÃO HAVERÁ APLICAÇÃO se o aplicador chegar com mais de 1 hora de atraso, em relação à hora de início, não haverá aplicação naquele dia. Exemplo: se a prova começa às 8h e o aplicador atrasar, este só poderá realizar a aplicação, se iniciá-la até 9h. SE NÃO HOUVER 60% DE ALUNOS PRESENTES - não atingindo esse percentual, a aplicação será suspensa e a turma irá para a segunda oportunidade de aplicação. Nesse caso, NÃO SE DEVE ABRIR O MALOTE DA TURMA - O Aplicador deve conferir a frequência da turma antes de abrir o malote, pois, não havendo o mínimo de 60% de alunos presentes, a aplicação será suspensa. REPESCAGEM - As turmas que não tiverem aplicação no dia marcado poderão participar da segunda aplicação. Nesse caso, NÃO SE DEVE ABRIR O MALOTE DA TURMA. Os malotes das turmas que não tiverem aplicação não podem ser abertos, pois serão utilizados no dia da repescagem. QUÓRUM - Se uma turma não tiver quórum e as demais tiverem, estas fazem a prova normalmente. 8

9 VII. REPESCAGEM A repescagem irá ocorrer uma ÚNICA vez, nos seguintes dias: - para as turmas cuja aplicação ocorrer na primeira semana após a data prevista, até 25 de novembro. - para as turmas cuja aplicação ocorrer na segunda semana após a data prevista, até 25 de novembro. VIII. INSTRUMENTOS DA APLICAÇÃO As Caixas da Escola, contendo material de aplicação, serão identificadas por nome da avaliação, CRE, Escola, endereço da Escola, ano, disciplina, quantidade de volumes, polo e data de aplicação, conforme figura abaixo: São os seguintes os Instrumentos da Aplicação 1. CADERNOS DE PROVA DOS ALUNOS 1.1 Serão 12 os tipos de Cadernos de Prova, variando de cor, por disciplina, da seguinte forma: 1º dia Matemática Caderno azul 2º dia Alfabetização/Leitura Caderno verde 3º dia Escrita Caderno branco ATENÇÃO: Embora sejam 12 Cadernos diferentes, cada turma só receberá um ÚNICO tipo de Caderno. 1.2 Os alunos responderão a 15 questões de Matemática, no primeiro dia, a 15 de Alfabetização/Leitura, no segundo dia e a 5 de Escrita, no terceiro dia. Para o primeiro e segundo dia de aplicação, os alunos terão até duas horas para responderem às questões, e no terceiro dia, 1 hora. 9

10 1.3 Na capa do Caderno de Prova constam os dados individuais de cada aluno, além dos dados específicos da escola e da turma. É necessário, entretanto, que cada aluno escreva seu nome completo no espaço destinado para esse fim. 2. RESERVA TÉCNICA Haverá reserva técnica de dois Cadernos de Prova por turma. 2.1 No caso de inclusão, usar a reserva técnica, mesmo que tenha sobra de caderno de aluno ausente, fazendo a devida anotação no Relatório do Aplicador. 2.2 O aluno incluído deverá ter seus dados preenchidos na capa do caderno de reserva técnica, conforme campos pré-estabelecidos. ATENÇÃO! Não é permitido usar cadernos de prova da reserva técnica de outras turmas, uma vez que cada turma receberá tipos de cadernos de provas diferentes. Não é permitido tirar cópia do caderno de prova sob nenhuma hipótese. 10

11 3. CADERNO DO APLICADOR Os Cadernos de Prova dos alunos serão acompanhados de um Caderno para o Aplicador, contendo as indicações dos procedimentos utilizados para a realização da aplicação das provas, sendo a capa do Caderno de Matemática branca, de Alfabetização/Leitura, azul e de Escrita, amarela. 4. RELATÓRIO DO APLICADOR E LISTA DE PRESENÇA Este relatório deverá ser preenchido pelo Aplicador, por turma e dia de aplicação, com informações específicas sobre a aplicação das provas na turma, incluindo as ocorrências relevantes durante a aplicação. Deverá ser assinado pelo Aplicador e pelo Diretor ou Coordenador Pedagógico, com a utilização do carimbo da escola. No verso deste relatório, está a Lista de Presença constando os dados dos alunos daquela turma para que se possa proceder ao controle de presentes, ausentes e outros. Obs.: No campo destinado à justificativa da situação outros, deve-se informar em que condição se encontra o aluno, ou seja, se foi transferido, se é desistente, se abandonou a escola, se foi incluído etc...

12 PREFEITURA DA CIDADE DO RIO DE JANEIRO 5. QUESTIONÁRIO DO PROFESSOR A ser respondido pelo professor regente de cada turma avaliada. Este questionário contém 42 questões e aborda os seguintes aspectos: dados pessoais e formação profissional, atividades realizadas com os alunos e problemas existentes na escola. O Supervisor solicitará ao professor regente de cada turma que responda ao questionário, no primeiro dia, durante a aplicação. FRENTE QUESTIONÁRIO DO PROFESSOR ATENÇÃO! Caso o professor questionário. VERSO QUESTIONÁRIO DO PROFESSOR lecione em mais de uma turma, basta a resposta a único 12

13 PREFEITURA DA CIDADE DO RIO DE JANEIRO 6. RELATÓRIO DO SUPERVISOR Será preenchido pelo Supervisor por dia de aplicação, com informações específicas sobre a aplicação das provas na escola sob sua supervisão, incluindo as ocorrências relevantes. O Supervisor irá receber este Relatório em um envelope pardo, fora da Caixa da Escola e deverá entregá-lo ao Coordenador da CRE, no momento em que lhe devolver a Caixa da Escola. 7. RELATÓRIO DO COORDENADOR da CRE Será preenchido pelo Coordenador, com informações específicas sobre a aplicação das provas e atuação do Supervisor nas escolas sob sua Coordenação. Deverá controlar a entrega das Caixas das escolas, dos Relatórios dos Supervisores e informar sobre a necessidade ou não de reaplicação. 13

14 8. TERMO DE RETIRADA DA CAIXA DA ESCOLA (02 vias) A ser preenchido pelo Supervisor e assinado por ele e pelo Diretor da Escola no momento em que a Caixa da Escola for levada pelo Supervisor para ser entregue ao Coordenador na respectiva CRE. Uma via irá ficar na escola e a outra será encaminhada no envelope pardo de retorno. IX. A CAIXA DA ESCOLA Os instrumentos da aplicação seguirão numa caixa por dia de aplicação. Assim, a Escola X, independente do número de turmas, receberá 3 caixas (SUPONDO QUE TODAS AS TURMAS CAIBAM EM UMA CAIXA), sendo uma por dia de aplicação. 14

15 DENTRO DAS CAIXAS, seguirão: PREFEITURA DA CIDADE DO RIO DE JANEIRO I. Primeiro dia de aplicação SACO PRETO com: 1. MALOTE PLÁSTICO BRANCO por turma, contendo: 1.1 Cadernos de Prova de Matemática (capa azul) 1.2 Dois Cadernos de Prova extras (reserva técnica) 1.3 Caderno do Aplicador (capa branca) 1.4 Malote plástico branco para RETORNO desses instrumentos. II. Segundo dia de aplicação SACO BRANCO com: 1. MALOTE PLÁSTICO AZUL por turma, contendo: 1.1 Cadernos de Prova de Alfabetização/Leitura (capa verde) 1.2 Dois Cadernos de Prova extras (reserva técnica) 1.3 Caderno do Aplicador (capa azul) 1.4 Malote plástico branco para RETORNO desses instrumentos III. Terceiro dia de aplicação SACO VERMELHO com: 1. MALOTE PLÁSTICO VERDE por turma, contendo: 1.1 Cadernos de Prova de Escrita (capa branca) 1.2 Dois Cadernos de Prova extras (reserva técnica) 1.3 Caderno do Aplicador (capa amarela) 1.4 Malote plástico branco para RETORNO desses instrumentos. FORA DAS CAIXAS, seguirão: 1. ENVELOPES PARDOS, sendo 1 por dia de aplicação, contendo: 1.1 Relatórios dos Aplicadores por sala, com a Lista de Presença da turma no verso, de todas as turmas da escola. 2. ENVELOPE PARDO, contendo: 2.1 Relatórios do Supervisor (1 por dia de aplicação) 2.2 Duas vias do Termo de Retirada da Caixa da Escola 3. ENVELOPE PARDO, contendo: 3.1 Questionário do Professor 15

16 X. RETORNO DA CAIXA DA ESCOLA PREFEITURA DA CIDADE DO RIO DE JANEIRO Os Instrumentos de Aplicação da Escola deverão retornar nas CAIXAS DA ESCOLA, devidamente identificadas e lacradas conforme foram recebidas para a aplicação. CUIDADO, PORTANTO, PARA NÃO DANIFICAR A CAIXA AO ABRI-LA PARA APLICAÇÃO, BEM COMO NÃO RETIRAR A IDENTIFICAÇÃO DA ESCOLA. CASO A IDENTIFICAÇÃO DA ESCOLA SEJA DANIFICADA, IDENTIFICAR A CAIXA MANUALMENTE. Nas Caixas da Escola, para retorno do material, os instrumentos devem ser acondicionados da seguinte forma: I. Primeiro dia de aplicação 1. SACO PRETO contendo: 1.1 MALOTE PLÁSTICO BRANCO DE RETORNO por turma, contendo: Caderno do Aplicador todos os Cadernos dos Alunos, utilizados ou não, na seguinte ordem: - bloco de cadernos usados pelos alunos presentes - bloco de cadernos NÃO usados pelos alunos ausentes - os dois cadernos da reserva técnica, utilizados ou não o Relatório do Aplicador/Lista de Presença e a lista de conferência da turma 2. ENVELOPE PARDO contendo todos os Questionários do Professor, respondidos ou não II. Segundo dia de aplicação 1. SACO BRANCO contendo: 1.1 MALOTE PLÁSTICO BRANCO DE RETORNO por turma, contendo: Caderno do Aplicador todos os Cadernos dos Alunos, utilizados ou não, na seguinte ordem: - bloco de cadernos usados pelos alunos presentes - bloco de cadernos NÃO usados pelos alunos ausentes - os dois cadernos da reserva técnica, utilizados ou não o Relatório do Aplicador/Lista de Presença e a lista de conferência da turma 16

17 III. Terceiro dia de aplicação PREFEITURA DA CIDADE DO RIO DE JANEIRO 1. SACO VERMELHO contendo: 1.1 MALOTE PLÁSTICO BRANCO DE RETORNO por turma, contendo: Caderno do Aplicador todos os Cadernos dos Alunos, UTILIZADOS OU NÃO, na seguinte ordem: - bloco de cadernos usados pelos alunos presentes - bloco de cadernos NÃO usados pelos alunos ausentes - os dois cadernos da reserva técnica, utilizados ou não o Relatório do Aplicador/Lista de Presença e a lista de conferência da turma OBS. : Os SACOS PRETO, BRANCO e VERMELHO, utilizados para retorno do material, devem ser os mesmos que seguiram na Caixa da Escola. PORTANTO, CUIDADO PARA NÃO DANIFICÁ-LOS QUANDO DA ABERTURA PARA APLICAÇÃO. FORA DAS CAIXAS DA ESCOLA deverá retornar o envelope pardo contendo os Relatórios do Supervisor, do primeiro, do segundo e do terceiro dia, e uma via do Termo de Retirada da Caixa da Escola, que será entregue ao Coordenador da CRE. XI. LOGÍSTICA DE RECEBIMENTO E DEVOLUÇÃO DA CAIXA DA ESCOLA Nessa edição da avaliação ALFABETIZA RIO 2014, será adotada a seguinte estratégia quanto à logística de entrega e recebimento das Caixas da Escola: As caixas serão retiradas pelo Supervisor da escola, na data abaixo determinada, e no local indicado pelo Coordenador da CRE. Assim, estarão à disposição do Supervisor as Caixas nos seguintes dias e horários: primeira semana 10 de novembro de 2014, de 8h às 20h segunda semana 14 de novembro de 2014, de 8h às 20h Nesse ato, haverá um Termo de Guarda e Responsabilidade que deverá ser assinado pelo Supervisor e entregue ao técnico responsável da Consulplan. O Supervisor será o responsável pelo transporte das Caixas para a sua respectiva escola. Durante os dias de aplicação, as Caixas ficarão sob a guarda da Direção da Escola. 17

18 Ao final da aplicação na escola, em cada semana, o Supervisor ficará com a guarda das Caixas até o dia em que deverá transportá-las ao local determinado, junto ao Coordenador da CRE, nos seguintes dias e horários: ATENÇÃO! primeira semana 13 e 14 de novembro de 2014, de 8h às 20h segunda semana 18 e 19 de novembro de 2014, de 8h às 20h Caso o Supervisor trabalhe nas duas semanas de aplicação, ao devolver as caixas da escola, no final da aplicação da primeira semana, deverá receber as caixas da escola referentes à segunda semana de aplicação, no mesmo local. XII. PARTICIPANTES E ATRIBUIÇÕES A realização da avaliação ALFABETIZA RIO 2014 pressupõe a conjugação de esforços de diversos grupos de profissionais, que comporão a seguinte equipe de trabalho: 11 Coordenadores, sendo 1 por CRE 600 Supervisores, sendo 1 por Escola Aplicadores Vários fatores concorrem para o sucesso da avaliação ALFABETIZA RIO 2014, no entanto o envolvimento dos profissionais com o projeto e entre si representa fator decisivo para a consecução exitosa dos objetivos. 1. COORDENADORES Critérios de seleção: Haverá um Coordenador responsável por cada CRE. Sua função é coordenar as ações para a efetiva realização da avaliação ALFABETIZA RIO 2014, respondendo pela organização de toda a CRE. Deve, ainda, ter experiência em outras avaliações de larga escala, além de ter o perfil de compromisso com a atividade assumida, liderança, capacidade de resolver problema com presteza, disponibilidade para participar do treinamento, ter domínio de procedimentos práticos de avaliação. Atribuições: 1. Organizar a CRE, formando seu grupo de trabalho. 2. Contatar profissionais que tenham experiência em avaliações para desempenhar a função de Supervisor e alocá-los nas escolas. 3. Participar do treinamento promovido pela Consulplan. 18

19 4. Assinar Termo de Compromisso do Coordenador. PREFEITURA DA CIDADE DO RIO DE JANEIRO 5. Responsabilizar-se pelo treinamento dos Aplicadores de sua equipe. 6. Estar sempre em contato com os Supervisores da CRE em que atua, acompanhando e monitorando o seu trabalho. 7. Estar na CRE nos dias de aplicação, acompanhando os trabalhos, verificando a presença de todos os envolvidos no processo, sanando eventuais incidentes. 8. Verificar se todos os profissionais envolvidos estão no seu devido lugar, na hora marcada, caso contrário, tomar as devidas providências para que isso ocorra. 9. Coordenar e supervisionar a distribuição e aplicação dos instrumentos de avaliação na sua CRE. 10. Responsabilizar-se e zelar pelo bom andamento de todo o processo avaliativo em sua CRE. 11. Responsabilizar-se por receber dos Supervisores as Caixas da Escola, no último dia de aplicação, no ponto de apoio definido junto à Consulplan. 12. Receber dos Supervisores, ao final do último dia de aplicação: Caixas das Escolas devidamente lacradas Relatórios do Supervisor Termos de Retirada da Caixa da Escola 13. Conferir se todas as Caixas das Escolas lhe foram entregues pelos Supervisores, devidamente lacradas, tomando as devidas providências para que tal ocorra e fazendo o controle de sua CRE no Relatório do Coordenador. 14. Entregar as Caixas das Escolas, os Relatórios do Supervisor, o Relatório do Coordenador e os Termos de Retirada da Caixa da Escola ao Técnico da Consulplan. 16. Interagir com a equipe de logística da Consulplan para solucionar situações que eventualmente ocorram. 19

20 2. SUPERVISORES Critérios de seleção: Haverá em cada escola um Supervisor, que pode ser professor ou estudante de licenciatura, desde que não faça parte dos quadros de Magistério da Rede Municipal de Ensino do Rio de Janeiro. Sua função é coordenar e garantir a aplicação em sua escola de atuação, para a efetiva realização da avaliação ALFABETIZA RIO É responsável pelo acompanhamento e fiscalização da aplicação das provas, garantindo o sigilo, a eficiência e a imparcialidade da aplicação. Deve, ainda, ter experiência em outras avaliações de larga escala, além de ter o perfil de compromisso com a atividade assumida, liderança, capacidade de resolver problema com presteza, disponibilidade para participar do treinamento, ter domínio de procedimentos práticos de avaliação. Atribuições: 1. Organizar as Escolas sob sua supervisão. 2. Alocar os Aplicadores nas turmas, sendo possível um mesmo Aplicador atuar em mais de uma turma na Escola, desde que seja em turnos diferentes. 3. Participar do treinamento promovido pela Consulplan. 4. Assinar Termo de Compromisso do Supervisor. 5. Estar sempre em contato com o grupo de Aplicadores de sua escola, orientando-os quando necessário. 6. Identificar-se e apresentar-se ao Diretor da Escola em que irá atuar, levando a Carta de Apresentação e seu documento de identidade. 7. Responsabilizar-se por buscar as Caixas da Escola, com os instrumentos da aplicação, no ponto de apoio determinado pelo Coordenador Regional. 8. Responsabilizar-se por conferir se todas as Caixas da Escola lhe foram entregues, devidamente lacradas e solicitar ao Diretor da Escola ou Responsável, que as mantenha sob a sua guarda e responsabilidade até o último dia da aplicação. 9. Garantir o sigilo e a integridade dos instrumentos da aplicação, responsabilizando-se pela sua entrega na Escola, no dia da primeira avaliação, ao Diretor da Escola ou Responsável. 10. Solicitar ao Diretor, assim que chegar à escola, as listas de conferência das turmas, atualizadas, para comparação com a lista de presença de cada turma, encaminhada pela Consulplan, dentro do envelope pardo, a fim de resolver qualquer divergência entre as listas, antes de iniciar a aplicação. 11. Confirmar com a Escola se o Aplicador já fez contato com a Direção para se apresentar. Caso isso não tenha ocorrido, tomar as providências necessárias. 12. Garantir a presença de TODOS os Aplicadores nos locais e dias de aplicação. 20

21 13. Estar presente na Escola sob sua coordenação, nos dias de aplicação, uma hora antes de iniciar a aplicação, para acompanhar os trabalhos. 14. Verificar se todos os profissionais envolvidos estão no seu devido lugar, na hora marcada, caso contrário, tomar as devidas providências para que isso ocorra. 15. Abrir a Caixa da Escola diante da Direção, conferir se estão todos os instrumentos e retirar de lá somente os instrumentos do dia da Aplicação, tendo cuidado ao abrir a Caixa, visto que a mesma será utilizada para o retorno dos instrumentos. 16. Distribuir, no dia da avaliação, os malotes plásticos das turmas, por turma, aos respectivos Aplicadores. 17. Orientar os Aplicadores sempre que necessário. 18. Entregar ao Professor regente da turma que está sendo avaliada o Questionário do Professor, no primeiro dia de aplicação, ressaltando a importância do questionário ser respondido. 19. Recolher o Questionário do Professor e colocá-lo dentro do envelope pardo utilizado para envio e em seguida acondicioná-lo na Caixa da Escola. 20. Receber dos Aplicadores e acondicionar, ao final de cada aplicação, todo o material a ser devolvido, na(s) mesma(s) caixa(s) em que foram entregues, lacrando-as na presença de integrantes da Direção da escola, e entregando-os à guarda do Diretor da Escola. 21. Ordenar e organizar o material da escola, de acordo com as instruções contidas neste Manual. 22. Receber dos Aplicadores, ao final de cada dia de aplicação os malotes plásticos devidamente lacrados. 23. Ao final do primeiro dia de aplicação, lacrar todos os malotes das turmas em que ocorreram aplicação dentro do SACO PRETO, diante do Diretor ou Representante da Escola e entregar para sua guarda. 24. Ao final do segundo dia de aplicação, lacrar todos os malotes das turmas em que ocorreram aplicação dentro do SACO BRANCO, diante do Diretor ou Representante da Escola e entregar para sua guarda. 25. Ao final do terceiro dia de aplicação, lacrar todos os malotes das turmas em que ocorreram aplicação dentro do SACO VERMELHO, diante do Diretor ou Representante da Escola e entregar para sua guarda. 26. Responsabilizar-se por organizar o recebimento e a posterior devolução das Caixas da Escola à Coordenação Regional, ao final do último dia de aplicação, no ponto de apoio, definido pelo Coordenador Regional. 27. Ao final do último dia de aplicação, preencher o Termo de Retirada da Caixa da Escola. 28. Levar FORA da Caixa da Escola o Termo de Retirada da Caixa da Escola e o Relatório do Supervisor para serem entregues ao Coordenador de sua CRE. 29. Interagir com o seu Coordenador para solucionar situações que eventualmente ocorram. 21

22 30. Responsabilizar-se pelo treinamento dos Aplicadores, juntamente com o Coordenador da CRE, encaminhando a ATA do treinamento ao Coordenador Geral. 31. Adotar procedimentos que sejam padrão. 3. APLICADORES Critérios de seleção: Os Aplicadores são responsáveis pelo sucesso das aplicações da avaliação ALFABETIZA RIO Cada turma terá um único Aplicador, que, no entanto, poderá realizar aplicação em outras turmas, desde que em turnos diferentes e dias diferentes, durante as duas semanas de aplicação. Para essa função, é necessário que ele NÃO seja funcionário/professor atuante nas escolas da Rede Municipal. Esses professores deverão ter experiência em aplicações de avaliações educacionais e serem comprometidos com a função assumida, além de garantir o sigilo da prova e assegurar que os alunos respondam às questões da prova sem interferências. Atribuições: 1. Demonstrar respeito no trato com a equipe escolar. 2. Ter bastante calma, paciência no trato com os alunos, lembrando que eles têm apenas 6 anos. 3. Ler atentamente o Manual de aplicação da prova 4. Participar do treinamento promovido pela CONSULPLAN. 5. Assinar o Termo de Compromisso do Aplicador da avaliação ALFABETIZA RIO Manter contato com o Supervisor da Escola em que irá atuar. 7. Localizar a escola e identificar o meio de transporte necessário para chegar até ela. 8. Entrar em contato, antecipadamente, com o Diretor da Escola, para se apresentar. 9. Estar na Escola sob sua responsabilidade uma hora antes da aplicação. 10. Se chegar à escola com mais de 1 hora de atraso em relação à hora de início, não haverá aplicação naquela turma, sendo, automaticamente remanejada para a REPESCAGEM. Exemplo: se a prova começa às 8h e o aplicador atrasar, este só poderá realizar a aplicação, se iniciá-la até 9h. 11. Observar os seguintes horários de Aplicação: 1 Turno (Manhã): Início 8h / Término 10h 2 Turno (Tarde): Início 13h30min / Término 15h30min Integral: Início 8h / Término 10h 22

23 OBS. As escolas com TURNO INTERMEDIÁRIO terão suas aplicações nos seguintes horários: Manhã 8h às 10h Tarde 12h30min às 14h30min Tarde 15h30min às 17h30min ATENÇÃO! No 3º dia, prova Escrita, o tempo de duração da prova será de 1(uma) hora. 12. Serão três dias de aplicação: Primeiro dia: MATEMÁTICA Segundo dia: ALFABETIZAÇÃO/LEITURA. Terceiro dia: ESCRITA ATENÇÃO! Nos dias de aplicação, um professor da escola, que não seja o da turma, deverá ficar presente em sala durante as aplicações. 13. Ao chegar à Escola, dirigir-se à Direção para se apresentar, levando a Carta de Apresentação e seu documento de identidade. 14. Receber do Supervisor o malote da turma devidamente lacrado, juntamente com o Relatório do Aplicador/Lista de Presença e a lista de conferência da turma, entregue pelo Diretor da Escola. 15. Comparar, juntamente com o Supervisor, a Lista de Presença enviada pela Consulplan com a lista de conferência da turma, impressa na escola, a fim de resolver qualquer divergência entre as listas, antes de iniciar a aplicação. 16. Responsabilizar-se por todo o material que lhe for entregue, garantindo que o rompimento do lacre do malote somente seja efetivado no horário estabelecido para a aplicação dos testes, como também responsabilizar-se pelo fechamento do malote com o lacre, após a aplicação. 17. Responsabilizar-se por todo material que lhe foi entregue, garantindo o sigilo das provas, abrindo o malote plástico somente na sala de aula, diante dos alunos. 18. Pedir ao Diretor ou responsável pela escola que o acompanhe à sala de aula da turma que participará da aplicação, para apresentá-lo ao professor e aos alunos. 19. Solicitar que um professor, não sendo o daquela turma, permaneça em sala de aula durante toda a aplicação. 20. Levar para sala de aula o Relatório do Aplicador com a lista de presença dos alunos no verso e o malote plástico colorido, contendo os Cadernos de Prova e o Caderno do Aplicador. 23

24 21. Organizar a sala de aula. PREFEITURA DA CIDADE DO RIO DE JANEIRO 22. Aplicar os instrumentos, obedecendo às normas estabelecidas neste Manual. 23. Ter muita tranquilidade na leitura das questões da prova. 24. Zelar pelo bom andamento de todo o processo avaliativo. 25. Preencher todos os campos do Relatório do Aplicador. Tudo o que estiver fora da normalidade durante a aplicação deverá ser registrado nesse relatório, antes de sua colocação no malote. 26. Ao término da aplicação, lacrar o malote da turma, juntamente com o professor de sala, verificando se todos os instrumentos encontram-se nesse malote, ou seja: TODOS os Cadernos de Prova dos alunos usados ou não o Caderno do Aplicador Relatório do Aplicador/Lista de Presença devidamente preenchido e assinado Lista de conferência da turma 27. Devolver ao Supervisor de Escola o malote da turma de forma organizada, garantindo que nenhuma prova ou instrumento sejam extraviados após a aplicação. XIII. PROCEDIMENTOS GERAIS DE ORDEM TÉCNICA 1. CONFIRMAÇÃO DOS APLICADORES - Na véspera, Coordenador e Supervisor entram em contado com os Aplicadores, confirmando presença. 2. PRESENÇA de um professor da escola na sala de aula durante toda a aplicação das provas, que não seja o professor da turma e da disciplina avaliada. 3. FALTA DE 1 APLICADOR NO DIA - o Supervisor substitui. 4. FALTA DE MAIS DE 1 APLICADOR NO DIA - Coordenador é informado e deve mandar alguém, de sua lista de reserva, substituir. 5. INCLUSÃO DE ALUNO Devem-se incluir o(s) aluno(s) constante(s) na lista de conferência da turma que não esteja(m) na lista de presença constante do verso do Relatório do Aplicador, até dois alunos por turma, adotando o critério de ordem alfabética, preenchendo os dados dos alunos incluídos nas duas linhas finais (em branco) da Lista de Presença, e marcar presente para esses alunos. Preencher a capa do Caderno de Prova com os dados desses alunos, solicitando que eles escrevam seu nome completo no local indicado. 24

25 6. FALTA DE ATÉ 2 CADERNOS DE PROVA Usar a reserva técnica, mesmo que tenha sobra de caderno de aluno ausente. 7. FALTA DE MAIS DE 2 CADERNOS DE PROVA Usar primeiro os Cadernos de Prova da reserva técnica; somente em última hipótese devem-se usar os Cadernos de Prova dos alunos ausentes ou transferidos. Nesse caso, o Aplicador deve solicitar ao aluno incluído que escreva seu nome completo no local indicado do Caderno de Prova e fazer o devido registro no campo 15 do Relatório do Aplicador. Não se pode usar a reserva técnica de outra turma, pois os Cadernos de Prova são diferentes para cada turma. 8. PROIBIÇÃO DE REPRODUÇÃO DO CADERNO DE PROVA - Em hipótese alguma os Cadernos de Prova poderão ser retirados da sala de aula, vistos ou copiados por qualquer pessoa da comunidade escolar, pois as provas são sigilosas, mesmo após a sua aplicação. O professor presente na sala deve ser alertado para não emitir comentários sobre as questões para os alunos. 9. ALUNO AUSENTE EM UM DIA E PRESENTE EM OUTRO - Aluno que faltar ao primeiro dia de aplicação e for no segundo dia deverá fazer a prova somente do segundo dia normalmente. EM NENHUMA HIPÓTESE PODERÁ SER REABERTO O MALOTE DO DIA ANTERIOR PARA RETIRAR O CADERNO DESSE ALUNO. 10. ALUNO TRANSFERIDO DE TURNO O aluno transferido de turno, cujo nome ainda esteja no turno anterior, deverá ser considerado como inclusão. EM NENHUMA HIPÓTESE PODERÁ SER ABERTO O MALOTE DO OUTRO TURNO PARA RETIRAR O CADERNO DESSE ALUNO. 11. ALUNO TRANSFERIDO DE SALA, NO MESMO TURNO Esse aluno fará a prova a ele destinada, para isso ele deverá ser encaminhado para a sala onde se encontra seu Caderno de Prova. 12. TÉRMINO DA PROVA A prova será realizada sob o comando do Aplicador, portanto todos os alunos deverão finalizá-la ao mesmo tempo. 13. GUARDA DA CAIXA DA ESCOLA - Os instrumentos utilizados devem ser mantidos na Caixa da Escola, sob a guarda da Direção da Escola, em lugar seguro e de acesso controlado, até o último dia de aplicação, quando serão transportados pelo Supervisor até o local do recolhimento do material. 25

26 XIV. PROCEDIMENTOS INDISPENSÁVEIS 1. PREPARAÇÃO O Aplicador deve estudar cuidadosamente os procedimentos para aplicação das provas, contidos neste Manual e tirar suas dúvidas. 2. CONHECIMENTO DIDÁTICO A Aplicador deve demonstrar conhecimento didático na aplicação da avaliação, agindo com firmeza e, ao mesmo tempo com cuidado, repetindo a questão quando necessário, aguardando os alunos responderem cada questão, para nenhum aluno ficar para trás ou perdido. 3. LEITURA DA PROVA Deve ser feita com entonação, de forma clara, com tom de voz adequado (nem alto demais, nem baixo demais), sem pressa, para que o aluno entenda o que está sendo lido e não se sinta perdido. 4. DOMÍNIO DA TURMA O Aplicador tem a função de manter a ordem na sala, para que o resultado da avaliação não fique comprometido, sem que para isso traga medo ou insegurança para os alunos. 5. LINGUAGEM UTILIZADA A linguagem padrão é a que deve ser utilizada, para tanto não é admitido o uso de gírias, nem de expressões ou palavras que não estejam adequadas à faixa etária dos alunos. 6. INFORMAÇÃO O Aplicador, durante todo o processo, deve informar, de forma clara, os procedimentos que serão adotados, bem como esclarecer dúvidas dos alunos e anotar no quadro o horário de início e término da prova. IMPORTANTE! O APLICADOR DEVE DEMONSTRAR RESPEITO NO TRATO COM A EQUIPE ESCOLAR E OS ALUNOS, LEMBRANDO QUE DEVEM TER BASTANTE PACIÊNCIA E, NO CASO DO 1º ANO, MUITA TRANQUILIDADE NA LEITURA DAS QUESTÕES. 26

27 XV. A APLICAÇÃO ANTES DA APLICAÇÃO 1. Cumprimentar o professor que estiver na sala e os alunos, e apresentar-se, dizendo seu nome. 2. Verificar se as carteiras estão em fila, caso não seja essa a disposição delas na sala de aula, pedir ajuda ao professor presente na turma para organizar as carteiras em fila. 3. Solicitar aos alunos que deixem sobre a carteira somente o material necessário para a prova (lápis e borracha). 4. Conferir se o malote recebido está devidamente lacrado. 5. Abrir os malotes plásticos somente no horário de aplicação da prova, em sala de aula, na presença dos alunos. 6. Informar aos alunos que eles devem permanecer sentados para receber os Cadernos de Prova e que NÃO poderão se retirar da sala durante a aplicação. Caso o aluno precise ir ao banheiro ou beber água, solicitar que ele levante a mão para que o aplicador recolha seu caderno de prova. AO INICIAR A APLICAÇÃO O Aplicador é o responsável pela condução coletiva da aplicação e deve proceder da seguinte forma: 1. Dirigir-se aos alunos e explicar a importância de sua participação na avaliação. Sugestão de fala: Vocês estão participando, junto com os demais alunos da Rede Municipal, da Avaliação Alfabetiza Rio Os resultados dessa prova vão ajudar a escola, a Secretaria de Educação e o Município do Rio de Janeiro a melhorar a qualidade do ensino. A sua participação é muito importante! 2. Apresentar aos alunos o malote plástico colorido lacrado e dizer: A turma vai fazer um exercício individual. Guarde tudo o que estiver na sua carteira. Deixe só o lápis e a borracha [aguardar até que os alunos se organizem]. Cada um vai fazer o exercício sozinho, do modo como souber. Como cada um vai fazer apenas o que sabe do melhor modo possível, não vale olhar do colega. Se o exercício apresentar alguma atividade que você ainda não sabe fazer, não tem problema, não precisa ficar nervoso. Você pode tentar fazer ou deixar em branco. Levante a mão quando acabar de responder. 3. Informar aos alunos que eles terão até duas horas para responder às questões do caderno de prova. 4. Orientar o aluno a marcar com um X ou a pintar apenas uma resposta. Dizer que eles devem marcar um X apenas em um quadradinho, aquele que tiver a resposta que acharem correta e sem dizer a resposta em voz alta. 27

28 5. Contar o número de cadernos de provas existentes no malote e anotar esse número no Relatório do Aplicador. 6. Contar o número de alunos presentes e anotar no Relatório do Aplicador. 7. Distribuir os Cadernos de Prova, com o verso para cima, observando o nome do aluno que consta na capa do Caderno e dizer: Por favor, esperem eu terminar de entregar a todos, para que vocês possam abrir o Caderno de Prova. 8. Orientar o aluno a escrever seu nome completo na capa do Caderno de Prova. 9. Marcar no Relatório do Aplicador o horário em que o malote plástico foi aberto. DURANTE A APLICAÇÃO 1. O Aplicador deverá ler apenas os enunciados que apresentam desenho do megafone, naturalmente, com calma e pronunciando-se bem as palavras (mas sem artificializar a leitura), de forma clara para o aluno. 2. Se a criança não entender, a instrução pode ser repetida, uma única vez, da mesma maneira. IMPORTANTE! Este símbolo é um megafone. Sempre que ele aparecer significará que a frase que o segue deverá ser lida, em voz alta, por você, para toda a turma de alunos. 3. Não ler as referências bibliográficas, em hipótese alguma. 4. Pedir aos alunos que, após responderem cada questão, aguardem em silêncio até todos os colegas terminarem e que não passem para a página seguinte, antes de receber sua ordem para fazê-lo. Esta orientação também deverá ser dada durante a resolução das demais questões. (Esse procedimento só não se aplica à prova de Escrita, cujo tempo para a resposta ao último item tem maior variabilidade.) 5. Manter a organização dos alunos para a realização da tarefa, na regulação da turma no que se refere à disciplina e à organização dos tempos de resposta a cada item. 6. Circular entre as carteiras e para verificar se os alunos compreenderam que devem marcar o X somente em um quadradinho. 28

29 7. Pedir para que os alunos respondam silenciosamente e que não mostrem sua resposta para os colegas. 8. Pedir aos alunos que aguardem o seu comando para resolver a questão, assim todos terminarão a ATENÇÃO prova ao mesmo tempo. O Aplicador faz as leituras dos enunciados de cada item, restringindo-se, EXCLUSIVAMENTE, à indicação dos megafones. A leitura de alternativas deve ser feita exclusivamente quando houver megafones diante delas. Assim como no caso dos enunciados, a leitura poderá ser repetida uma única vez. Fique atento à leitura de questões que envolvem texto. O texto deve ser lido pelo aluno, sem ajuda do professor, ainda que haja, na turma, alunos não alfabetizados. O mesmo procedimento deve ser utilizado quando se tratar de palavras ou apenas de um conjunto de alternativas. Os alunos têm até duas horas para concluírem a prova. Nas provas de Alfabetização/Leitura e de Matemática, a turma deverá finalizar o processo coletivamente, ou seja, TODOS devem terminar ao mesmo tempo, pois eles só podem passar para a questão seguinte quando essa orientação for dada pelo Aplicador. Na prova de Escrita, a aplicação é coletiva até o item 4. No item 5, a leitura do comando é coletiva, mas a resposta a ele tem certa variabilidade, já que depende do investimento e tempo de cada aluno. Para responder às questões, os alunos utilizarão lápis e borracha. IMPORTANTE O Caderno do Aplicador distingue-se do que é destinado ao aluno, porque contém os comandos a serem lidos, precedidos de megafones que não figuram no Caderno do Aluno, como exemplificado a seguir: 29

30 CADERNO DO APLICADOR - LEITURA PREFEITURA DA CIDADE DO RIO DE JANEIRO Diferentemente do Caderno do Aluno, o Caderno do Aplicador contém, além das alternativas de resposta ao item, indicações onde poderá o Aplicador fazer a leitura. Veja o exemplo: QUESTÃO 05 MARQUE O QUADRINHO QUE MOSTRA A ÚLTIMA PALAVRA DO TEXTO. CASA NÃO TETO NADA ERA UMA CASA MUITO ENGRAÇADA NÃO TINHA TETO, NÃO TINHA NADA Nesse exemplo, SOMENTE o enunciado poderá ser lido pelo Aplicador. CADERNO DO ALUNO - LEITURA Cada questão é apresentada numa folha, sem o enunciado. Veja o exemplo: QUESTÃO 05 ERA UMA CASA MUITO ENGRAÇADA NÃO TINHA TETO, NÃO TINHA NADA CASA NÃO TETO NADA 30

31 CADERNO DO APLICADOR - MATEMÁTICA PREFEITURA DA CIDADE DO RIO DE JANEIRO QUESTÃO 2 OBSERVE OS FILHOTES QUE ANA E CAROL GANHARAM. ELAS VÃO DIVIDI-LOS IGUALMENTE ENTRE AS DUAS. COM QUANTOS FILHOTES FICARÁ CADA UMA? Nesse exemplo, o Aplicador deverá ler o enunciado e o comando da questão UNICAMENTE. 31

32 CADERNO DO ALUNO - MATEMÁTICA PREFEITURA DA CIDADE DO RIO DE JANEIRO QUESTÃO AO FINAL DA APLICAÇÃO 1. Terminada a aplicação, solicitar aos alunos que fechem o caderno de prova e deixem em cima de sua carteira. 2. Recolher todos os Cadernos de Prova, solicitando que os alunos permaneçam sentados até o término do recolhimento. 3. Terminado o recolhimento, agradecer aos alunos pela participação. 32

33 4. Após o recolhimento do Caderno de Prova, o Aplicador deverá adotar o seguinte procedimento: ATENÇÃO! - organizar todos os Cadernos de Prova dos alunos presentes - organizar todos os Cadernos de Prova dos alunos ausentes - organizar os dois cadernos de reserva técnica, utilizados ou não Os cadernos da reserva técnica NÃO UTILIZADOS NÃO entram no quantitativo de alunos presentes ou ausentes. Porém, se forem UTILIZADOS, devem ser contabilizados como INCLUÍDOS no Relatório do Aplicador, campo Anotar o horário do término da prova, no Relatório do Aplicador, e registrar todas as ocorrências que possam ter afetado a aplicação: alunos atrasados, falta de instrumentos e falhas de impressão, entre outras, e assinar o Relatório do Aplicador. 6. Juntar e contar todos os Cadernos de Prova (UTILIZADOS e NÃO UTILIZADOS) e colocá-los dentro do malote plástico de retorno, além do Caderno do Aplicador, do Relatório do Aplicador/Lista de Presença e da lista de conferência da turma. Lacrar o malote e entregar ao Supervisor. 7. Ao término da aplicação, o Supervisor deverá lacrar os malotes plásticos de cada turma em suas respectivas Caixas, não se esquecendo de colocar nas Caixas do primeiro dia de aplicação os Questionários do Professor, respondidos ou não. ATENÇÃO! O Aplicador deverá devolver todos os Cadernos de Prova entregues para a aplicação da avaliação, mesmo os que estiverem rasurados, rasgados ou anulados, e não permitir que os cadernos sejam copiados ou retidos na escola. As provas são sigilosas e não podem ser divulgadas, em hipótese alguma. Desejamos a todos um bom trabalho! A Consulplan agradece sua colaboração. Equipe de Avaliação da Consulplan 33

34 APOIO LOGÍSTICO CRES 01 E 02 - ALESSANDRA MORAES (32) CRES 03 E 06 - CAMILA HELENA (32) CRES 04, 07 E 11- DANNIELY MAGNA (32) CRES 05 E 08 - ERICA AGUIAR (32) CRES 09 E 10 - MARCIA PACHECO (32) DANIELABLANDY (32) TATIANA FERREIRA (32) NORMA SIQUEIRA (32)

35 35

36 36