Vous êtes sur la page 1sur 10

Um sistema gerenciador de rubricas para apoiar a avaliao em ambientes de aprendizagem

Antonio Soares Lobato1, 3, Silvana R. de Brito2,3, Daniele de N. N. de Souza3, Eloi Luiz Favero1,2,3
1

Programa de Ps-Graduao em Cincia da Computao (PPGCC) Laboratrio de Ensino a Distncia (LabEAD)


2

Programa de Ps-Graduao em Engenharia Eltrica (PPGEE) Universidade Federal do Par (UFPA) Caixa postal 479 - 66075-110 - Belm - Par Brasil
3

{alobato,srossy, favero}@ufpa.br, dannynogueiraa@gmail.com

Abstract. This paper proposes an evaluation methodology, rubric, based on the formative method, which aims to solve the evaluation of student learning done in virtual environments (Moodle, LabSQL), in question, there is a problem regarding the evaluation process, since students are not evaluated during the whole teaching-learning process. It happens because teacher cannot classify the degree of difficulty presented by the questions, which makes the evaluation of student learning difficult. The case study is performed by a managed rubric, and has the following advantages: it provides subsidies for teachers to evaluate students more accurately; it uses criteria to training a grade to the student. The rubric allows us to do a real analysis of the difficulties encountered by the students Resumo. Este artigo prope uma metodologia de avaliao, rubrica, baseada no mtodo formativo, que procura solucionar a avaliao da aprendizagem dos estudantes feita em ambientes virtuais (Moodle, LabSQL), em questo, h uma problemtica quanto ao processo avaliativo, uma vez que os estudantes no so avaliados durante todo o processo de ensino-aprendizagem. Isso se d pelo fato de o professor no conseguir classificar o grau de dificuldade apresentado pelas questes, o que dificulta a avaliao da aprendizagem do estudante. O estudo de caso realizado por um gerenciado de rubrica, e apresenta as seguintes vantagens: (a) fornece subsdios ao professor para avaliar o estudante com maior preciso ;(b) utiliza critrios formativos para dar uma nota ao estudante. A rubrica permite fazer uma anlise mais real das dificuldades encontradas pelos estudantes.

1. Introduo
Segundo Perrenoud (1999), a avaliao da aprendizagem um processo mediador na construo do currculo e se encontra intimamente relacionada gesto da aprendizagem dos estudantes. Para McAlpine (2002), dentre as vrias questes envolvidas com o planejamento de uma estratgia de avaliao, talvez a mais importante seja a compreenso de que a avaliao uma forma de comunicao. Essa comunicao pode possuir diversos propsitos: fornecer um feedback para os estudantes sobre sua aprendizagem, para os professores sobre seus mtodos de ensino, para administradores sobre o uso de recursos e para funcionrios sobre a qualidade do trabalho desempenhado.

Os mtodos de avaliao ocupam, sem dvida, um relevante espao no conjunto das prticas pedaggicas. O ato de avaliar um estudante no se resume mecnica do conceito formal e estatstico, como a atribuio de notas, obrigatrias deciso de avano ou reteno do estudante nas disciplinas. Qualquer avaliao composta por pelo menos trs etapas crticas: elaborao; aplicao; e correo. Uma quarta etapa, no menos importante, porm mais relevante no processo ensino-aprendizagem, a de interpretao da avaliao. Para McAlpine (2002), para planejar uma avaliao necessrio saber quais os objetivos da avaliao. Como exemplo, pode-se destacar a seleo de estudantes ou certificao de aprendizagem, ou a realimentao do processo ensino-aprendizagem. Segundo a autora, conforme os objetivos da avaliao, ela pode ser classificada como somativa, diagnstica e formativa ou ainda comportamental, embora esse ltimo seja citado com bem menos freqncia na literatura. A avaliao somativa tem sido criticada na literatura por colocar o objeto do conhecimento acima do indivduo. Para McAlpine (2002), a avaliao somativa til para fins externos ao processo educativo, como por exemplo, para instituies que devem selecionar os candidatos para ps-graduao ou empresas. Entranto, a esses tipos de testes no revelam habilidades detalhadas dos estudantes e sim, um desempenho global cujo indicador pode ser utilizado com diferentes finalidades, como o caso da seleo de indivduos. No processo de ensino-aprendizagem, apesar de se fazer uso da avaliao somativa para promoo dos estudantes, a preocupao est centrada nos resultados da avaliao diagnstica e formativa. A avaliao diagnstica permite que estudantes e professores possam formar uma opinio mais detalhada de suas habilidades. A avaliao diagnstica tem por objetivo determinar os conhecimentos prvios necessrios para novas aprendizagens, bem como detectar dificuldades da aprendizagem; j a avaliao formativa busca verificar se os objetivos da aprendizagem esto sendo alcanados pelos estudantes e embasar melhorias no processo de ensino-aprendizagem. Assim, defende-se a necessidade da prtica de uma avaliao, baseada no modelo formativo, no qual o professor avalia continuamente a aprendizagem do educando. Para isso, utiliza-se de didticas que enfatizam tarefas de graus diferenciados de dificuldades: menores, gradativos e seqenciais. Desta forma, o docente verifica a aprendizagem do estudante, em vrios momentos, e de forma complementar, ou seja, valoriza o conhecimento prvio do estudante, contribuindo para que ele se torne um indivduo ativo e crtico. Para apoiar a tarefa de acompanhamento, seja de forma somativa, diagnstica ou formativa, as tecnologias de informao e comunicao (TIC) tm sido investigadas como recurso potencial para apoiar as tarefas de elaborar, aplicar e refletir sobre os resultados da avaliao. Estudantes em escolas e faculdades de nvel superior provavelmente j foram expostos tecnologia da informao como parte de um projeto utiliza avaliao somativa via Web ou que busca reduzir o tempo de feedback sobre progresso individual de cada estudante. Muitas universidades esto utilizando as novas TIC em suas estratgias da avaliao e examinando a literatura, lies podem ser aprendidas para facilitar o uso adequado da TIC nos instrumentos de avaliao. Dentre as possibilidades, a avaliao automtica pode ser baseada em rubricas. Para o contexto deste projeto, a rubrica utilizada como um sistema de classificao que

pode dinamizar o processo avaliativo, pois permite ao professor uma melhor observao quanto ao desenvolvimento cognitivo do estudante, uma vez que avaliado em todas as etapas e no em um nico momento como realiza na avaliao tradicional. Aps a realizao de experimentos de aplicao de rubricas para avaliar cursos de programao (Lobato et al., 2007) (Lobato et al., 2008), este artigo apresenta um sistema gerenciador de rubricas que pode ser incorporado em ambientes de aprendizagem para apoiar as tarefas de planejamento, elaborao e aplicao da avaliao. A idia apoiar o atravs de um ambiente no qual possvel construir uma rubrica se o curso est divido em mdulos ou unidades e os objetivos educacionais esto claramente definidos para cada um dos mdulos propostos. O trabalho est estruturado da seguinte forma: a seo 2 apresenta o experimento realizado com as rubricas, a 3 trata do gerenciador proposto; e, a seo 4 apresenta o uso do sistema de gerncia de rubricas em um estudo de caso e, finalmente, a 5 apresenta as consideraes finais do trabalho. 2. Cenrio de aplicao da rubrica em experimentos prvios
No ambiente educativo presencial h a possibilidade de o professor acompanhar de perto o desenvolvimento cognitivo do estudante, amenizando suas dvidas e possibilitando desafios para o seu desenvolvimento intelectual. Entretanto, isso no acontece na totalidade, pois os professores tm um grande nmero de turmas, de estudantes para atender, em um pequeno espao de tempo, e isso dificulta o processo avaliativo, pois humanamente impossvel, o professor diagnosticar consistentemente as potencialidades e dificuldades dos estudantes. No ambiente escolar presencial, um outro problema enfrentado a correo de questes no objetivas, pois o grande nmero de atividades escritas torna o resultado lento para os estudantes e trabalhoso para os professores. No ambiente virtual LabSQL, tambm, se observam problemas quanto o processo avaliativo, pois este ambiente deveria embasar-se na avaliao formativa e possibilitar a observao da aprendizagem do estudante de maneira continua. Desta forma, o professor teria informaes a respeito das dificuldades e potencialidades dos estudantes, o que possibilitaria ajustes na prtica de ensino e proporcionaria ao estudante reflexes sobre sua prpria aprendizagem. Alm do LabSQL existem outras ferramentas para o ensino de programao. Muitas utilizam uma pseudo-linguagem para descrever algoritmos, com o objetivo de facilitar o entendimento do cdigo por parte dos estudantes. Nesta categoria esto os ambientes AMBAP [Almeida et al. 2004] e VisualPseudo [Almeida et al. 2005]. Outra abordagem que vem sendo pesquisada a animao de algoritmos, como exemplos tm os sistemas BALSA [Brown et al. 1984], TANGO [Stasko 1990], JAWAA [Pierson et al. 1998] e JEliot [Moreno et al. 2004]. H, ainda, o ProPAT [Barros et al. 2005] que, como um plugin para o Eclipse, permite duas perspectivas: a do estudante, que escolhe exerccios de programao e desenvolve solues para estes, e a do professor, que pode especificar novos exerccios aos estudantes. Dentro destas abordagens, enquadram-se ferramentas para o ensino de Structured Query Language (SQL), dentre as quais se destacam SQL-Tutor, AsseSQL e o LabSQL [Lino et al. 2007], o qual foi desenvolvido por um grupo de pesquisa da Universidade Federal do Par (UFPA), o qual servir de base para o sistema de rubrica proposto. Uma das vantagens de utilizar ambientes virtuais para o ensino de programao proporcionar ao estudante tempo suficiente para praticar suas atividades de aprendizagem. Isso supera o dficit deixado pelo tempo limitado das aulas presenciais. Entretanto, no basta

o estudante desenvolver seus trabalhos, preciso, tambm que ele seja acompanhado e suas solues sejam avaliadas para que o estudante saiba em que nvel de conhecimento se encontra na disciplina. Este processo de avaliao continua proporcionada pela rubrica, metodologia baseada na avaliao formativa, desenvolvida para solucionar problemas relativos observados nos outros ambientes virtuais, mais precisamente, no LabSQL, onde ser realizado do estudo de caso.

3. Rubrica
Rubrica um sistema de classificao pelo qual o professor determina a que nvel de proficincia um estudante capaz de desempenhar uma tarefa ou apresentar/evidenciar conhecimento de um contedo/conceito (Airasian, 1991), (Popham, 1995), (Stiggins, 1994 apud MEC2 2001). Para (Ludke, 2003), as rubricas partem de critrios estabelecidos especificamente para cada curso, programa ou tarefa a ser executada pelos alunos e estes so avaliados em relao a esses critrios. Segundo (Porto, 2005), os pontos mais importantes a partir das definies de rubricas, so: a necessidade de serem feitas sob medida para as tarefas ou produtos que se pretende avaliar; a importncia de se descrever nveis de desempenho, de competncias, na realizao de tarefas especficas, ou de um produto especfico, sendo que esses nveis devem ser descritos em detalhe e serem associados a uma escala de valores; os nveis de competncia devem descrever qualquer resultado possvel sobre o desempenho de um aluno; e, finalmente, as rubricas devem determinar expectativas de desempenho. A questo da avaliao em si bem mais abrangente. Elas so o meio de veicular expectativa e de dar notas de forma clara, honesta e rica em informao para o aluno. (Porto, 2005). As rubricas possuem caractersticas que as tornam ferramenta eficientes quanto avaliao do desempenho dos alunos nas diversas tarefas. Dentre essas caractersticas pode-se citar: facilidade, pois aps a elaborao das rubricas, a tarefa de avaliao passa a ser simplificada; objetividade, pois atravs das rubricas possvel avaliar de uma forma objetiva as habilidades demonstradas pelos estudantes; gradativa, pois as rubricas so explicitaes graduais de desempenho que se espera do estudante em relao a uma tarefa individual, em grupo, ou em relao a um curso como um todo; transparncia, pois as rubricas conseguem tornar o processo de avaliao transparente, permitindo, assim, que o estudante tenha uma viso clara dos objetivos esperados em cada etapa do processo e, portanto, tem condies de avaliar os objetivos alcanados com relao aos objetivos esperados. importante ressaltar que o mtodo de avaliao no nasce da rubrica. Contudo, ela dever ser associada ao mtodo de avaliao escolhido. Neste trabalho, a rubrica se baseia na avaliao formativa, que procura avaliar todo o processo de aprendizagem do estudante.

4. Um sistema gerenciador de rubricas para analisar a aprendizagem do aluno


A rubrica est sendo utilizada, em um ambiente interativo, para auxiliar os alunos no aprendizado. Ela pode, tambm, ser utilizada como ferramenta de apoio ao professor, uma vez que pode auxili-lo nas avaliaes das atividades de laboratrio. Atualmente, j foi utilizada em mais de uma dezena de turmas. Tanto na rea do conhecimento da informtica, nos cursos:bacharelado em cincia da computao e sistemas de informao, quanto na rea da Educao, no curso de pedagogia e nas licenciaturas. No gerenciador de rubrica, o professor define avaliaes e questes. Essas questes serviro como atividades propostas aos alunos e, ao mesmo tempo, podero ser aplicadas

como teste, avaliao formal. Desta forma, o estudante estar sendo avaliado continuamente, por meio dos exerccios contnuos e das avaliaes formais. A seleo das questes realizada previamente pelo professor ou, automaticamente, pelo sistema, conforme a sua parametrizao.

4.1. Contexto estudado : O ensino de SQL


No LabSQL, o aluno possui interfaces apropriadas para diferentes tipos de questes. No caso das questes de programao, cada consulta pode ser submetida ao interpretador SQL (Figura 1), que executa e retorna o resultado da consulta, utilizando a base de testes; se a execuo da consulta do aluno retorna o resultado correto, ento o seu cdigo avaliado pelas mtricas, que na essncia medem a distncia da consulta em relao resposta do professor. Pelas mtricas, a resposta do aluno pode superar a resposta do professor (por exemplo, 104%) dando ao mesmo maior motivao. O professor pode, opcionalmente,comentar a resposta de cada aluno. As interaes dos alunos so registradas para acompanhamento indireto via rubrica.

Figura 1. Interface do aluno: Avaliao automtica de uma consulta SQL ( esquerda) e sumrio das submisses ( direita).

4.2. Composies da rubrica


Com base no trabalho de (Furmanski et al 2006), que faz a associao da rubrica com a taxonomia de Bloom1, procurou-se criar uma rubrica para detectar o grau de conhecimento do aluno em relao ao aprendizado, indo do simples conhecimento (Questes sobre conceitos iniciais) at o estgio em que o aluno consegue executar atividades mais complexas(Questes de conhecimentos mais aprofundados). No gerenciador de rubrica, o professor pode estruturar um curso (ou parte do curso) em mdulos, sendo que cada mdulo pode ser composto de diferentes atividades, como por exemplo: questes objetivas, discursivas e diagramticas.. Existem atividades durante todo o curso que podem servir como meio de avaliao indireto: participaes em fruns, mensagens entre alunos e outras interaes no ambiente.

Benjamin Bloom liderou um grupo formado pela American Psychological Association para criar uma "classificao de objetivos de processos educacionais". Assim, Bloom classifica os objetivos no domnio cognitivo em 6 nveis que, usualmente, so apresentados numa seqncia que vai do mais simples (conhecimento) ao mais complexo (avaliao); cada nvel utiliza as capacidades adquiridas nos nveis anteriores. As capacidades e conhecimentos adquiridos atravs de um processo de aprendizagem so descritas por verbos.(Bloom 1974)

A estrutura do curso fundamental para a construo da rubrica. O professor pode montar uma rubrica, por exemplo, para um curso todo (considere um curso de extenso em SQL) ou para cada avaliao do curso (por exemplo, uma rubrica para cada uma das avaliaes bimestrais). No exemplo abaixo foi utilizada a rubrica para cobrir uma parte da avaliao da disciplina de BD, considerando essencialmente as atividades de laboratrio. Foi utilizado o esquema de rubricas (Quadro 1), com pesos diferenciados para cada mdulo.
Quadro 1: Esquema de rubricas dos mdulos do Curso de SQL Atividades Mdulo I Mdulo II Mdulo III Mdulo IV Mdulo V Mdulo VI Campeonato MiniAplicao Mdulo VII Descrio Conceitos de BD (banco de dados) relacionais e MER Criao de BD, consultas com uma Tabela, e operaes de atualizao Consultas com vrias Tabelas Tipos de dados e expresses Group by & Having & Consultas complexas Juntando tudo: Consultas Complexas Campeonatos relacionados a um ou mais mdulos Modelagem Conceitual e Construo de pequenas aplicaes Tpicos especiais: store procedures & triggers Dimenso 1,2,4 1,2,3,4 1,2,3,4 1,2,3,4 1,2,3,4 1,2,3,4 1,2,3,4 1,2,3,4 1,2,3,4 Peso 0.5 1.0 1.0 1.0 1.0 1.0 0.3 0.5 1.0

A partir da rubrica, os mecanismos de avaliao automtica, para o gerenciador de rubrica, sugerem um conceito (Excelente, Bom, Regular, Insuficiente) para cada aluno. O aluno e o professor tm acesso avaliao durante todo o curso. Cada mdulo possui tambm uma sub-rubrica, com pesos estabelecidos para cada critrio definido pelo professor (peso por grupo). A seguir, no Quadro 2, tm-se o exemplo de uma sub-rubrica que utilizada no curso de BD.
Quadro 2: Sub-Rubrica para um mdulo Di m 1 Critrio Informao/leit ura Estratgias 1)Questes objetivas 2)Preencher lacunas 1)Questes subjetivas 2)Mapa conceitual 1)Avaliao pelo retorno 2)Processo de refatorao 1) fruns 2) submisses 3) acessos 4) atividade Peso/ estratgia 0.5% 0.5% Peso/ Critrio/Dimenso 0.1%

Raciocnio conceitual, relacional entre mltiplos conceitos Conhecimento prtico (programao)

0.5% 0.5%

0.2%

0.7% 0.3%

0.6%

Comportamento subjacente s atividades

0.3% 0.3% 0.1% 0.3%

0.1%

Nessa rubrica, so estabelecidos pesos para cada estratgia que compe o mdulo. Uma estratgia est associada a um critrio de avaliao, sendo esse critrio avaliado, ou no, em um mdulo; a relao entre os Quadros 1 e 2 realizada pela coluna dimenso na rubrica do curso; cada estratgia tambm possui um peso, que determina sua participao no critrio avaliado; e cada critrio tambm possui um peso dentro do mdulo avaliado.

4.3. Interface do professor para descrio da rubrica


O professor monta uma rubrica de um determinado curso, por meio do gerenciador , comeando pelo cadastro de dimenses , onde aps o cadastro, as dimenses so visualizadas na figura 2

Figura 2: Tela de dimenses cadastradas

A Figura 3 mostra a tela de relatrio de uma rubrica implementada, na qual o professor pode gerenciar os pesos das dimenses, bem como atribuir pesos para cada mdulo. Uma parte dos mdulos exibidos no Quadro 2 esto exemplificados na Figura 2.

Figura 3: Tela da rubrica .

4.4. Resultados: Relatrio de acompanhamento atravs da rubrica


O professor pode acompanhar o aluno, considerando a rubrica por mdulo (Figura 4) ou por avaliao (a rubrica completa). A visualizao por aluno pode ser resumida ou detalhada. O detalhamento apresenta o resultado da avaliao automtica individual de cada estratgia utilizada (na Figura 4 foram utilizadas questes V/F, discursivas e de programao). O relatrio permite identificar diversos aspectos para acompanhamento das atividades dos alunos (nmero de tentativas, pontuao), contendo links para o detalhamento e encaminhamento do feedback personalizado pelo professor.
11111111111 - Aluno 1

Pergunta Maior Pontuao: N Tentativas:

1-T (Idq.108) 1

2-T (Idq.110) 1

3-R (Idq.116) 7

4-R (Idq.120) 7.76

5-R (Idq.121) 8.25

6-R (Idq.123) 7

7-P (Idq.128) 102.88

8-P (Idq.130) 103.96

9-P (Idq.131) 109.12

10-P (Idq.132) 100

Nota Final

1/1

1/1

1/3

1/3

1/3

1/1

1/25

1/25

1/25

1/25

99999999999 - Aluno 2

Pergunta Maior Pontuao: N Tentativas:

1-T (Idq.106) 1

2-T (Idq.111) 1

3-R (Idq.118) 6

4-R (Idq.120) 7

5-R (Idq.121) 5.94

6-R (Idq.122) 5.29

7-P (Idq.125) 96.23

8-P (Idq.127) 114.65

9-P (Idq.130) 106.69

10-P (Idq.132) 101.87

Nota Final

8.42

1/1

1/1

2/3

2/3

2/3

1/1

1/25

2/25

5/25

6/25

Figura 4. Relatrio de acompanhamento do aprendiz em exerccios de SQL

No nvel da rubrica por avaliao, o professor pode visualizar o desempenho de cada um dos alunos por mdulo e/ou global, de acordo com os mdulos realizados ( Figura 4). O aluno visualiza, apenas. o registro de seu prprio desempenho. Ele tambm pode enviar um feedback para o professor. Como resultado, o professor pode reavaliar as estratgias Utilizadas,com base no feedback dos alunos e outros fatores tais como: tempo mdio que os alunos levam para responder uma questo e grau de dificuldade da questo. A figura 5 baseada na rubrica do Quadro 2.
Acompanhamento do Curso em Janeiro de 2007
Mdulos Nome M1 M2 M3 M4 M5 M6 M7 Campeonatos Mini Aplicacao Nota Final Conceito

Aluno1 Aluno2 Aluno3 Aluno4 Aluno5

7,00 2,75 8,00 6,00 7,50

9,64 6,00 8,20 2,00 4,00

9,50 2,00 9,90 6,00 8,50

8,50 6,50 4,00 9,50 3,00

9,75 6,30 8,50 6,00 9,30

9,00 4,50 7,75 4,00 6,00

8,75 5,00 9,50 2,00 7,50

9,00 5,50 8,43 9,50 8,55

9,50 3,50 8,65 8,81 6,70

9,05 4,80 8,04 5,45 6,57

EXC INS BOM REG REG

Figura 5. Relatrio de freqncia por avaliao.

5. Resultado da Rubrica como apoio avaliao


A rubrica criada no gerenciador deu mais preciso ao processo avaliativo, uma vez que permitiu ao professor o acompanhamento do desempenho dos estudantes, durante todo o processo avaliativo. Assim, o mesmo pde averiguar onde se encontravam as maiores dificuldades dos mesmos, por meio da associao dos exerccios a mdulos e pela insero de nveis de dificuldades nos mesmos. Isso permitiu ao professor dar um resultado mais coerente sobre o nvel em que o estudante se encontrava. A rubrica j foi testada em vrias turmas diferentes, os resultados obtidos at o momento, nas turmas que a utilizaram foram satisfatrios. Para justificar tal afirmao, mostraremos, aqui, resultados obtidos em seis turmas dos cursos de Sistemas de Informao , Cincia da Computao e Pedagogia da UFPA.

Em se tratando do conceito final dos estudantes, as turmas que utilizaram a rubrica obtiveram resultados superiores s turmas que no a utilizaram. Esse aspecto positivo quanto aos resultados se deu por meio do acrscimo de 10 para 22%. No que diz respeito evaso observou-se uma reduo, visto que nas turmas presenciais compostas por 40 estudantes, a media foi de 4 estudantes por turma. J nas turmas que utilizaram a rubrica, que tambm eram compostas por 40 estudantes, houve uma evaso de um estudante por turma. Alm disso, nessas seis turmas observadas, tambm, se percebeu que o desempenho dos estudantes nas turmas com mais componentes menor que o desempenho das turmas que apresentam menos estudantes. Com o uso da rubrica no se observa essa problemtica, pois o desempenho das turmas com maior quantidade de estudantes no se difere das compostas por menos membros.

6. Consideraes Finais
Este artigo apresentou uma rubrica, como metodologia a ser empregada em ambientes virtuais, com o intuito de solucionar problemas observados quanto ao aspecto avaliativo. Ela buscou diagnosticar problemas e desenvolver potencialidades dos estudantes, para isso coletou informaes acerca dos mesmos por meio de exerccios propostos. importante ressaltar que este sistema de avaliao, testado com turmas reais permitiu uma viso mais ampla das dificuldades encontradas pelos alunos durante a aprendizagem, procurou beneficiar os parceiros do processo de ensino-aprendizagem. Desta forma, o estudante teve um gil e eficiente feedback de suas atividades e o professor, por sua vez, teve sua sobrecarga de trabalho reduzida, visto que seu trabalho foi dinamizado por meio desse sistema. Logo, a utilizao da rubrica contribui positivamente para a interao entre docentes e discentes. necessrio a implementao de mtodos avaliativos centrados nos paradigmas da avaliao formativa. preciso uma reforma no processo de avaliao do aprendizado, visto que, no mbito educacional, j no cabem tcnicas metodolgicas e pedaggicas obsoletas. Assim, nos trabalhos futuros, se prope a implementao da rubrica em outros ambientes virtuais, pois ela uma metodologia centrada nos novos paradigmas avaliativos e prioriza, sobretudo, a aprendizagem do estudante.

Referncias
Amam Ambiente de Aprendizagem Multiparadigmtico. Disponvel na Internet em: http://www.labead.ufpa.br/amam. Acesso em: 19 fev. 2008. Airasian, P.W. (1991). Classroom assessment. N.Y.: McGraw-Hill. Almeida, Eliana S., Costa, Evandro de B.; Silva, Klebson dos S.; Paes, Rodrigo de B.; Almeida, Andr Atanasio M.; BRAGA, Julian D. Herrera.(2002) Ambap: um ambiente de apoio ao aprendizado de programao. In: Anais do Workshop Sobre Educao Em Computao, Florianpolis. Almeida, Eliana S.J. D., Filho, L.J.S., Almeida, H.O. A, Costa, E.B., Vieira, B.L., Melo, M.D. (2004) Um Ambiente Integrado para auxlio ao Ensino de Cincia da Computao, Revista Digital da CVA, Vol. 2 n8, Setembro. Barros, L.N., Mota, A.P.S., Delgado, K.V., Matsumoto, P.M. ( 2005) A Tool for Programming Learning with Pedagogical Patterns", eclipse05, San Diego, Estados Unidos. Bloom, B. S. (1974) Taxionomia dos objetivos educacionais. Porto Alegre: Globo.

Brown, M.H., Sedgewick, R. "A system for algorithm animation", Computer Graphics, 18(3):177-186, 1984. Furmanski J., Kane R. Sheryl, Gupta S.,Pruitt A. Lisa. (2006) Work in Progress: ProblemBased Learning and Assessment of Competence in an Engineering Biomaterials Course 36th ASEE/IEEE Frontiers in Education Conference. Lino, A. D. P., Silva, A. S., Santos, T.L.T. Harb, M.P.A.H., Favero, E.L., Brito, S.R. Avaliao automtica de consultas SQL em ambiente virtual de ensino-aprendizagem. Conferencia Ibrica de Sistemas y Tecnologas de la Informacin. CISTI 2007. Lino, A. D. P., Silva, A. S., Santos, T.L.T. Harb, M.P.A.H., Favero, E.L., Brito, S.R. Avaliao automtica de consultas SQL em ambiente virtual de ensino-aprendizagem. Conferencia Ibrica de Sistemas y Tecnologas de la Informacin. CISTI 2007. Lobato, Antnio S.; SILVA, Aleksandra S.; LINO, Adriano D.P.; FAVERO, Eloi L.; ABI HARB, Maria da Penha A.; BRITO, Silvana R. de; GONALVES, Luclia P. (2007) Uma rubrica para avaliao de cursos de programao centrada em avaliao automtica. SBIE - Workshop de Ambientes de apoio Aprendizagem de Algoritmos e Programao. SBIE, WS2, So Paulo. Lobato, Antnio S.; ABI HARB, Maria da Penha A.; LINO, Adriano D. P.; FAVERO, Eloi L.; SILVA, Hieda A. N. (2008) Aplicando Rubrica para Avaliar Qualitativamente o Estudante no LabSQL. Conferencia LatinoAmericana de Informtica - CLEI - Santa F Argentina. Mcalpine, L. e Weston, C. (2002). Reflection related to improving professors teaching and students learning Em Teachers Thinking, Beliefs and Knowledge in Higher Education (59-78). Netherlands: Kluwer Academic Publishers Moodle (2008). Disponvel em: <http://moodle.org/>. Acesso em: 04 fev. 2008 Moreno,A. , N., Sutinen, E. ,Ben-Ari, M.(2004) "Visualizing Programs with Jeliot 3", Proceedings of the Advanced Visual Interfaces. Perrenoud, P., (1999). Formar professores em contextos sociais em mudana: prtica reflexiva e participao crtica. Revista Brasileira de Educao. Anped. set/out/nov/dez. n 12, p. 5-21. Pierson, W.C., Rodger, S.H. (1998) "Web-based Animation of Data Structures Using JAWAA". Popham, W. J. (1995). Classroom assessment: What teachers need to know. Needham Heights, MA: Allyn and Bacon. Porto, S. Rubricas: otimizando a avaliao em educao on-line. Disponvel em http://www.aquifolium.com/rubricas.html. Acesso em: 24 fev. 2008. Stasko, J.T. 1990 TANGO: a framework and system for algorithm animation. IEEE Computer, 23(9): 27-39. Stiggins, R. J. (1994). Student-centered classroom assessment. NY: MacMillan. Teleduc (2008). Disponvel em: <http://teleduc.nied.unicamp.br/teleduc>. Acesso em: 01 fev. 2008