recebido em 04/2006 - aprovado em 05/2006

QUANTITATIVOS AVALIAO MTODOS QUANTITATIVOS NA AVALIAO DA CAPES: UMA PESQUISA BIBLIOGRFICA

QUANTITATIVE METHODS IN THE CAPES EVALUATION: A BIBLIOGRAPHIC RESEARCH Maria Flvia Barbosa LEITE Graduanda em Administrao pela Faculdade de Economia, Administrao e Contabilidade de Ribeiro Preto FEA/RP- Universidade de So Paulo mariaflavia_leite@yahoo.com.br Adriana Backx Noronha VIANA Professora Livre-Docente em Administrao pela Faculdade de Economia, Administrao e Contabilidade de Ribeiro Preto FEA/RP- Universidade de So Paulo backx@usp.br Glucia Guimares PEREIRA Mestre em Administrao pela Faculdade de Economia, Administrao e Contabilidade de Ribeiro Preto FEA/RP- Instituto de Gesto e Pesquisa glauciagp@uol.com.br

Resumo Este trabalho tem como objetivo identificar os mtodos quantitativos j aplicados avaliao da CAPES. O mtodo baseado em pesquisa bibliogrfica em sistemas de busca, currculos Lattes, revistas nacionais A e sistema Google Scholar.Os artigos encontrados foram agrupados segundo os mtodos quantitativos utilizados e, posteriormente, comparados. A anlise permitiu verificar a importncia de revistas especializadas e encontrar possveis tendncias da utilizao de mtodos quantitativos. Tambm foi identificada uma maior concentrao da utilizao destes mtodos na rea de cincias exatas, revelando uma carncia de outras reas sobre o tema.

Abstract The point of this work is to identify the quantitative methods already applied to the CAPES Evaluation. The method is based on a bibliographic research in a search system, Lattes curriculum, journals and Google Scholar system. The articles found were grouped by the quantitative methods used and, then, compared. The analysis verified the importance of specialized journals and to find possible tendencies for the quantitative methods used. A mayor concentration of the use of these methods was found in the naturals sciences, and this situation indicates a need in the others areas about this theme.

Palavras-chave: Avaliao CAPES PsGraduao Mtodos Quantitativos.

166

Key-words: Evaluation CAPES Postgraduate Programs Quantitative Methods.

v.9 F ACEF PESQUISA - v.9 - n.2 - 2006

Maria Flvia Barbosa LEITE Adriana Backx Noronha VIANA Glucia Guimares PEREIRA

Introduo A educao superior brasileira compreende diversos tipos de cursos, entre eles os cursos e programas de ps-graduao. Estes so dirigidos a alunos diplomados em cursos de graduao e podem ser divididos em cursos de especializao ou psgraduao latu sensu (conduzem a um certificado) e programas de ps-graduao ou ps-graduao stricto sensu (conduzem a um diploma). A psgraduao stricto sensu compreende os cursos de mestrado (acadmico e profissional) e doutorado (MINISTRIO DA EDUCAO, 2004). Os programas de ps-graduao stricto sensu so objetos de estudo deste trabalho e sero aqui denominados programas de ps-graduao ou simplesmente ps-graduao. A Coordenao de Aperfeioamento de Pessoal de Nvel Superior, CAPES, foi criada em 11 de julho de 1951 para promover a campanha nacional para aperfeioamento de pessoal de nvel superior. Na dcada de 1970, a CAPES foi de fundamental importncia na implantao da ps-graduao no pas. Coube a ela um sistema de avaliao que garantisse a qualidade dos programas de psgraduao existentes no pas. Desde 1977, a CAPES realiza as avaliaes dos programas de psgraduao em todo o pas. Atualmente, os resultados de sua avaliao tm forte influncia em alguns rgos na alocao de recursos pblicos, como o caso do Conselho Nacional de Pesquisa, CNPq, e da Financiadora de Projetos, FINEP (CRDOVA, 1996; SOUZA; PAULA, 2002). A avaliao da CAPES consiste em um sistema complexo, embora estruturado, de julgamentos sobre diversos fatores pertinentes ps-graduao. De forma geral, o sistema engloba fatores no mbito de pesquisa e de ensino. A atribuio do conceito final de um programa baseada em relatrios, visitas s instituies e nmeros referentes ao programa, como nmero de docentes, titulaes, publicaes etc. No incio do ano de 2005, a CAPES reconheceu 1918 programas de ps-graduao, com cursos de mestrado acadmico (1803 cursos), doutorado (1037 cursos) e mestrado
v.9 F ACEF PESQUISA - v.9 - n.2 - 2006

profissionalizante (132 cursos) (CAPES, 2005). So avaliadas as reas de cincias agrrias, biolgicas, da sade, exatas e da terra, humanas, sociais aplicadas, engenharias, lingstica, letras e artes, e outras. A avaliao da CAPES presente em todo mbito acadmico nacional. Sendo a avaliao da CAPES um tema relevante, este trabalho mapeia parte da produo cientfica acerca desta. O objetivo consiste em identificar os mtodos quantitativos j aplicados avaliao da CAPES. Segundo Falco e Rgnier (Apud Gatti, 2004), a anlise de dados quantitativos constitui-se em um trabalho que propicia que a informao que no pode ser diretamente visualizada a partir de uma massa de dados poder s-lo se tais dados sofrerem algum tipo de transformao que permita uma observao de um outro ponto de vista. O trabalho tem como objetivos secundrios levantar as revistas potenciais para publicao a respeito do tema e identificar de quais reas de conhecimento provem os pesquisadores do tema. O presente artigo est estruturado da seguinte forma: dado um panorama geral da avaliao da CAPES. Em seguida, explicitado o mtodo da pesquisa. Os resultados so ento apresentados e discutidos. As consideraes e as concluses encerram o artigo.

1 Referencial terico - Avaliao da CAPES Em sua criao, a CAPES tinha como objetivos assegurar a existncia do pessoal especializado em quantidade e qualidade suficientes para atender s necessidades dos empreendimentos pblicos e privados que visam o desenvolvimento social e econmico do pas e oferecer aos indivduos mais capazes, sem recursos prprios, acesso a todas as oportunidades de aperfeioamento (CRDOVA, 1996). Em 1965, com o Parecer 977 do Conselho Federal de Educao, d-se a implantao formal dos cursos de ps-graduao no Brasil (SANTOS, 2003).

167

MTODOS QUANTITATIVOS NA AVALIAO DA CAPES: UMA PESQUISA BIBLIOGRFICA

Ao cumprir suas funes, a CAPES firmou-se como o principal rgo de fomento de bolsas de psgraduao. Para a distribuio de bolsas, a avaliao dos alunos se fazia necessria.Assim, a CAPES tornouse responsvel pela avaliao da ps-graduao, sendo a avaliao focada nos ps-graduandos. Na dcada de 1970, houve um aumento vertiginoso no nmero de bolsas concedidas, passando de 1043, em 1971, para cerca de 8000 em 1981 (CASTRO; SOARES, 1983). O aumento do nmero de bolsas tornou os mecanismos de concesso inviveis. A CAPES enfrentava dificuldades para avaliar os alunos de psgraduao. A soluo encontrada foi delegar a responsabilidade de avaliao dos alunos s instituies dos programas de ps-graduao. Assim, a questo de selecionar candidatos foi resolvida de forma descentralizada. Mas criou, ipso facto, uma necessidade de selecionar programas e, para cada um deles, o nmero de bolsas que seriam distribudas. A origem da avaliao da CAPES responde necessidade de alocar mais bolsas aos melhores programas - avaliar cursos e no candidatos (CASTRO; SOARES, 1983, p. 64). Desde 1977, a CAPES realiza a avaliao dos programas de ps-graduao stricto sensu no pas. Atualmente, a coleta de dados da ps-graduao anual. A coleta feita pela Internet em um software denominado DataCAPES (CAPES, 2004b). As instituies de ensino so responsveis pelo preenchimento dos dados e o software possui integrao com a Plataforma Lattes para preenchimento de dados dos docentes. A cada trs anos, realizada uma nova avaliao, ponderando-se os resultados e os meios para atingilos. Em 2004, foi feita a avaliao dos cursos no trinio 2001-2003. Alm dos dados coletados, h visitas de comisses avaliadoras em algumas instituies, visando ao aperfeioamento da avaliao. Os conceitos atribudos pela CAPES podem variar de um a sete. Os programas com conceitos um e dois no so reconhecidos pelo MEC. Os programas com conceitos seis e sete so ditos programas de excelncia.
168

2 Procedimentos metodolgicos O objetivo do artigo foi atingido por meio de uma pesquisa bibliogrfica. A busca por artigos de peridico foi estruturada visando cobrir parte da produo cientfica acerca do tema.A busca foi realizada em bases de dados, revistas, por pesquisadores e em sistemas de busca na Internet. Foram consideradas publicaes no perodo de 1977 a 2005. As buscas por artigos de peridicos foram feitas digitando-se a palavra CAPES. Os artigos de peridico sem enfoque quantitativo foram descartados. Uma limitao da pesquisa a busca feita somente em artigos de peridico. Nesta pesquisa, no foram considerados trabalhos publicados em anais de congressos. Apesar da busca no ser exaustiva, a pesquisa bibliogrfica foi realizada com foco em revistas nacionais e internacionais de qualidade. As bases de dados utilizadas foram Scielo (Scientific Electronic Library Online biblioteca eletrnica brasileira), Web of Science (Institute for Scientific Information contm peridicos internacionais importantes) e ERIC (Education Resources Information Center base de dados internacional especfica em Educao). Referncias de artigos foram procuradas nos currculos do Sistema Lattes (CNPq, 2005). Os currculos analisados foram de pesquisadores que produziram teses ou dissertaes acerca do tema. Para identificar estes pesquisadores (alunos ou orientadores), foi realizada uma busca no Banco de Teses e Dissertaes da CAPES (CAPES, 2005). Em ordem direta, as buscas em Teses e Dissertaes indicaram nomes de orientadores e alunos; esses nomes foram procurados no Currculo Lattes e o termo CAPES foi pesquisado em todo o currculo. O sistema de busca Google Scholar (GOOGLE SCHOLAR, 2005) foi tambm utilizado na busca de artigos. O Google Scholar uma ferramenta do sistema Google que efetiva buscas em sites acadmico-cientficos. Ainda est em fase de implantao, mas j apresenta resultados passveis de consulta. Nesta etapa da pesquisa, apenas a palavra CAPES gera milhares de resultados. O mesmo acontece adicionando-se a palavra avaliao busca. A busca foi ento feita pelo termo avaliao da
v.9 F ACEF PESQUISA - v.9 - n.2 - 2006

Maria Flvia Barbosa LEITE Adriana Backx Noronha VIANA Glucia Guimares PEREIRA

CAPES. Restringiu-se o resultado a artigos em formato .pdf (portable document format) (ADOBE, 2003). A escolha foi feita com o objetivo de restringir o nmero de resultados e preservar a qualidade dos textos, pois o formato de arquivo pdf difundido no meio acadmico para documentos cientficos. Inicialmente, a busca em revistas deveria cobrir todas as publicaes nacionais de qualidade, sendo a qualidade indicada pela QUALIS 2003 (classificao da CAPES para peridicos e encontros cientficos) (CAPES, 2005). No entanto, devido ao grande nmero de revistas e carncia de bases indexadas, optou-se por primeiramente realizar os procedimentos anteriormente descritos (base de dados, pesquisadores e google scholar) e investigar as revistas InfoCAPES (j extinta) e Revista Brasileria de Ps-graduao (RBPG, apenas um nmero publicado), ambas revistas da prpria CAPES destinadas a discusses sobre ps-graduao. Aps encontrados alguns artigos, fez-se uma anlise das Figura 1 Estrutura da pesquisa bibliogrfica

reas de conhecimento cujos autores provinham. Com o resultado, chegou-se concluso de que os peridicos das reas de Engenharia de Produo e Educao deveriam ser investigados. Alm dos peridicos presentes na base Scielo em maro de 2005, os seguintes foram pesquisados: Revista Produo, Avaliao, BIB Revista Brasileira de Informao Bibliogrfica em Cincias Sociais, Cadernos de Educao, Cincia & Educao, Educao (PUC/ RS), Ensaio Avaliao e Polticas Pblicas em Educao, Perspectiva (UFSC) e Polticas Pblicas. Todos estes peridicos so classificados como NacionalA pela QUALIS 2003. Julgou-se relevante investigar tambm as revistas NacionaisA da rea de Administrao, englobando revistas deAdministrao Pblica, rea de conhecimento pertinente ao tema e de atuao das autoras. Na Figura1, est esquematizada a pesquisa bibliogrfica descrita anteriormente.

PESQUISA BIBLIOGRFICA
Revistas

QUALIS 2003

Nacionais A InfoCAPES, RBPG

Base de Dados
Scielo Web of Science ERIC artigos com enfoque quantitativo

Teses e Dissertaes

Pesquisadores
Currculo Lattes

Base de Dados
Google Scholar

Fonte: elaborao prpria

3 Resultados e anlise Apenas doze artigos dentro das especificaes descritas foram encontrados na pesquisa realizada. Bases de dados: foram encontrados trs artigos. Na base Web of Science, foram encontrados dois artigos, os quais tambm estavam presentes na base Scielo. Nenhum artigo foi encontrado na base de dados ERIC. Apesar da avaliao da psv.9 F ACEF PESQUISA - v.9 - n.2 - 2006

graduao ser um tema de interesse internacional, e a avaliao da CAPES poder servir de exemplo para outros pases. No entanto, os aspectos quantitativos do modelo de avaliao so, por enquanto, divulgados apenas no mbito nacional. Pesquisadores: foram encontradas trs teses e dissertaes com enfoque quantitativo. Os seis currculos (de alunos e orientadores) pesquisados revelaram a existncia de um artigo em peridico relativo ao tema.
169

MTODOS QUANTITATIVOS NA AVALIAO DA CAPES: UMA PESQUISA BIBLIOGRFICA

Sistema de Busca: a busca pela expresso avaliao da CAPES em arquivos formato pdf gerou quarenta e dois resultados, sendo apenas um de interesse para o desenvolvimento deste trabalho. Revistas: Foram encontrados sete artigos nas revistas pesquisadas, sendo cinco deles nas revistas

InfoCAPES e RBPG. O fato revela a importncia das publicaes da prpria CAPES para a discusso sobre tema. Na seqncia, o Quadro 1 apresenta o nmero de artigos encontrados por cada procedimento de busca.

Quadro 1 Nmeros de artigos obtidos por procedimento de busca

Procedimento Scielo/Web of Science Currculo Lattes Google Scholar InfoCAPES RBPG Revistas Nacionais A Nmero de artigos 3 1 1 4 1 2

O artigo mais antigo encontrado data de 1983. Vale lembrar que a avaliao da CAPES teve incio em 1977. Surpreendentemente, no foi encontrado nenhum artigo do perodo 19841994. O fato potencial para estudos futuros e algumas questes podem ser levantadas: como era o formato da avaliao na poca? Parte da avaliao era quantitativa? Qual o peso dado aos

nmeros? Existia peridico especfico sobre o tema? Se no com enfoque quantitativo, o que era discutido a respeito da avaliao? Qual era a freqncia da avaliao? As respostas para estas perguntas poderiam nortear a gerao de conhecimento. O Grfico 1 apresenta o histrico de publicaes encontradas ao longo das ltimas dcadas.

Grfico 1 - Nmero de artigos publicados ao longo do tempo

O Quadro 2 o principal resultado deste trabalho. Esto relacionados ttulo do artigo, ano de
170

publicao, rea de conhecimento dos autores, revista e os mtodos quantitativos utilizados.

v.9 F ACEF PESQUISA - v.9 - n.2 - 2006

Maria Flvia Barbosa LEITE Adriana Backx Noronha VIANA Glucia Guimares PEREIRA

Quadro 2 Artigos e mtodos quantitativos aplicados

Ttulo Ano rea de conhecimento dos autores Sociologia e Educao*membros da CAPES Educao* membro da CAPES Revista Revista de Administrao de Empresas InfoCAPES Mtodos Quantitativos Inferncia Estatstica (Regresso Mltipla)

Avaliando as avaliaes da CAPES Aumentaram os cursos A e B: consolidao da ps-graduao ou afrouxamento da avaliao? O futuro da avaliao da CAPES A avaliao da ps-graduao na Amrica Latina - necessidade e tendncias Avaliao dos cursos de ps-graduao: estmulo ou coero? Avaliao dos programas de psgraduao em Qumica no Brasil Avaliao da ps-graduao da CAPES: homogenia ou heterogenia

1983

1995

Estatstica Descritiva

1998 1999

Educao Cincia da Informao Qumica Medicina Engenharia de Produo

InfoCAPES InfoCAPES

Estatstica Descritiva Inferncia Estatstica (Teste de Hiptese e Anlise de Varincia) Estatstica Descritiva Estatstica Descritiva Mtodos multicritrio (Anlise Envoltria de Dados - DEA) Estatstica Descritiva

1999 2001

Qumica Nova InfoCAPES Avaliao

Um estudo da eficincia dos programas de 2001 ps-graduao em Engenharia no Brasil Avaliao dos programas de psgraduao em Qumica no Brasil: verso 2002 Uma anlise da qualidade e da produtividade de programas de psgraduao em engenharia Avaliao de ps-graduao com mtodo ELECTRE TRI: o caso de Engenharias III da CAPES Avaliao de desempenho na psgraduao utilizando a Anlise Envoltria de Dados: o caso da Engenharia de Produo Viso multicritrio da avaliao de programas de ps-graduao pela CAPES: o caso da rea de Engenharia III baseados nos mtodos ELECTRE II e MAUT 2003

Qumica Engenharia de Produo Engenharia de Produo

Qumica Nova

2003

Ensaio Avaliao Mtodos multicritrio e Polticas Pblicas (Anlise Envoltria de Dados - DEA) em Educao Revista Produo Mtodo multicritrio ELECTRE TRI Mtodos multicritrio (Anlise Envoltria de Dados - DEA)

2003

2004

Engenharia de Produo

Revista Brasileira de Ps-graduao

2004

Engenharia de Produo

Gesto & Produo

Mtodos multicritrio ELECTRE II e MAUT

A Estatstica Descritiva compreende tcnicas de organizao e resumo dos dados. Utiliza-se de grficos, tabelas e medidas de tendncia central e disperso para a anlise dos dados (STEVENSON, 2001). H cinco artigos que empregam a Estatstica Descritiva. Dois destes trabalhos exploram os programas de ps-graduao em Qumica. Em Gama, Nome e Machado (1999) estudado o

histrico dos indicadores de qualidade. A psgraduao em Qumica retratada por meio de tabelas de freqncia, razes entre indicadores em relao aos conceitos atribudos pela CAPES e grficos da distribuio dos cursos no perodo de 96/97 e anteriores. Em Gama, Cadore e Ferreira (2003), os dados da avaliao de 1998-2001 foram analisados juntamente com os dados de Gama,

v.9 F ACEF PESQUISA - v.9 - n.2 - 2006

171

MTODOS QUANTITATIVOS NA AVALIAO DA CAPES: UMA PESQUISA BIBLIOGRFICA

Nome e Machado (1999). Alm das anlises j citadas, a distribuio geogrfica dos programas foi analisada por meio de grficos. Marchini, Leite e Velasco (2001) utilizam a Estatstica Descritiva para analisar a homogeneidade dos programas de ps-graduao da rea de Cincias Biolgicas no que se refere distribuio das notas atribudas pela CAPES no trinio 19982000. O artigo tambm faz referncia ao fator de impacto do Journal of Citation Report em 1998. Aragon (1998) comparou os sistemas de psgraduao de Brasil, Argentina e Mxico, confrontando os nmeros de cursos de mestrado e doutorado em relao classificao de qualidade avaliada em cada um dos pases. No Brasil, a classificao da CAPES de 1996 foi utilizada como referncia. H tambm a distribuio comparativa por reas de conhecimento. A Estatstica Descritiva totalmente baseada em tabelas comparativas, no sendo utilizados mtodos grficos. Spagnolo (1995) analisa o aumento do nmero de programas classificados como A e B pela CAPES, utilizando-se de uma distribuio percentual no perodo de 1980 a 1994. H tambm uma comparao evolutiva em relao s reas de conhecimento. Discute-se se o aumento do nmero de programas A e B representa uma melhoria da qualidade dos programas de ps-graduao ou um abrandamento do sistema de avaliao. Assim como em Aragon (1998), a Estatstica Descritiva totalmente baseada em tabelas comparativas, no sendo utilizados mtodos grficos para evidenciar as anlises. A Inferncia Estatstica compreende um conjunto de ferramentas para projetar em uma populao concluses obtidas por uma anlise amostral. Adicionalmente, este campo da Estatstica tambm pode ser utilizado na construo de modelos matemticos. A Inferncia Estatstica foi utilizada em dois dos artigos encontrados. Targino (1999) utiliza Teste de Hiptese para verificar se a avaliao atribuda pela CAPES possui relao com o grau de produo de artigos de peridicos cientficos pelo pesquisador. A Anlise de Varincia tambm utilizada como forma complementar da anlise.
172

No trabalho de Castro e Soares (1983), aplicada a Regresso Mltipla para se determinar a influncia de variveis quantitativas nos conceitos atribudos pela CAPES aos programas de ps-graduao entre 1977 e 1981. O objetivo do trabalho citado foi tentar simular ou reproduzir o comportamento dos consultores durante os anos. Neste caso, a Inferncia Estatstica aplicada sobre a populao dos programas da poca para a construo de um modelo matemtico. Os conceitos de A a E foram convertidos em notas de 5 a 1 como varivel dependente da regresso mltipla. Os Mtodos Multicritrios envolvem ferramentas de auxlio deciso, sendo o objetivo encontrar a funo de maximizao entre inputs e outputs do modelo considerado. Nos cinco artigos encontrados, os mtodos so utilizados com o intuito de compreender a avaliao da CAPES. Diferentemente da tcnica de regresso utilizada por Castro e Soares (1983), os conceitos dos programas no so inclusos nos clculos. Os inputs (nmero de docentes, discentes tempo de titulao etc) e outputs (publicao, nmeros de titulados etc) geram notas aos programas e o resultado ordenado comparado com a avaliao da CAPES. De forma geral, pode-se dizer que os Mtodos Multicritrios criam uma nova classificao dos programas por meio de inputs e outputs. Miranda e Almeida (2003, 2004) utilizam as tcnicas ELECTRE TRI, ELECTRE II e MAUT, respectivamente. Os mtodos da famlia ELECTRE (elimination and choice translating algorithm) so mtodos de sobreclassificao, tambm denominados mtodos de subordinao. O ELECTRE II busca ordenar um conjunto de alternativas da melhor para pior, sendo desenvolvido para resolver problemas de ordenao. O ELECTRE TRI, por sua vez, um mtodo multicritrio de classificao, isto , aloca alternativas em categorias predefinidas. O MAUT um mtodo multicritrio, cuja forma de agregao depende das caractersticas do problema e tambm do decisor. Os mtodos ELECTRE TRI, ELECTRE II e MAUT foram aplicados aos dados coletados pela CAPES, no trinio 1998-2000, para os programas da rea de Engenharia III.
v.9 F ACEF PESQUISA - v.9 - n.2 - 2006

Maria Flvia Barbosa LEITE Adriana Backx Noronha VIANA Glucia Guimares PEREIRA

Os outros trs artigos que utilizaram o mtodo multicritrio aplicaram o DEA (Anlise Envoltria de Dados Data Envelopment Analysis), para posicionar os programas de ps-graduao em relao a uma fronteira de eficincia (SILVA; FERNANDES, 2001). Os artigos, coincidentemente, referem-se rea de Engenharia. Silva e Fernandes (2001) aplicaram o DEA com intuito de avaliar o desempenho dos programas de engenharia em relao aos conceitos atribudos pela CAPES no trinio 1998-2000. Mello et al (2003) utilizaram o DEA na anlise da qualidade e da produtividade dos doze programas de psgraduao em Engenharia do COPPE (Instituto Alberto Luiz Coimbra de Ps-Graduao e Pesquisa de Engenharia) da Universidade Federal do Rio de Janeiro. Lins, Almeida e Bartholo Junior (2004) utilizaram o DEA como forma de apoio quantitativo avaliao de programas de psgraduao em Engenharia de Produo. Neste artigo, utiliza-se os inputs e outputs dos anos de 2001 e 2002, no sendo realizada uma comparao com os conceitos atribudos pela CAPES, pois no h a composio de um trinio. O artigo expe uma viso tridimensional da distncia entre os programas. A comparao entre os artigos permitiu identificar as ferramentas estatsticas utilizadas. Apesar do pequeno nmero de artigos encontrados, h um indcio do aumento da aplicao dos mtodos multicritrios nos ltimos anos. 4 Concluso Este trabalho mapeou a produo cientfica com enfoque quantitativo a respeito da avaliao da CAPES. Foram identificadas as revistas onde foram publicados tais artigos, bem como os mtodos quantitativos utilizados. Nota-se a importncia de uma publicao voltada ps-graduao, pois estudos referentes ao tema encontram-se fragmentados em revistas de diferentes reas, dificultando uma viso conjunta do conhecimento sobre o tema. O nmero encontrado de trabalhos mostra que a utilizao dos mtodos quantitativos pouco difundida. Em relao avaliao da CAPES,
v.9 F ACEF PESQUISA - v.9 - n.2 - 2006

verifica-se uma carncia de estudos quantitativos referentes s reas de conhecimento como um todo, sendo menos preocupante para os programas de engenharia e demais cincias exatas. A afirmao possui como base o nmero de artigos encontrados referentes a tais reas e a afinidade natural dos pesquisadores com os mtodos quantitativos. A comparao entre os mtodos quantitativos utilizados nos artigos encontrados e explanados anteriormente permitiu agrup-los em trs classes: estatstica descritiva, inferncia estatstica e mtodos multicritrios. Nota-se um aumento da utilizao de mtodos multicritrios para melhor compreenso da avaliao da CAPES, apesar destes mtodos no se utilizarem dos conceitos da CAPES diretamente nos clculos envolvidos. Adicionalmente, mostrase relevante um estudo do tema para a rea de Cincias Sociais Aplicadas, mais especificamente a rea de Administtrao.

Referncias ADOBE, Acrobat Reader 6.0, 2003. ARAGON, V.A. A avaliao da ps-graduao na Amrica Latina- necessidade e tendncias InfoCapes, v. 6, n.4, outubro-dezembro, 1998. CAPES, www.capes.gov.br Acesso em maro de 2005. CASTRO, C. M.; SOARES, G. A. D. Avaliando as avaliaes da Capes. Revista de Administrao de Empresas, Rio de Janeiro: v. 23, n. 3, p. 63-73, 1983. CNPq, www.cnpq.br Acesso em maro de 2005. CRDOVA, R. A. A brisa dos anos cinqenta: a origem da CAPES. InfoCapes. Braslia: v. 2, p. 719, abril-junho, 1996. ERIC, www.eric.ed.gov Acesso em maro de 2005. GAMA, A. A.; NOME, F.J.; MACHADO, J.C. Avaliao dos programas de ps-graduao em qumica no Brasil. Qumica Nova. So Paulo: v. 22, n. 3, p. 443-447, 1999.
173

MTODOS QUANTITATIVOS NA AVALIAO DA CAPES: UMA PESQUISA BIBLIOGRFICA

GAMA, A. A.; CADONE, S.; FERREIRA, V. F. Avaliao dos programas de ps-graduao em qumica no Brasil: verso 2002. Qumica Nova. So Paulo: v. 26, n. 4, p. 618-624, 2003. GATTI, B. A. Estudos quantitativos em educao. Educao e Pesquisa. So Paulo: v. 30, n. 1, p. 11-30, 2004. GOOGLE SCHOLAR, www.scholar.google.com. Acesso em maro de 2005. INSTITUTE FOR SCIENTIFIC INFORMATION, www.isiknowledge.com. Acesso em maro de 2005. LINS, M.P.E.; ALMEIDA, B.F.; BARTHOLO JUNIOR, R. Avaliao de desempenho na psgraduao utilizando a Anlise Envoltria de Dados: o caso da Engenharia de Produo. Revista Brasileira de Ps-graduao. Braslia: v. 1. n. 1, p. 26-40, 2004. MARCHINI, J.S.;. LEITE, J.P.; VELASCO, I.T. Avaliao da ps-graduao da CAPES: homogenia ou heterogenia. InfoCapes. v. 9, n. 4, outubro-dezembro, 2001. MELLO, J. C. C. B. S. et al. Uma anlise da qualidade e da produtividade de programas de psgraduao em engenharia. Ensaio Avaliao e Polticas Pblicas em Educao. Rio de Janeiro: v.39, 2003. MINISTRIO DA EDUCAO, www.mec.gov.br. Acesso em maro de 2005. MIRANDA, C. M. G.; ALMEIDA, A. T. Avaliao de ps-graduao com mtodo ELECTRE TRI o caso de engenharias III da CAPES. Revista Produo. So Paulo: v. 13, n. 3, 2003. ______. Viso multicritrio da avaliao de programas de ps-graduao pela CAPES: o caso da rea engenharia III baseado nos mtodos ELECTRE II e MAUT. Gesto e Produo. So Carlos: v. 11, n. 1, p. 51-64, 2004. SANTOS, C. M. Tradies e contradies da psgraduao no Brasil. Educao & Sociedade. Campinas: v. 24, n. 83, agosto, p. 627-641, 2003.

SCIELO, www.scielo.br Acesso em maro de 2005. SILVA, M.M.; FERNANDES, E. Um estudo da eficincia dos programas de ps-graduao em Engenharia no Brasil. Avaliao. Campinas: v. 6, n. 3, p. 53-66, 2001. SOUZA, E. P.; PAULA, M. C. S. QUALIS: a base de classificao dos peridicos cientficos utilizada na avaliao da CAPES. InfoCapes. Braslia: v.10, n.2, janeiro-maro, p. 5-33, 2002. SPAGNOLO, F. Aumentaram os Cursos A e B: consolidao da ps-graduao ou afrouxamento da avaliao? O futuro da Avaliao da CAPES. InfoCapes. Braslia: v. 3, n. 1e 2, p.4-11, 1995. STEVENSON, W.J. Estatstica aplicada administrao. So Paulo: Harbra, 2001. TARGINO, M.G. Avaliao dos cursos de psgraduao: estmulo ou coero? InfoCapes. Braslia: v. 7, n. 1, janeiro-maro, p. 5-26, 1999.

174

v.9 F ACEF PESQUISA - v.9 - n.2 - 2006