Vous êtes sur la page 1sur 77

LINHAS ORIENTADORAS PARA

AVALIAO
DE ACES DE PREVENO
DA DROGA
MANUAL PARA PLANIFICADORES E AVALIADORES DE
PROGRAMAS

Christoph Krger
Heike Winter
Rose Shaw

IFT Institut fr Therapieforschung


Munique
Alemanha

Verso final
17/04/98 14:46

EMCDDA / OEDT - 1

Prefcio
Nos ltimos anos, registou-se um aumento significativo do nmero de aces de
preveno desenvolvidas em todos os estados-membros da Unio Europeia (UE).
Todavia, a maioria dos projectos no foi eficientemente avaliada, pelo que se torna
necessrio e urgente aprofundar o conhecimento sobre o processo de avaliao da
preveno e proceder a um intercmbio de experincias e resultados.
O Observatrio Europeu da Droga e da Toxicodependncia (OEDT) est actualmente
a promover a utilizao de mtodos cientficos de avaliao no domnio da preveno
da droga, a fim de melhorar a qualidade das intervenes de preveno. Com essa
finalidade, o Munichs Institut fur Therapieforschung (IFT) foi contratado para elaborar
um manual com algumas linhas orientadoras. Estas directrizes (que tem agora em
mos) foram concebidas como um instrumento auxiliar da avaliao de intervenes
de preveno, aplicvel a distintos cenrios e a uma enorme diversidade de
estratgias de interveno. Estas linhas orientadoras permitiro uma maior
comparabilidade dos resultados e facilitaro, por conseguinte, o intercmbio e a
discusso das boas prticas no domnio da preveno da droga, entre os estadosmembros da UE. A utilizao de mtodos cientficos de avaliao ajudar tambm
qualquer planificador de projecto a interpretar os resultados das intervenes de
preveno e a desenvolver linhas de investigao futuras.
Paralelamente elaborao das Linhas Orientadoras, foram levados a cabo, a nvel
europeu, cinco outros projectos focalizados na preveno da droga. Estes seis
projectos, embora centrados em diferentes aspectos da preveno, so, no conjunto,
complementares entre si.
O primeiro projecto, do Grupo de Trabalho 2 COST A6, coordenado por Alfred Uhl
do Instituto Ludwig Boltzmann de Viena. Os seus objectivos encontram-se sintetizados
no prprio ttulo: Avaliao da Preveno Primria no Domnio das Drogas Ilcitas.
Definies - Conceitos - Problemas; a sua principal finalidade foi obter um consenso
entre os especialistas europeus sobre questes tericas relacionadas com conceitos
e metodologia.
O segundo projecto consiste na publicao do Manual de Preveno da Droga
elaborado pelo Centro de Consultoria Jellinek, de Amesterdo, em colaborao com
o Grupo Pompidou. Trata-se de um guia para tcnicos que desenvolvem e
implementam intervenes de preveno da droga. O manual, concebido como uma
fonte de informao abrangente e detalhada, integra listas de verificao com os
aspectos que devem ser tomados em considerao nas fases de planeamento,
implementao e avaliao das aces de preveno.
O OEDT lanou trs outros projectos, que foram planeados e elaborados para levar a
cabo a tarefa de promover mtodos cientficos de avaliao e para melhorar a
qualidade das intervenes de preveno.

EMCDDA / OEDT - 2

Mark Morgan, do Education Research Centre (Centro de Investigao Educativa) de


Dublin, constituiu um Banco de Instrumentos de Avaliao dos Programas de
Preveno, que fornece exemplos concretos, bem como instrumentos prontos a usar,
relevantes para a avaliao dos processos e dos resultados.
O OEDT est actualmente a organizar um banco de dados sobre intervenes de
preveno a nvel europeu B Intercmbio no mbito das Aces de Reduo do
Consumo de Droga (Exchange on Drug Demand Reduction Action (EDDRA) B,
implementado e testado atravs de um estudo de exequibilidade, dirigido por Teresa
Salvador, do CEPS, Madrid.
Por ltimo, foi publicado um volume estreitamente relacionado com as presentes
Linhas Orientadoras: Monografia sobre a Avaliao da Preveno da Droga,
elaborado com base nas comunicaes e debates dos workshops da Primeira
Conferncia sobre a Avaliao da Preveno da Droga, que teve lugar em Maro de
1997, na sede do OEDT, em Lisboa.
Estas Linhas Orientadoras foram desenvolvidas em trs fases. Em primeiro lugar,
procedeu-se anlise das intervenes de preveno em curso a nvel europeu,
tendo-se avaliado o estado actual dos conhecimentos, bem como exemplos de boas
prticas avaliativas. Na segunda fase, as Linhas Orientadoras foram elaboradas com
base nos resultados daquela avaliao e na reviso da literatura existente. A verso
resultante deste trabalho foi discutida num workshop de peritos, realizada no IFT em
Agosto de 1996, tendo dado origem a uma verso revista, que foi apresentada na
conferncia de Maro de 1997 e debatida em trs workshops, realizados em
simultneo, e avaliada atravs de um questionrio.
Para alm disso, esta segunda verso foi testada por um estudo de viabilidade que
incluiu 20 intervenes de preveno realizadas em 13 estados-membros da UE.
Solicitou-se que, em cada um destes projectos, fosse elaborado um relatrio de
avaliao, utilizando as Linhas Orientadoras e que estas fossem classificadas em
termos de qualidade e de facilidade de aplicao. Por ltimo, os participantes no
estudo de viabilidade avaliaram qualitativamente as Linhas Orientadoras durante um
workshop, de dois dias, realizado em Junho de 1997. Cremos, por conseguinte, que a
presente verso constitui um conjunto bem fundamentado de linhas orientadoras para
a avaliao das aces de preveno da droga.
Gostaramos de agradecer aos muitos especialistas que, com o seu tempo e as suas
observaes, contriburam para o xito do desenvolvimento das Linhas Orientadoras:
os participantes na primeira reunio de peritos, realizada em Munique, em 1996, Wim
Buismann (Centro Jellinek, Amesterdo), Mark Morgan (Education Research Centre,
Dublim), Alice Mostriou (Escola de Medicina da Universidade de Atenas), Jorge
Negreiros (Universidade do Porto, Porto), Teresa Salvador (Centro de Estudios sobre
Promocion de la Salud, Madrid), Anne-Marie Sindballe (Sundhedsstyrelsen,
Copenhaga), Zili Sloboda (National Institute for Drug Abuse, Rockville) e Alfred
Springer (Ludwig Boltzmann Institut, Viena). Gostaramos de referir tambm o
contributo de Alfred Uhl (Ludwig Boltzmann Institute, Viena), bem como o de Jurgen

EMCDDA / OEDT - 3

Toppich e Gerhard Christiansen do Federal Centre for Health Education, de Colnia,


cujo estreito envolvimento no debate de temas especiais se revelou inestimvel.
Por ltimo, gostaramos de dirigir um agradecimento especial a todos quantos
participaram na fase da viabilidade, dedicando tempo, pacincia e energia ao teste
de rodagem da segunda verso das Linhas Orientadoras. Em nome de todas as
pessoas envolvidas nos projectos respectivos, agradecemos a Christian Fazekas
(ustria), Peer van der Kreeft (Blgica), Matthy Balthau (Blgica), Tuukka Tammi
(Finlndia), Franoise Baranne (Frana), Cecile Gendre (Frana), Josef Mast
(Alemanha), Vasso Boukouvala (Grcia), Mark Morgan (Irlanda), Cristina Sorio (Itlia),
Han Kuipers (Pases Baixos), Snia P e Rui Castro Rodrigues (Portugal), Dulcinea
Gil (Portugal), Francisco Javier Corpas (Espanha), Ulla Isaksson (Sucia), Harriet
Gilberg (Sucia) e Willm Mistral (Reino Unido). As suas experincias e crticas foram
essenciais para que estas Linhas Orientadoras se tornassem num instrumento com
que se pode efectivamente trabalhar no mundo real da interveno da preveno da
droga.

EMCDDA / OEDT - 4

ndice
Prefcio ___________________________________________________________________________ 2
INTRODUO_____________________________________________________________________ 8
O que a avaliao? ________________________________________________________________ 8

Enquadramento terico das Linhas Orientadoras _______________________________________ 9


Possibilidades de aplicao das Linhas Orientadoras _____________________________________ 9
Estrutura do Manual _______________________________________________________________ 10
Parte A: as Linhas Orientadoras_______________________________________________________ 10
Parte B: Exemplos _________________________________________________________________ 10
Parte C: Glossrio _________________________________________________________________ 10

Como utilizar o Manual ____________________________________________________________ 10

PARTE A: _______________________________________________________________ 12
Captulo 1: Avaliao do planeamento do programa ____________________________________ 12
1.1 O fenmeno ___________________________________________________________________
1.2 O quadro conceptual ____________________________________________________________
1.3 A necessidade de uma aco de preveno ___________________________________________
1.4 O grupo-alvo __________________________________________________________________
1.5 Objectivos ____________________________________________________________________
1.6 Mtodos _____________________________________________________________________
1.7 Recursos _____________________________________________________________________
1.8 Planeamento da avaliao do processo_______________________________________________
1.9 Planeamento da avaliao dos resultados _____________________________________________
1.10 Reflexo sobre a fase de planeamento _______________________________________________
1.11 Lista de verificao do planeamento ________________________________________________

12
13
13
14
14
15
16
16
16
17
17

Captulo Dois: Avaliao do processo_________________________________________________ 18


2.1 Planeamento da avaliao do processo_______________________________________________
2.2 Implementao da interveno de preveno __________________________________________
2.3 Regresso ao grupo-alvo __________________________________________________________
2.4 Exposio ____________________________________________________________________
2.5 Qualidade da interveno de preveno ______________________________________________
2.6 Discusso dos resultados da avaliao do processo_____________________________________
2.7 Lista de verificao do processo____________________________________________________

18
18
19
19
20
20
21

Captulo Trs: Avaliao dos resultados_______________________________________________ 22


3.1 Planeamento da avaliao dos resultados _____________________________________________
3.2 A execuo da avaliao dos resultados______________________________________________
3.3 A amostra ____________________________________________________________________
3.4 Os resultados__________________________________________________________________
3.5 Anlise das concluses da avaliao dos resultados ____________________________________
3.6 Lista de verificao dos resultados__________________________________________________

22
23
23
24
24
25

Captulo 4: Comunicao dos resultados ______________________________________________ 26


4.1 Desenvolvimento de um plano de comunicao ________________________________________ 26

PARTE B: EXEMPLOS ____________________________________________________ 27


Captulo 1: Avaliao do planeamento de um programa _________________________________ 27
1.1 O fenmeno ___________________________________________________________________
1.2 O Enquadramento conceptual______________________________________________________
1.3 A necessidade de uma interveno de preveno _______________________________________
1.4 O grupo-alvo __________________________________________________________________
1.5 Objectivos ____________________________________________________________________
1.6 Mtodos _____________________________________________________________________
1.7 Recursos _____________________________________________________________________
1.8 Planeamento da Avaliao do Processo ______________________________________________
1.9 Planeamento da avaliao dos resultados _____________________________________________

EMCDDA / OEDT - 5

27
29
30
32
34
36
38
39
40

1.10 Reflexo sobre a fase de planeamento _______________________________________________ 40

Captulo 2: Avaliao do processo____________________________________________________ 42


2.1 Planeamento da Avaliao do Processo ______________________________________________
2.2 Implementao da Interveno de Preveno __________________________________________
2.3 Regresso ao grupo-alvo __________________________________________________________
2.4 Exposio ____________________________________________________________________
2.5 Qualidade da interveno de preveno ______________________________________________
2.6 Discusso dos resultados da Avaliao do Processo ____________________________________

42
44
46
47
48
49

Captulo 3: Avaliao dos Resultados _________________________________________________ 51


3.1 Planeamento da avaliao dos resultados _____________________________________________
3.2 A execuo da avaliao dos resultados______________________________________________
3.3 A amostra ____________________________________________________________________
3.4 Os resultados__________________________________________________________________
3.5 Discusso das concluses da avaliao dos resultados __________________________________

51
53
53
54
55

Captulo 4: Comunicao dos resultados ______________________________________________ 58


4.1 Desenvolvimento de um plano de comunicao ________________________________________ 58

PARTE C: GLOSSRIO ___________________________________________________ 60


Adeso _________________________________________________________________________
Atitudes perante as drogas __________________________________________________________
Mortalidade _____________________________________________________________________
Obstculos ______________________________________________________________________
O enviesamento __________________________________________________________________
Grupo de controlo _________________________________________________________________
Design do grupo de controlo _________________________________________________________
Representatividade (coverage) ______________________________________________________
Hbitos culturais __________________________________________________________________
Natureza dos dados________________________________________________________________
Design _________________________________________________________________________
Avaliador _______________________________________________________________________
Exposio _______________________________________________________________________
Fidelidade _______________________________________________________________________
Incidncia _______________________________________________________________________
Indicador _______________________________________________________________________
Instrumentos_____________________________________________________________________
Alteraes intencionais _____________________________________________________________
Inteno de consumir drogas_________________________________________________________
Grupo-alvo intermdio ______________________________________________________________
Entrevista _______________________________________________________________________
Conhecimentos sobre o consumo de substncias _________________________________________
Competncias quotidianas___________________________________________________________
Estilo de vida ____________________________________________________________________
Variveis mediadoras_______________________________________________________________
Avaliao das necessidades _________________________________________________________
Normas _________________________________________________________________________
Objectivos ______________________________________________________________________
Objectividade ____________________________________________________________________
Instrumentos de observao _________________________________________________________
Observador______________________________________________________________________
Prevalncia ______________________________________________________________________
Interveno de preveno ___________________________________________________________
Pr-teste e ps-teste _______________________________________________________________
Problemas de comportamento ________________________________________________________
Factores de proteco ______________________________________________________________
Abordagem qualitativa _____________________________________________________________

EMCDDA / OEDT - 6

60
61
68
71
64
67
62
72
67
68
63
62
63
63
63
67
60
61
67
62
67
62
62
64
68
61
68
70
70
67
71
71
68
71
72
65
60

Qualidade da implementao da interveno _____________________________________________


Abordagem quantitativa ____________________________________________________________
Questionrio _____________________________________________________________________
Remodelao_____________________________________________________________________
Fiabilidade ______________________________________________________________________
Factores de risco__________________________________________________________________
Efeitos de seleco ________________________________________________________________
Mtodos estatsticos_______________________________________________________________
Mudanas estruturais ______________________________________________________________
Comportamento de consumo de substncias _____________________________________________
Grupo-alvo ______________________________________________________________________
Grupo-alvo final __________________________________________________________________
Alteraes inesperadas _____________________________________________________________
Validade ________________________________________________________________________
Perspectivas variveis sobre a necessidade ______________________________________________

72
60
72
73
65
65
64
68
69
63
66
66
61
73
71

Bibliografia _______________________________________________________________________ 73

EMCDDA / OEDT - 7

INTRODUO
O que a avaliao?
A avaliao de uma interveno, um projecto ou um programa1 implica a recolha,
anlise e interpretao sistemticas da informao sobre o modo como a interveno
se desenrola e sobre os efeitos que pode ter. A informao recolhida
frequentemente utilizada para decidir como melhorar uma interveno ou se a mesma
deve ser alargada ou abandonada.
A avaliao tem de responder essencialmente s seguintes perguntas bsicas:
Qual a natureza e a dimenso do problema?
Que intervenes so susceptveis de afrontar o problema?
Que grupo-alvo se pretende atingir com a interveno?
A interveno atinge efectivamente o grupo-alvo?
A interveno est a ser executada de acordo com o plano delineado?
A interveno eficaz?
As respostas a estas questes so fundamentais para se poder distinguir entre as
intervenes de preveno teis e as ineficazes e ineficientes. Este aspecto revela-se
importante, no s em termos da melhoria do nosso nvel de conhecimentos sobre a
preveno e da contribuio para a qualidade da mesma, mas tambm porque pode
servir de base para a deciso dos financiadores e decisores polticos, relativamente
aos projectos a apoiar.
Apesar de, na teoria, a necessidade e utilidade da avaliao serem amplamente
aceites, poucas intervenes de preveno foram, na prtica, efectivamente avaliadas,
na Europa. A ausncia de avaliao, no terreno, poder ser explicada, entre outras
razes, pela insuficincia de conhecimentos, bem como pela incerteza e pela falta de
confiana sobre o modo de avaliar efectivamente as intervenes de preveno, no
domnio do consumo indevido de substncias .
precisamente essa lacuna que estas Linhas Orientadoras se propem colmatar.
Destinam-se, assim, a servir de manual prtico para a realizao de avaliaes
vlidas e cientificamente fundamentadas, de diversos tipos de intervenes de
preveno, em diferentes cenrios.

Ao longo destas Linhas Orientadoras, preferiu-se utilizar o termo interveno de preveno em vez
dos termos projecto ou programa, pois estes termos podem ter significados diferentes para pessoas
diferentes. (Dado o termo ser utilizado em todas as pginas, esta ser a nica vez em que assinalado
com .)

EMCDDA / OEDT - 8

Enquadramento terico das Linhas Orientadoras


Na concepo destas Linhas Orientadoras, decidimos seguir uma abordagem
estruturada, emprica e quantitativa. Embora seja provvel que alguns planificadores
desejem obter informaes mais aprofundadas no mbito da metodologia qualitativa,
considermos que, no espao de que dispnhamos, no seria possvel combinar
ambas as abordagens de forma satisfatria. Sugerimos, pois, aos leitores
interessados sobre teoria e metodologia dos processos de avaliao, que adquiram o
livro do OEDT relacionado com estas Linhas Orientadoras: Monografia sobre a
Avaliao da Preveno da Droga, que fornece informaes aprofundadas sobre
mltiplos aspectos da avaliao (por exemplo, a situao na Europa e nos Estados
Unidos da Amrica, os diferentes tipos de avaliao, a medio dos resultados, as
variveis intermdias, a relao custo-eficcia e os obstculos e desafios sua
realizao).
A quem se destinam as Linhas Orientadoras?
Estas Linhas Orientadoras destinam-se a ajudar pessoas de diversos sectores da
sociedade, no planeamento e avaliao de intervenes de preveno da droga.
Foram especialmente concebidas para todos os que j possuem experincia na
prtica da preveno, mas tm pouca experincia de avaliao, podendo ser
igualmente teis a avaliadores mais experientes.
A fim de responder s necessidades destes dois grupos-alvo, dividimos o manual em
trs partes, com base no pressuposto de que quanto mais experincia de avaliao os
leitores tiverem, menos precisaro de ler e vice-versa.

Possibilidades de aplicao das Linhas Orientadoras


Em primeiro lugar e acima de tudo, as Linhas Orientadoras foram concebidas para
auxiliar as pessoas que trabalham no domnio da preveno da droga a avaliar as
suas intervenes de preveno. Contudo, podem ser utilizadas para outros fins,
nomeadamente como auxiliar didctico na formao de avaliadores - a nossa prpria
experincia, num seminrio de formao para tcnicos, demonstrou que as Linhas
Orientadoras constituam um instrumento didctico extremamente til. Podem,
igualmente, ser aplicadas na elaborao e avaliao de propostas de financiamento,
de relatrios e, at, de outras directrizes.
Quando podem ser usadas as Linhas Orientadoras?
As Linhas Orientadoras centram-se na avaliao das intervenes de preveno. No
do informaes sobre a forma de conceber uma interveno de preveno
especfica. Mais exactamente, podem ser aplicadas a partir do momento em que a
concepo de uma interveno de preveno est em discusso. Nesse estdio,
ajudaro a ponderar o planeamento da interveno e, mais tarde, podero ser
utilizadas para avaliar quer a sua implementao quer os seus resultados. So

EMCDDA / OEDT - 9

adequadas no s para as intervenes ainda no testadas, mas tambm para as que


j foram realizadas e so aplicadas regularmente.

Estrutura do Manual
Este manual est organizado em trs partes: as Linhas Orientadoras propriamente
ditas, alguns exemplos e um glossrio. A primeira parte uma seco breve e
concisa, contendo as Linhas Orientadoras na sua essncia. A segunda parte inclui
informaes de carcter geral, mais detalhadas, bem como exemplos para cada uma
das questes focadas nas Linhas Orientadoras. A ltima parte constituda por um
glossrio onde os termos importantes so explicitados de forma pormenorizada.

Parte A: as Linhas Orientadoras


Esta parte constitui o enquadramento do manual, abarcando todos os passos e
aspectos que devem ser considerados no decurso de uma avaliao. As Linhas
Orientadoras incluem quatro reas principais: a fase do planeamento, a avaliao da
qualidade e do processo, a avaliao dos resultados e, por ltimo, a difuso dos
resultados da avaliao. Cada uma destas partes comea por uma breve introduo e
cada termo tcnico - assinalado por uma seta ("") - explicado de forma mais
completa no glossrio.

Parte B: Exemplos
Esta seco contm informaes de fundo sobre os aspectos abrangidos pelas
Linhas Orientadoras, bem como exemplos prticos sugeridos pelo estudo de
viabilidade. Esta seco ser especialmente til para os menos experientes em
matria de planeamento e de avaliao de projectos.

Parte C: Glossrio
O glossrio contm descries, definies e explicaes mais pormenorizadas dos
termos tcnicos e metodolgicos utilizados nas Linhas Orientadoras. Tal como a Parte
B, ajudar as pessoas menos familiarizadas com os aspectos metodolgicos a
compreender e utilizar as Linhas Orientadoras.

Como utilizar o Manual


Na concepo destas Linhas Orientadoras, procurmos integrar os aspectos mais
importantes a tomar em considerao no planeamento e avaliao de intervenes de
preveno. claro que existem muitas mais questes que poderiam ter sido includas,
mas, por razes de ordem prtica, decidimos restringir as Linhas Orientadoras aos
aspectos estritamente essenciais.

EMCDDA / OEDT - 10

Estamos igualmente cientes de que muitas pessoas que trabalham no domnio da


preveno nem sempre dispem dos recursos financeiros e humanos necessrios
para avaliar cabalmente uma interveno. Contudo, aconselhamos vivamente o leitor a
seguir sistematicamente os passos bsicos patentes nestas Linhas Orientadoras, a
fim de assegurar a qualidade dessas intervenes.
Recomendamos a leitura de todas as perguntas apresentadas na Parte A, mesmo
que, nalguns casos, nem todas necessitem de ser respondidas. De modo geral, os
avaliadores de projecto deveriam procurar responder a todas as perguntas relativas
fase de planeamento (Captulo 1) e - consoante o seu plano de avaliao especfico avanar para a avaliao do processo (Captulo 2) e para a avaliao dos resultados
(Captulo 3). Esta ltima, sendo muito importante, nem sempre se revela exequvel nas
intervenes de preveno de menor dimenso. Do mesmo modo, se prev realizar
uma avaliao dos resultados, necessrio que possua, pelo menos, conhecimentos
bsicos de estatstica - conhecimentos esses que no podem ser transmitidos num
manual com as caractersticas deste. Por ltimo, o captulo sobre a utilizao dos
resultados (Captulo 4) igualmente pertinente para todos os tipos de avaliao.
A avaliao no uma tarefa simples, podendo ser muito dispendiosa e demorada.
Estas Linhas Orientadoras servem justamente para auxiliar o leitor, ao longo desse
processo complexo. Depois de as ter utilizado algumas vezes, adquirindo confiana na
sua prpria capacidade como avaliador, comear a achar que o processo de
avaliao um empreendimento que vale a pena. Em ltima anlise, a avaliao
permitir-lhe- planear os seus servios de modo mais eficaz e poder constatar,
subsequentemente, que as presentes Linhas Orientadoras lhe permitem planear a
avaliao de forma mais eficaz.

EMCDDA / OEDT - 11

PARTE A:
LINHAS ORIENTADORAS PARA O PLANEAMENTO E
A REALIZAO DA AVALIAO
O smbolo "" indica os termos que esto definidos no glossrio.

Captulo 1: Avaliao do planeamento do programa


A avaliao do planeamento do programa refere-se fase em que a preveno
planeada e concebida. Trata-se da fase em que os objectivos e os mtodos so
escolhidos, reflectindo a avaliao desta fase o processo de definio do problema e
do grupo-alvo final (que no necessariamente o grupo-alvo da interveno). Esta
fase inclui ainda a avaliao da necessidade de uma interveno de preveno e a
avaliao dos recursos disponveis.
A avaliao pode ser realizada quer por um avaliador externo 2, quer pela pessoa
responsvel pela interveno. A informao deve ser recolhida junto dos
planificadores e da equipa que ir implementar a interveno, podendo ser obtida
atravs de entrevistas pessoais, questionrios, listas de verificao ou relatrios
escritos. Outras fontes de dados teis so os inquritos - nacionais ou locais - e as
publicaes cientficas ou de grande divulgao, que tratam de questes a abordar
durante a fase de planeamento do programa. Os resultados desta avaliao devem
ser apresentados por escrito.

1.1

O fenmeno3

O ponto de partida, na fase de planeamento, deve ser uma descrio da natureza,


amplitude e localizao do fenmeno sobre o qual a interveno de preveno ir
incidir. Esse fenmeno deve ser sempre definido como um comportamento de
consumo de substncias que a interveno planeada visa prevenir ou alterar. As
caractersticas das pessoas afectadas pelo fenmeno devem ser igualmente
especificadas.
necessrio responder s perguntas seguintes. Para cada resposta, dever referir as
suas fontes de informao e tecer um comentrio sobre a qualidade dessa
informao.
a.
Que fenmeno deseja prevenir ou alterar atravs da interveno
planeada?
Dado este termo ser utilizado regularmente, tambm ser assinalado com uma nica vez.
O termo fenmeno preferido nestas Linhas Orientadoras, porque o termo problema de droga, que
tambm poderia ser usado, possui uma conotao mais negativa.
2
3

EMCDDA / OEDT - 12

b.
Quais so as caractersticas sociodemogrficas das pessoas
afectadas pelo fenmeno, em comparao com as das pessoas no
afectadas?
c.

Onde que o fenmeno se verifica e onde est ausente?

d.
H quanto tempo conhecida a existncia do fenmeno? A sua
dimenso, impacto e relevncia sofreram alteraes ao longo do tempo?

1.2

O quadro conceptual

Depois da delimitao cuidadosa do fenmeno, ter de apresentar sucintamente a


teoria que fundamenta as suas opinies sobre a causa, a alterao e o controlo do
fenmeno. Nessa descrio deve ficar claro o motivo por que escolheu os objectivos
(ver 1.5) e os mtodos (ver 1.6) para a interveno especfica.
necessrio responder s perguntas seguintes, devendo dar tambm alguns
exemplos de estratgias e actividades que podero alterar (ou j alteraram) o
fenmeno.
a.

Que explicao d para a origem do fenmeno?

b.

Que factores so responsveis pela persistncia do fenmeno?

1.3

A necessidade de uma aco de preveno

igualmente necessrio verificar se o fenmeno existe num grau que justifique uma
interveno. A anlise da necessidade de uma interveno especfica deve incluir o
clculo do nmero de pessoas afectadas pelo fenmeno, apresentar argumentos a
favor da realizao dessa interveno especfica - e no de outra qualquer - e precisar
de que modo (e se) ela se entrosa com outras actividades.
necessrio responder s perguntas seguintes:
a.
Quantas pessoas so afectadas pelo fenmeno? Qual o nmero de
novos casos e com que frequncia surgem? (prevalncia, incidncia)
b.
Como prev que o fenmeno evolua se nada for feito? Em que
fundamentos se baseia para essa previso?
c.

Como descreveria a necessidade da interveno?

d.
Existem opinies diferentes quanto necessidade de uma
interveno? (variabilidade de perspectivas sobre a necessidade)
e.
De que modo avaliou a necessidade de uma interveno?
(avaliao das necessidades)

EMCDDA / OEDT - 13

f.
Tem conhecimento de outras intervenes relacionadas com esta
que estejam em fase de execuo ou de planeamentos? Tenciona cooperar
com essas actividades?

1.4

O grupo-alvo

Em seguida, deve definir o grupo a quem a interveno especfica dirigida (grupoalvo). Podem distinguir-se dois tipos de grupo-alvo: um grupo-alvo final, o grupo que
corre o maior risco de ser afectado pelo fenmeno da droga, e um grupo-alvo
intermdio, por exemplo, os pais, os professores ou a populao em geral. Se a
interveno se dirigir a um grupo-alvo intermdio, este deve ser descrito como o
grupo-alvo, e se houver mais de um grupo-alvo, os diversos grupos devem ser
descritos separadamente. Deve tambm descrever brevemente de que modo o grupoalvo ser abordado e motivado para participar na interveno.
necessrio responder s perguntas seguintes:
a.

O grupo-alvo o grupo-alvo final ou o grupo-alvo intermdio?

b.
Quais so as caractersticas sociodemogrficas do grupo-alvo, a
amplitude do fenmeno e a dimenso do grupo?
c.

Porque escolheu este grupo-alvo?

d.

Quantas pessoas prev atingir?

e.
Onde e como pretende contactar, recrutar e motivar o grupo-alvo?
(efeitos de seleco, efeitos de representatividade, enviesamento)
f.
Como prev assegurar
interveno? (mortalidade)

permanncia

do

grupo-alvo

na

g.
Mesmo que a interveno que planeia seja exclusivamente dirigida a
um grupo-alvo intermdio, quais so as caractersticas do grupo-alvo
final?

1.5

Objectivos

necessrio que seja claro acerca dos objectivos da interveno, definindo os


efeitos previstos quer sobre o comportamento de consumo de substncias quer sobre
as variveis mediadoras. Deve descrever tambm os efeitos que a interveno
espera alcanar relativamente a qualquer grupo-alvo intermdio.
necessrio responder s perguntas seguintes:
a.
Em que medida ir a interveno afectar o comportamento de
consumo de substncias do grupo-alvo final?

EMCDDA / OEDT - 14

b.
Em que medida ir a interveno afectar as variveis mediadoras
directamente relacionadas com o comportamento de consumo de
substncias do grupo-alvo final? (conhecimento sobre o consumo de
substncias, atitudes perante as drogas, inteno de consumir drogas,
normas)
c.
Que objectivos esto previstos para outras variveis mediadoras?
(competncias quotidianas factores de risco, factores de proteco,
problema de comportamentoalteraes estruturais, alteraes do
estilo de vida e dos hbitos culturais)
d.
Qual a relao entre estas variveis
comportamento de consumo de substncias?

mediadoras

e.
Quais so os seus objectivos relativamente ao grupo-alvo
intermdio?
f.
De que modo esto relacionados os objectivos para o grupo-alvo
intermdio e os objectivos para o grupo-alvo final?

1.6

Mtodos

Necessita de estar seguro acerca dos mtodos e estratgias que vai empregar para
atingir os objectivos fixados. Devem descrever-se as evidncias empricas para tais
estratgias, assim como o calendrio e a durao global prevista para a interveno.
necessrio responder s perguntas seguintes:
a.
Que estratgias, componentes e mtodos sero utilizados na
interveno?
b.

Quem estar envolvido na interveno de preveno?

c.
Tem conhecimento de evidncias empricas que demonstrem o xito
dos mtodos que escolheu (por exemplo, literatura cientfica, artigos de
investigao)?
d.

Quanto tempo ir durar a interveno?

e.
Qual o calendrio previsto para a interveno (nmero de
actividades, durao e frequncia de cada actividade, etc.)?
f.

Tenciona testar a exequibilidade da interveno?

EMCDDA / OEDT - 15

1.7

Recursos

Agora que no subsistem dvidas quando aos objectivos e aos mtodos, dever
analisar os recursos disponveis. Estes recursos incluem o tempo de trabalho
necessrio ao pessoal da equipa, devendo igualmente ter em considerao quaisquer
obstculos disponibilidade de recursos, susceptveis de dificultar a realizao ou a
avaliao do projecto.
necessrio responder s perguntas seguintes:
a.
Que pessoal ir levar a cabo a interveno e quais so as
qualificaes requeridas?
b.

Quanto tempo ir a interveno exigir a cada uma dessas pessoas?

c.

Qual o oramento previsto e quem o financia?

d.
Quais os recursos adicionais disponveis (por exemplo, pessoas,
organizaes, instalaes, materiais, etc.)?
e.
Que factores so susceptveis de dificultar a implementao ou a
avaliao? (obstculos)

1.8

Planeamento da avaliao do processo

Enquanto efectua a avaliao da fase de planeamento, deve ter tambm em


considerao as fases seguintes. necessrio decidir se ir haver uma avaliao do
processo e, em caso afirmativo, quem a realizar.
O Captulo 2 trata da avaliao do processo, mas se prev levar a efeito essa
avaliao, deve responder neste ponto s perguntas seguintes:
a.

Est prevista uma avaliao do processo?

b.

De que recursos dispe para fazer uma avaliao do processo?

c.

Quem ir efectuar a avaliao do processo?

1.9

Planeamento da avaliao dos resultados

Deve decidir igualmente se proceder a uma avaliao dos resultados. O Captulo 3


consagrado avaliao dos resultados; no entanto, se pretende levar a efeito a
referida avaliao, deve responder neste ponto s perguntas seguintes:
a.

Est prevista uma avaliao dos resultados?

b.

De que recursos dispe para fazer uma avaliao dos resultados?

EMCDDA / OEDT - 16

c.

Quem ir efectuar a avaliao dos resultados?

1.10Reflexo sobre a fase de planeamento


Por ltimo, no final da avaliao da fase de planeamento, deve examinar-se quer a
globalidade do processo de recolha de informao quer os meios de comunicao.
necessrio responder s perguntas seguintes:
a.

Quem esteve envolvido na fase de planeamento?

b.
Qual a sua apreciao global do modo como decorreu a fase de
planeamento?

1.11Lista de verificao do planeamento


Muito bem! Terminou a avaliao da fase de planeamento da sua interveno. Neste
momento, j deve ter ideias claras sobre:
M

aquilo a que deseja fazer frente (1.1)

o modo como explica esse fenmeno (1.2)

a razo por que a sua interveno necessria (1.3)

quem pretende ajudar com a interveno (1.4)

quais so os seus objectivos (1.5)

de que modo implementar a interveno (1.6)

que recursos ir utilizar na interveno (1.7)

Tambm verificou todo o processo de planeamento (1.10), o que o ajudar a


compreender de que modo foram tomadas as decises. Se uma dessas decises foi
a de prosseguir com a sua avaliao (1.8 e 1.9), os prximos captulos ajud-lo-o a
monitorar o processo e os resultados da sua interveno.

EMCDDA / OEDT - 17

Captulo Dois: Avaliao do processo


A avaliao do processo analisa a implementao de uma interveno e as reaces
dos participantes. Descreve como (e se) a interveno de preveno se desenrolou,
se o design resultou e se o grupo-alvo visado foi ou no atingido. Debrua-se
igualmente sobre a qualidade da interveno. A avaliao do processo, uma vez que
recolhe todas as informaes relevantes sobre o xito ou o insucesso de uma
interveno, fornece informaes teis para a ulterior melhoria da interveno.

2.1

Planeamento da avaliao do processo

No planeamento da avaliao do processo necessrio tomar decises sobre a


seleco das variveis e dos indicadores que iro ser medidos. Respondendo s
perguntas seguintes, dever, por conseguinte, relatar o que foi medido, de que modo
se mediu e quando o fez.
a.
Que variveis e indicadores fornecero informaes teis sobre o
modo como a interveno foi levada a cabo? Que tipo de informao
(qualitativa ou quantitativa) pretende analisar atravs da avaliao do
processo?
b.
Que mtodos e instrumentos sero usados? (entrevistas,
questionrios, instrumentos de observao)
c.
Onde, quando e com que frequncia sero recolhidos os dados
sobre o processo ? (design)
d.
Quem fornecer as informaes necessrias para a avaliao do
processo?
e.

Como planeia analisar os dados?

2.2

Implementao da interveno de preveno

Este talvez o momento mais importante da interveno. A descrio da


implementao e do desenvolvimento da interveno deve incluir todas as actividades
que foram efectivamente empreendidas. Isto permitir-lhe avaliar a interveno
independentemente do facto de a mesma ter ou no sido executada de acordo com o
que estava inicialmente planeado. (adeso, fidelidade, remodelao
(reinvention), alteraes inesperadas, alteraes intencionais)
necessrio responder s perguntas seguintes:
a.
Que estratgias, componentes e mtodos foram efectivamente
postos em prtica? Compare as suas respostas com o plano inicial na
subseco 1.6.

EMCDDA / OEDT - 18

b.
Que fontes de dados e instrumentos foram utilizados para medir a
implementao da interveno? Compare as suas respostas com o plano
inicial na subseco 2.1.
c.
Que recursos foram efectivamente utilizados? Compare as suas
respostas com o plano original na subseco 1.7.

2.3

Regresso ao grupo-alvo

Necessitar tambm de verificar se atingiu o grupo-alvo visado.


necessrio responder s perguntas seguintes, devendo igualmente dar informaes
relativamente ao nmero de participantes e respectivas idade, sexo, formao e sobre
outras variveis relevantes. Tal como na subseco anterior, deve comparar as
respostas dadas com os planos iniciais, neste caso a definio do grupo-alvo tal como
estava previsto na subseco 1.4.
a.

Quantas pessoas foram efectivamente atingidas pela interveno?

b.
Quais so as caractersticas sociodemogrficas das pessoas
atingidas pela interveno?
c.

Como recolheu esta informao?

2.4

Exposio

Em seguida, necessrio que analise em que medida a interveno de preveno


atingiu efectivamente o grupo-alvo (exposio)
necessrio responder s perguntas seguintes:
a.
De que modo mediu a exposio? Que fontes de dados,
instrumentos ou indicadores utilizou efectivamente?
b.
Quanto tempo durou realmente a interveno de preveno e
quantas actividades de preveno tiveram lugar? Compare as suas
respostas com o plano inicial na subseco 1.6.
c.
Em que medida o grupo-alvo foi efectivamente atingido? Compare as
suas respostas com o plano inicial na subseco 1.4.

2.5

Qualidade da interveno de preveno

Para alm de avaliar o modo como a interveno foi levada a cabo, precisa de avaliar
at que ponto ela foi executada correctamente. A qualidade da interveno pode ser
expressa em termos das reaces e atitudes do grupo-alvo relativamente

EMCDDA / OEDT - 19

interveno (por exemplo, aceitao, grau de identificao, envolvimento, benefcio


pessoal, etc.)
necessrio que responda s perguntas seguintes, e instrutivo comparar as
respostas com as suas opinies iniciais sobre a avaliao do processo, tal como
estava prevista na subseco 2.1.
a.

Quem forneceu as informaes sobre a qualidade da interveno?

b.
Que indicadores e instrumentos utilizou efectivamente para avaliar a
qualidade da interveno?
c.

Quais so os resultados das medies da qualidade?

2.6

Discusso dos resultados da avaliao do processo

Por ltimo, tal como ao avaliar o planeamento de uma interveno, dever analisar e
interpretar os resultados da avaliao do processo. Estes resultados devem ser
comparados com os resultados obtidos noutras avaliaes e estudos relevantes, e a
sua anlise tambm deve incluir algumas sugestes para o futuro.
necessrio responder s perguntas seguintes.
a.
Que comparaes se podem estabelecer entre os planos da
interveno, a sua implementao efectiva e a avaliao que faz dela?
Existem discrepncias? Quais so as possveis razes dessas
discrepncias?
b.

Qual o impacto das eventuais discrepncias sobre a interveno?

c.
Quais so os pontos fortes e os pontos fracos da forma como a
interveno foi implementada? Compare-os com os resultados de outras
intervenes.
d.
Tem sugestes para a implementao futura de intervenes de
preveno semelhantes?
e.
Tem sugestes para futuras avaliaes do processo deste tipo de
interveno de preveno?

2.7

Lista de verificao do processo

Muito bem! Acabou de concluir a avaliao do processo da sua interveno. Neste


momento, j deve ter ideias claras sobre:
M

o modo como planeou medir o processo (2.1)

aquilo que sucedeu efectivamente durante a interveno (2.2)

EMCDDA / OEDT - 20

quantas pessoas foram realmente atingidas (2.3)

que parcela do grupo-alvo foi atingida (2.4)

at que ponto a sua interveno foi boa (2.5)

Deve tambm ter analisado a implementao efectiva da interveno, em comparao


com os seus planos iniciais (2.6), para ver at que ponto estes foram alterados no
terreno. O prximo captulo ir ajud-lo a avaliar os resultados da interveno, isto , a
determinar se realmente obteve os resultados pretendidos.

EMCDDA / OEDT - 21

Captulo Trs: Avaliao dos resultados


A avaliao dos resultados examina os efeitos da interveno. Procura determinar se
esta alcanou realmente os objectivos pretendidos e, como tal, um instrumento
essencial para ajuizar se vale a pena prosseguir, adaptar ou abandonar uma
interveno.
O design da avaliao dos resultados tem uma influncia muito grande na qualidade
dos dados obtidos, razo pela qual este captulo comea com uma descrio do
planeamento da avaliao dos resultados e, em seguida, questiona de que modo os
resultados desta avaliao podem ser apresentados.

3.1

Planeamento da avaliao dos resultados

essencial que o planeamento de qualquer avaliao dos resultados tenha incio


antes da prpria interveno, uma vez que as decises tomadas nessa fase podem
influenciar o calendrio da interveno e a recolha de dados.
Para assegurar um planeamento eficaz da avaliao dos resultados, necessrio
responder s perguntas seguintes:
a.
Quais so os seus indicadores dos resultados e como prev medir
esses resultados?
b.
Pretende recolher informaes sobre os resultados mediante uma
avaliao quantitativa ou uma avaliao qualitativa? Que indicadores e
instrumentos se prope utilizar na recolha de informaes? A seguinte
categorizao pode vir a ser til:
i. Indicadores e instrumentos para medir o comportamento de consumo de
substncias do grupo-alvo final.
ii. Indicadores e instrumentos para medir as variveis mediadoras
relacionadas com o comportamento de consumo de substncias do grupoalvo final.
iii. Indicadores e instrumentos para medir outras variveis mediadoras
relativas ao grupo-alvo final.
iv. Indicadores e instrumentos para medir os objectivos para o grupo-alvo
intermdio.
c.
O que sabe acerca da qualidade dos instrumentos (objectividade,
fiabilidade, validade)? Tenciona testar a aplicabilidade dos
instrumentos?

EMCDDA / OEDT - 22

d.
Junto de quem, quando e com que frequncia planeia recolher
informaes sobre os resultados? (design)?
e.
De que modo planeia analisar a informao que recolheu? Que
mtodos estatsticos so adequados s caractersticas dos dados e do
design?

3.2

A execuo da avaliao dos resultados

Munido com este plano, dever agora descrever a avaliao dos resultados
propriamente dita, centrando-se nas alteraes ou adaptaes no s da amostra,
mas tambm do design e da utilizao dos instrumentos. Devem distinguir-se tambm
as alteraes imprevistas e as alteraes intencionais.
Ao responder s perguntas seguintes, deve ter sempre em conta a subseco
anterior.
a.

Qual foi o design da avaliao dos resultados?

b.

Que instrumentos foram aplicados?

c.
Como se efectuou a recolha de dados, quem a realizou, quando e em
que circunstncias?
d.
De que modo foram os dados processados e que anlises
estatsticas foram efectuadas?

3.3

A amostra

Deve dar indicaes sobre a amostra que utilizou para fornecer os dados da avaliao
dos resultados. Se a amostra corresponder a todas as pessoas atingidas pela
interveno, ou mesmo ao grupo-alvo, tem apenas de remeter para a descrio feita
nas subseces 1.4 e 2.3. Caso contrrio, ter de referir as caractersticas da amostra
e pormenorizar o processo de seleco e a taxa de mortalidade
necessrio responder s perguntas seguintes:
a.

Como foi seleccionada a amostra?

b.
Quais eram as caractersticas sociodemogrficas da amostra, a sua
dimenso, etc.?
c.
Que semelhanas e diferenas tm
relativamente s do grupo-alvo no seu conjunto?

essas

caractersticas

d.
Foi possvel identificar os sujeitos que abandonaram o projecto?
Em caso afirmativo, quais eram as suas caractersticas?

EMCDDA / OEDT - 23

3.4

Os resultados

Em determinada altura da avaliao dos resultados, ter de examinar os resultados da


interveno. Pode apresentar esses resultados em quadros, realizar uma anlise
estatstica complexa, ou simplesmente, elaborar um relatrio escrito.
necessrio responder s perguntas seguintes:
a.
Em que medida que a interveno afectou o comportamento de
consumo de substncias do grupo-alvo final?
b.
De que modo a interveno afectou as variveis mediadoras
relacionadas com o consumo de substncias no grupo-alvo final?
c.
De que modo a interveno afectou outras variveis mediadoras no
grupo-alvo final?
d.
De que modo a interveno afectou os objectivos do grupo-alvo
intermdio?
e.
Os diversos subgrupos so afectados de modo diferente pela
interveno? (por exemplo, homens/mulheres, grupos etrios, grupos de
risco, etc.).

3.5

Anlise das concluses da avaliao dos resultados

Por ltimo, necessita de analisar e interpretar as concluses da avaliao dos


resultados. Tal como aconteceu com a avaliao do processo, estas concluses
devem ser comparadas com as de outras avaliaes e estudos pertinentes, devendo
tambm fazer sugestes para o futuro.
necessrio responder s perguntas seguintes:
a.
A interveno obteve os resultados esperados? Examine eventuais
discrepncias entre as expectativas e os resultados, focando as possveis
razes das mesmas e o seu impacto sobre o estudo.
b.
Quais dos resultados a que chegou considera mais relevantes e
significativos? Compare-os com os resultados de outros estudos.
c.
At que subseco est seguro de que foi a interveno que causou
os resultados? Existem quaisquer explicaes alternativas para esses
resultados?
d.

Como explica os resultados negativos?

e.
Tem sugestes
semelhantes?

para

utilizao

futura

EMCDDA / OEDT - 24

de

intervenes

f.
Tem sugestes para futuras avaliaes dos resultados deste tipo de
interveno de preveno?

3.6

Lista de verificao dos resultados

Muito bem! J concluiu a avaliao dos resultados e est prestes a completar o


processo de avaliao na sua globalidade. Neste momento, j deve ter ideias claras
sobre:
M

o modo como planeou medir os resultados (3.1)

de que modo a avaliao dos resultados foi efectivamente posta em prtica


(3.2)

junto de quem foi recolhida a informao sobre os resultados (3.3)

se a interveno produziu algum efeito no comportamento do grupo-alvo (3.4)

se a interveno alcanou efectivamente o seu objectivo (3.5)

Agora que acabou de avaliar a sua interveno, s lhe falta divulgar os resultados e
partilhar as suas experincias.

EMCDDA / OEDT - 25

Captulo 4: Comunicao dos resultados


Parabns! Neste momento, j dever ter concludo a sua avaliao. Todavia, o seu
esforo ainda no acabou: necessita agora de ponderar sobre a utilizao a dar s
concluses a que chegou.

4.1

Desenvolvimento de um plano de comunicao

As avaliaes podem ser realizadas pelas mais diversas razes, mas uma delas
dever ser sempre o fornecimento de uma base para a tomada de decises futuras. A
fim de assegurar a maximizao da sua avaliao, h determinados passos a
considerar.
Ter, por conseguinte, de responder s perguntas seguintes, se no quiser que todos
os seus esforos tenham sido em vo:
a.

Quem deve ser informado?

b.

Quando devem ser comunicadas essas informaes?

c.
Em que
destinatrios?

informaes

estaro

interessados

d.

Que formas de comunicao escrita ir utilizar?

e.

Que formas de comunicao oral ir utilizar?

EMCDDA / OEDT - 26

os

diferentes

PARTE B: EXEMPLOS
Esta seco fornecer-lhe- informaes bsicas sobre todas as perguntas colocadas
pelas Linhas Orientadoras, bem como exemplos breves sobre o modo como pode
responder s referidas perguntas. Os exemplos provm, na sua maioria, das
experincias de interveno de preveno da droga que aplicaram as Linhas
Orientadoras na fase do estudo de viabilidade, mas foram resumidos ou abreviados,
por motivos de espao. Dada a diversidade de intervenes possveis, bvio que
estes exemplos no podem ser considerados representativos, sendo, antes, usados
para realar as mltiplas possibilidades em aberto quando se empreende a avaliao
de um projecto.

Captulo 1: Avaliao do planeamento de um programa


1.1

O fenmeno

a.
Que fenmeno pretende prevenir ou alterar com a interveno
planeada?
O fenmeno que, em ltima anlise, deve ser visado por uma interveno de
preveno da droga o comportamento de consumo de substncias no grupo-alvo
final. Pode dizer respeito tanto s drogas legais como s ilegais e aplica-se mesmo
que o fenmeno apenas seja visado de forma indirecta, como o caso da formao
em matria de competncias quotidianas ou das campanhas nos meios de
comunicao social.
"Queremos prevenir o consumo de drogas - centrando-nos principalmente no
lcool como droga legal e na herona como droga ilegal - entre os jovens na
faixa etria dos 10 aos 18 anos."
"Queremos prevenir o consumo de lcool no local de trabalho numa empresa
com 750 empregados."
b.
Quais so as caractersticas sociodemogrficas das pessoas
afectadas pelo fenmeno, em comparao com as das pessoas no
afectadas por ele?
As caractersticas sociodemogrficas mais importantes so o sexo, a idade, a raa, o
estatuto socioeconmico e a rea de residncia. Dependendo da interveno
planeada, poder haver outras caractersticas relevantes, tais como os factores de
risco, os factores de proteco, os traos de personalidade, etc., que podero ser
diferentes consoante as diferentes drogas ou as diferentes localidades. crucial
conhecer estas caractersticas para se poder focar adequadamente a interveno no
grupo-alvo. No entanto, como possvel que existam dezenas de caractersticas de

EMCDDA / OEDT 27

grupo, prefervel centrar-se nas que considera mais relevantes e que esto melhor
documentadas.
"Segundo um inqurito regional, h quatro consumidores de droga do sexo
masculino para cada consumidor do sexo feminino. A mdia de idades dos
consumidores de droga de 27,6 anos, 77% so solteiros, 21% possuem
diploma do ensino secundrio e 45% tm um emprego estvel."
"Os frequentadores de clubes que consomem ecstasy regularmente tm entre
18 e 23 anos. Geralmente, tm um emprego estvel ou frequentam o liceu ou a
universidade (mais de 80% so estudantes)."
c.

Onde que o fenmeno se verifica e onde est ausente?

Dever descrever os locais exactos onde se manifesta o comportamento de consumo


de substncias que a sua interveno visa atingir. Verifica-se, por exemplo, quando as
pessoas esto sozinhas em casa, quando esto com amigos, nos estabelecimentos
nocturnos de diverso, na rua ou em zonas rurais? igualmente importante saber
onde que o fenmeno no se verifica, para que a interveno possa ser
correctamente direccionada. As respostas a estas questes so to essenciais como
saber quem afectado pelo fenmeno, pois, sem essa informao, a interveno no
ser devidamente orientada.
"O consumo de lcool na nossa comunidade verifica-se tanto em privado como
em locais pblicos (bares, discotecas, ruas). A herona principalmente
consumida em privado, mas tambm h quem a consuma em parques pblicos.
Ambos os consumos raramente ocorrem na escola."
"Em geral, as zonas no urbanas tm nveis mais baixos de consumo de
droga."
d.
H quanto tempo se tem conhecimento do fenmeno? A sua
dimenso, impacto e relevncia sofreram alteraes ao longo do tempo?
importante poder-se fazer previses acerca da evoluo futura do fenmeno. Alm
disso, um aumento das dimenses do fenmeno justifica uma interveno de
preveno mais rigorosa.
"Aps um rpido aumento na ltima dcada, o consumo de herona parece
estar a estabilizar. Verifica-se tambm um aumento considervel do consumo
de ecstasy nos clubes e festas rave. O consumo de droga j no um
fenmeno essencialmente urbano e, de acordo com as recentes investigaes
de campo, constata-se uma intensificao da pobreza e da insegurana entre
os toxicodependentes."
Por ltimo, convm lembrar que, ao longo do trabalho, deve referir as suas fontes de
informao e analisar a qualidade dessa informao. Poder utilizar inquritos
nacionais, recenses bibliogrficas, outros artigos de jornal, os seus prprios
inquritos, etc., devendo tambm notar a qualidade das suas fontes.

EMCDDA / OEDT 28

"Inqurito nacional ao consumo de droga entre a populao escolar do Reino


Unido (Balding, 1997) e inquritos locais no Reino Unido (designadamente,
Pollard, 1995). Estas concluses so amplamente confirmadas por
investigaes noutras culturas semelhantes, em especial nos Estados Unidos
da Amrica e na Austrlia."

1.2

O Enquadramento conceptual

a.

Que explicao d para a origem do fenmeno?

Poder haver mais de uma teoria ou explicao possveis para justificar o fenmeno,
por isso deve destacar aquela que considera mais pertinente para a interveno
planeada. Pode explicar tambm porque opta por essa teoria.
"H muitas teorias para explicar o consumo indevido de substncias entre os
adolescentes. Embora todas elas possuam algum mrito, as teorias da
aprendizagem e da interaco social so as mais amplamente aceites. A
assero fundamental a de que o comportamento do adolescente
fortemente influenciado pelos pais e pelos grupos de pares e, deste ponto de
vista, a primeira experincia com drogas resulta no s da exposio a
modelos propiciadores do consumo, mas tambm da vulnerabilidade presso
social."
b.

Que factores so responsveis pela persistncia do fenmeno?

Nalguns casos, os factores que originam um fenmeno so diferentes dos que o


mantm ou exacerbam. Por conseguinte, pode ser mais importante, por vezes, focar
nos factores de manuteno do fenmeno, tanto mais que frequentemente
demasiado tarde para combater os factores que o causaram.
"As atitudes, hbitos e normas vigentes entre os adultos, relativamente ao
lcool e ao consumo de drogas, so factores que influenciam os jovens. Estes
so igualmente influenciados pelos meios de comunicao social."
"Entre os jovens da nossa zona verifica-se uma atitude de falta de futuro, que
resulta, em parte, da elevada taxa de desemprego. Esta auto-imagem negativa
em termos de comunidade igualmente reforada pela permissividade da
sociedade em relao ao consumo de droga."
Dever tambm dar exemplos de estratgias e actividades susceptveis de alterar (ou
que j alteraram) o fenmeno. Se tiver conhecimento de intervenes especficas que
tenham sido conduzidas com xito, descreva-as da forma mais pormenorizada
possvel. Mesmo que no tenha conhecimento de qualquer interveno semelhante
que tenha sido bem sucedida, poder descrever minuciosamente os elementos e
caractersticas que considera necessrios para o seu tipo de interveno.
"Espera-se que a implementao de aces de preveno primria, a nvel
regional ou nacional, tenha incidncia na evoluo do fenmeno. Entre as

EMCDDA / OEDT 29

actividades que podero abrandar o aumento do consumo de droga incluemse: campanhas de informao pblica, programas de preveno nas escolas,
fornecimento de informaes a grupos j organizados de pais ou
especialmente constitudos para o efeito e programas dirigidos aos alunos que
abandonam a escola."
"Para que um programa de aco tenha alguma utilidade, deve ser adaptado
s condies locais. necessria uma cooperao intersectorial e
interdisciplinar alargada. H ainda outros projectos que talvez possam contribuir
para alterar o fenmeno, tais como conferncias e iniciativas culturais
organizadas pelos prprios jovens."

1.3

A necessidade de uma interveno de preveno

a.
Quantas pessoas so afectadas pelo fenmeno? Qual o nmero
de novos casos e com que frequncia surgem? (prevalncia,
incidncia)
Para estimar a relevncia do fenmeno, necessrio calcular a sua dimenso e o
nmero de pessoas afectadas. Esta estimativa pode ser feita a nvel geral, nacional,
ou ao nvel mais especfico da comunidade, consoante a escala da interveno
proposta.. Veja a entrada sobre avaliao das necessidades, para mais indicaes
sobre o modo de obter a informao necessria.
"Um inqurito britnico nacional, realizado em 1991, revelou que mais de 30%
dos jovens de 15-16 anos admitiram j ter consumido drogas ilcitas,
especialmente cannabis e LSD."
"Estimativas comunitrias da prevalncia do consumo regular de lcool (pelo
menos uma vez por semana) entre a populao na faixa etria dos 13 aos 18
anos: 30-50% de um total de 540 pessoas. Incidncia estimada: 50 a 60
pessoas nesta faixa etria, por ano."
b.
Como prev que o fenmeno evolua se nada for feito? Quais os
fundamentos dessa previso?
importante elaborar um prognstico, bem fundamentado, da evoluo que o
fenmeno poderia assumir no futuro, caso a interveno no tivesse lugar. Deve
essencialmente determinar se o fenmeno melhoraria ou pioraria e se os padres de
consumo ou o grupo de consumidores mudariam, se nada fosse feito. Sem essas
respostas, a pertinncia da interveno planeada fica por provar.
"Considera-se provvel que o consumo indevido de substncias entre os jovens
continue a aumentar. As bebidas alcolicas soft j se encontram amplamente
disponveis e h a crena generalizada de que os consumidores de menor
idade so o alvo da sua comercializao. Os estudos efectuados indicaram
que o consumo de uma substncia desde a juventude prognostica o consumo
de outras drogas no futuro (Duncan et al, 1995)."

EMCDDA / OEDT 30

c.

Como descreveria a necessidade da interveno?

Independentemente do nmero de pessoas afectadas pelo fenmeno, ter de


explicitar as suas razes para a interveno de preveno planeada .
"O 'grande debate sobre o ecstasy mantm-se inaltervel. Tem-se verificado
um aumento drstico quer do consumo, quer das apreenses efectuadas, ao
longo dos ltimos anos (relatrio da polcia), enquanto que polticos e outras
figuras pblicas tm expressado a necessidade urgente de realizar aces
preventivas (reportagem no jornal, 23 de Janeiro de 1997)."
"As adolescentes com baixa auto-estima e pouco apoio da escola constituem
um grupo de alto risco em matria de consumo de droga e de lcool."
d.
Existem opinies diferentes quanto necessidade de uma
interveno? (variabilidade de perspectivas sobre a necessidade)
Pessoas de diferentes meios podem ter opinies divergentes quanto necessidade
de uma interveno. Tem de se assegurar de que, no seu caso, o grupo-alvo, os
decisores e os profissionais esto de acordo a respeito da necessidade de uma
interveno de preveno. Caso contrrio, poder ficar refm de um determinado
grupo com interesses especficos - um poltico local, por exemplo, que pretenda ser
reeleito. Prepare-se para possveis dificuldades decorrentes desta divergncia de
perspectivas!
"Os funcionrios locais do projecto, os especialistas da preveno e do
tratamento e os responsveis polticos esto de acordo quanto necessidade
desta interveno de preveno."
"Durante a fase de planeamento, o planificador do projecto identificou a
existncia de perspectivas divergentes sobre a necessidade de uma
interveno de preveno. Estas diferenas so devidas no s ao domnio
especfico [abuso de lcool], mas tambm ao perfil nacional de alguns dos
peritos. Os hbitos culturais diferem no tocante ao consumo de lcool em
situaes sociais e quantidade e frequncia do consumo."
e.
De que modo avaliou a necessidade de uma interveno?
(avaliao das necessidades)
Uma vez que tcnicas diferentes podem produzir resultados diferentes, deve
especificar cuidadosamente os seus mtodos.
"Consultmos pessoas-chave, com muitos anos de experincia de trabalho na
preveno da droga, no ensino e na formao de professores. Para alm das
discusses sobre o tema, no foi realizada qualquer anlise formal das
necessidades."

EMCDDA / OEDT 31

f.
Tem conhecimento de outras intervenes relacionadas com esta
que estejam em fase de execuo ou planeadas? Tenciona cooperar com
essas actividades?
No sentido de evitar sobreposies e duplicaes desnecessrias, til averiguar se
existem, ou esto planeadas, outras aces de preveno na sua rea, o que poder
tambm contribuir para o intercmbio de ideias e de experincias.
"J houve tentativas de utilizar a Internet para fazer preveno, mas a
interveno que planemos constituir a primeira diligncia sistemtica, no
nosso pas."
"H outras duas campanhas da droga nos meios de comunicao social,
dirigidas populao em geral e aos professores. Como a nossa campanha
de preveno dirigida aos jovens, no existe sobreposio."

1.4

O grupo-alvo

a.

O grupo-alvo o grupo-alvo final ou o grupo-alvo intermdio?

necessrio ser claro a este respeito, caso contrrio a sua interveno no ser
convincente.
"Concentramo-nos num grupo-alvo intermdio (professores)."
"Os grupos-alvo do projecto so os alunos (grupo-alvo final), bem como os
professores e os pais (grupos-alvo intermdios)."
b.
Quais so as caractersticas sociodemogrficas do grupo-alvo, a
amplitude do fenmeno e a dimenso do grupo?
Estas caractersticas incluem a idade, o sexo e a raa, bem como o estatuto
socioeconmico e o ambiente onde as pessoas vivem. Dever tambm referir
quaisquer outras caractersticas do grupo-alvo que sejam relevantes para a sua
interveno, alm de localizar o fenmeno no interior do prprio grupo, e de fornecer a
indicao da dimenso deste ltimo. Se houver mais de um grupo-alvo, deve seguir
estas indicaes para cada grupo, separadamente.
"O grupo-alvo vive numa zona social e economicamente desfavorecida: uma
comunidade quase sem infra-estruturas, nos arredores de uma cidade pequena
e isolada dos espaos verdes por uma auto-estrada. Vivem 150 famlias nesse
dito bairro de habitao social e o consumo de drogas frequente."
c.

Porque escolheu este grupo-alvo?

A escolha de um grupo-alvo pode ser influenciada por consideraes tericas (pode


tratar-se de um grupo de alto risco), por consideraes de ordem mais prtica (por ser
um grupo fcil de contactar ou muito motivado), ou por uma combinao de ambas.

EMCDDA / OEDT 32

"Este grupo-alvo foi escolhido pelo facto de a incidncia do consumo de droga


ser elevada e porque a existncia de um salo de reunies na aldeia nos dava
a oportunidade de chegar s famlias atravs do canal comunitrio."
"Escolhemos os alunos do 4 e do 8 ano como grupo-alvo final, devido aos
nveis elevados de consumo de herona. O grupo-alvo intermdio (meios de
comunicao social locais) foi escolhido porque desejava participar e devido
ao seu papel de formador da opinio."
d.

Quantas pessoas prev atingir?

A resposta a esta pergunta crucial. necessrio estabelecer objectivos realistas


para a interveno. Se o grupo-alvo potencial muito amplo, como acontece, por
exemplo, numa interveno regional ou nacional, em vez de dizer queremos atingir o
maior nmero de pessoas possvel prefervel fazer uma estimativa aproximada do
nmero de pessoas que conseguir, provavelmente, atingir e, depois, trabalhar no
sentido de cumprir essa estimativa.
"As 150 famlias da comunidade, cerca de 500 pessoas."
"Esperamos atingir entre 500 e 5 000 pessoas nos primeiros seis meses.
Contudo, devido natureza da Internet, difcil prever o nmero exacto de
pessoas que iro visitar o nosso site."
e.
Onde e como pretende contactar, recrutar e motivar o grupo-alvo?
(efeitos de seleco, efeitos de representatividade enviesamento)
Uma interveno que passa despercebida um desperdcio de tempo e de dinheiro.
H que reconhecer que um grupo-alvo no tem forosamente mais motivao para
participar numa interveno do que outro grupo qualquer e, por isso, deve preocuparse, acima de tudo, com a forma de motivar os potenciais alvos para que adiram
interveno e participem nela. Os possveis efeitos de seleco, o enviesamento e a
representatividade deficiente (ou mesmo excessiva) tambm devem ser tidos em
conta.
"No nosso programa a realizar no local de trabalho, todos os empregados
sero contactados directamente pelo director, atravs de uma carta e da
afixao de um aviso no painel. Os trabalhadores tero direito a interromper o
trabalho enquanto decorrer o programa."
"As crianas e os jovens (grupo-alvo final) sero abordados na escola, nos
centros de ocupao dos tempos livres, nos clubes juvenis, nas esquadras da
polcia e nas organizaes de voluntrios. Os pais (grupo-alvo intermdio)
sero contactados atravs da escola, no emprego e mediante informaes nos
meios de comunicao social."
f.
Como prev assegurar a permanncia
interveno? (desgaste ou mortalidade)

EMCDDA / OEDT 33

do

grupo-alvo

na

O que foi referido sobre a motivao inicial aplica-se continuidade da participao pouco provvel que todos os participantes se comprometam formalmente a cooperar
na interveno, pelo que nada impede que a abandonem. O risco de uma taxa de
mortalidade elevada tem de ser tido em conta, tentando evitar essa situao ou
encorajando as pessoas a manterem-se na interveno.
"Os professores recebero um Diploma de Preveno e Educao da Droga,
devidamente acreditado, depois de conclurem o curso."
"O programa escolar obrigatrio para todas as raparigas do 9 ano."
g.
Mesmo que a interveno que planeia seja exclusivamente dirigida a
um grupo-alvo intermdio, quais so as caractersticas do grupo-alvo
final?
Trata-se de um processo importante a considerar, no caso de no visar directamente
o comportamento de consumo de substncias, na medida em que o poder ajudar a
ter em vista o objectivo final da preveno.
"A interveno de preveno destina-se aos professores do ensino secundrio
enquanto grupo-alvo intermdio. O seu grupo-alvo so os alunos do 6 ano
(faixa etria dos 11-12 anos), a maioria dos quais ainda no consome drogas
ilegais, embora estejam em risco de vir a faz-lo."

1.5

Objectivos

a.
De que modo ir a interveno afectar o comportamento de
consumo de substncias do grupo-alvo final?
necessrio determinar em que medida a interveno ir modificar o comportamento
de consumo de substncias pois, mesmo que no o vise directamente, dever, em
ltima anlise, vir a afect-lo. Neste caso, dever concentrar-se sobretudo na
descrio dos objectivos que prev que afectem as variveis mediadoras ou o
grupo-alvo intermdio. Mesmo que no v efectuar uma avaliao dos resultados da
interveno, deve ter alguns objectivos definidos nesse sentido.
Apresentam-se, a ttulo de exemplo, o objectivo de defender as crianas do consumo
de qualquer droga, o de protelar a idade de incio do consumo de droga, o de reduzir a
quantidade e/ou a frequncia do consumo de substncias, etc..
"Os objectivos da interveno so: reduzir o consumo regular/excessivo de
lcool; diminuir o nmero de jovens que fumam tabaco regularmente e adiar a
primeira experincia com a drogas."
"O objectivo indirecto do projecto (que se destina a melhorar a actuao
familiar) a reduo do consumo indevido de substncias e dos consequentes
riscos."

EMCDDA / OEDT 34

b.
De que modo ir a interveno afectar as variveis mediadoras
directamente relacionadas com o comportamento de consumo de
substncias do grupo-alvo final (conhecimento sobre o consumo de
substncias, atitudes perante as drogas, inteno de consumir drogas,
normas)
Alm da influncia directa sobre o comportamento de consumo de substncias em si
mesmo, a interveno poder visar tambm a alterao das variveis mediadoras
relacionadas com esse comportamento. As intervenes de preveno primria
centram-se mais frequentemente nestas variveis mediadoras do que no prprio
comportamento de consumo de substncias.
"A interveno pretende aumentar os conhecimentos sobre o consumo de
substncias (por exemplo, consequncias individuais e sociais do alcoolismo)."
c.
Que objectivos esto previstos para outras variveis mediadoras?
(competncias quotidianas, factores de risco, factores de proteco,
alteraes estruturais, alteraes do estilo de vida e dos hbitos
culturais)
Alm das variveis mediadoras directamente relacionadas com o consumo de
substncias (conhecimento, atitudes, etc.), qualquer interveno poder afectar
profundamente outras variveis de carcter mais geral, facto de que dever estar
ciente logo no incio da fase de planeamento.
"A interveno ir melhorar a resoluo de problemas, aumentar a
capacidade de comunicao, reforar a auto-estima e fomentar a
criatividade."
d.
Qual a relao entre as variveis mediadoras e o comportamento
de consumo de substncias?
Se pretende que a interveno tenha impacto sobre as variveis mediadoras, deve
explicar a relao entre essas variveis e o comportamento de consumo de
substncias. A pergunta subjacente porque que pensa que o comportamento
relativamente ao consumo de substncias se alterar, desde que d a algum um
folheto sobre drogas ou promova a respectiva auto-confiana?
"Autonomia, boas relaes afectivas e apoio social da famlia e dos amigos
so considerados factores de proteco contra o consumo indevido de
substncias (Knzel et al, 1994)."
e.
Quais so os seus objectivos relativamente ao grupo-alvo
intermdio?
Se a sua interveno abrange um grupo-alvo intermdio, nesta seco deve
recapitular as ltimas quatro perguntas, mas agora relativamente a este grupo e no
ao grupo-alvo final.

EMCDDA / OEDT 35

"Relativamente aos professores, os objectivos da interveno so os seguintes:


aumentar a conscincia e a compreenso do consumo de substncias;
fomentar a compreenso de estratgias preventivas e educativas eficazes e
desenvolver competncias adequadas para trabalhar neste domnio (por
exemplo, competncias pedaggicas, de comunicao e de aconselhamento)."
"Melhorar o relacionamento entre pais e filhos."
f.
Que relao existe entre os objectivos definidos para o grupo-alvo
intermdio e os objectivos para o grupo-alvo final?
necessrio clarificar a relao entre os objectivos previstos para todos os gruposalvo. A questo fundamental compreender de que modo que as mudanas no
grupo-alvo intermdio se iro repercutir no grupo-alvo final. Sem uma
fundamentao clara da escolha desses objectivos, as suas implicaes na preveno
da droga ficam por esclarecer.
"Os pais desempenham um papel importante enquanto modelo de
comportamento para os adolescentes. A fim de modificar o comportamento
relativamente ao tabaco neste grupo-alvo final, necessrio influenciar tambm
o comportamento dos pais."

1.6

Mtodos

a.
Que estratgias, componentes e mtodos sero utilizados na
interveno?
Eis a parte nuclear do plano: a descrio pormenorizada das actividades de
preveno propostas.
"O mtodo pedaggico utilizado pelo Programa de Educao Sanitria a
Aprendizagem Activa que visa apoiar e possibilitar o desenvolvimento das
competncias bsicas dos estudantes. Ser aplicado nos trs anos do ensino
bsico elementar e abranger trs temas (tabaco, lcool, drogas ilegais). Entre
os mtodos incluem-se debates na aula, debates de grupo, entrevistas,
investigao/ inquritos, redaco de textos, dramatizao, desempenho de
papis, filmes etc.".
"A interveno destina-se a professores e educadores no domnio da droga,
tendo em vista aumentar os seus conhecimentos sobre as substncias ilegais
mais comummente consumidas, melhorar a sua capacidade de comunicao e
aperfeioar as competncias de ensino e aconselhamento de pequenos
grupos. Trata-se de um programa em quatro mdulos que d acesso a um
Diploma de Preveno e Educao da Droga. Os mdulos so baseados em
bibliografia e estudos relevantes."
b.

Quem ser envolvido na interveno de preveno?

EMCDDA / OEDT 36

Esta questo refere-se no s s pessoas que iro efectuar a interveno, mas


tambm s que vo informar o grupo-alvo final sobre a interveno. Se a interveno
visar especificamente o grupo-alvo final (populao escolar, por exemplo) possvel
- embora isto nem sempre acontea - que as pessoas que realizam a interveno
sejam as nicas envolvidas na mesma. Todavia, se tambm for visado um grupo
intermdio, de esperar que este se envolva, por sua vez, na divulgao de
informao sobre a interveno (por exemplo, estaes de rdio locais que passem
programas sobre o consumo de substncias, professores que se proponham dar aulas
no mbito da educao da droga). necessrio, por conseguinte, que inclua todos os
que espera que se envolvam na interveno.
"Os professores e os pais figuraro como os principais agentes de
mudana/grupo-alvo intermdio."
c.
Tem conhecimento de provas empricas do xito dos mtodos que
escolheu (por exemplo, literatura cientfica)?
No caso de j terem sido experimentadas intervenes semelhantes (ou elementos
das mesmas) noutro pas ou cenrio, dever apont-las e sintetizar os resultados mais
relevantes.
"No existem dados empricos directos que sustentem o xito da preveno
atravs da Internet, mas nalgumas reas com ela relacionadas, nomeadamente
a telemedicina, j se realizaram estudos sobre a satisfao dos clientes. Estes
estudos demonstram que, nalguns casos, os doentes at preferem comunicar
com um computador do que com um tcnico de sade."
d.

Quanto tempo ir durar a interveno?

Alm de saber quem, como e onde, igualmente importante saber quanto tempo se
prev que a interveno dure.
"O director do programa e os responsveis polticos chegaram a acordo sobre
uma durao de cinco anos, com a possibilidade de prolongar o programa por
outros cinco."
e.
Qual o calendrio previsto para a interveno (nmero de
actividades, durao e frequncia de cada actividade, etc.)?
Deve descrever tambm, mais detalhadamente, a durao de cada uma das
componentes da interveno.
"Trs reunies do grupo comunitrio de duas horas cada uma; 12 reunies de
grupo de trabalho de duas horas cada; cinco a oito seminrios complementares
para os pais. Para o grupo-alvo final: alunos do 4 ano - oito aulas de uma hora
por ano; alunos do 8 ano - quatro aulas de uma hora por ano."
"Aulas semanais (de uma hora cada) durante um ano, o que perfaz um total de
cerca de 40 aulas semanais."

EMCDDA / OEDT 37

f.

Tenciona testar a exequibilidade da interveno?

Antes de iniciar uma nova interveno ou uma j tentada e experimentada, num novo
domnio, deve procurar averiguar se a interveno ser aceite pelo grupo-alvo e se
tem possibilidades de alcanar os resultados esperados. Numa campanha nos meios
de comunicao social, poder, por exemplo, pr-testar os materiais que tenciona
utilizar junto de um grupo-piloto, perguntando-lhes o que pensam. Tambm poder
pedir a opinio de alguns professores sobre um manual para um projecto escolar, ou
fazer at um ensaio completo da interveno.
"Tencionamos utilizar uma maleta de informao sobre droga bem abastecida
de material relacionado com as drogas ou com o comportamento de consumo
de droga, tais como brochuras, textos sobre esse consumo, etc.. Planeamos
testar esta maleta com diversas pessoas, sem lhes dar qualquer orientao, e
pedir-lhes a sua opinio."
"Queremos inquirir 25 pessoas a respeito de um cartaz sobre os
comportamentos de risco, que concebemos para ser distribudo pelas escolas.
Pediremos s pessoas para descreverem aquilo que vem no cartaz, qual a
mensagem que consideram mais importante e se acham que adequado para
este fim."

1.7

Recursos

a.
Que pessoal ir levar a cabo a interveno e quais as qualificaes
requeridas?
S devero figurar na lista as pessoas que estaro directamente envolvidas no
projecto de preveno. Todos os recursos adicionais devero ser descritos nas
subseces seguintes.
"Director de projecto - caractersticas formais: mdico, formao em
psicoterapia, mnimo de cinco anos de experincia na realizao e avaliao
de programas de preveno. Caractersticas informais: credibilidade, aceitao
pelo grupo de presso comunitrio. Director executivo do projecto caractersticas formais: formao em psicoterapia, experincia profissional de
trabalho com adolescentes. Caractersticas informais: credibilidade, ter
crescido na comunidade onde a interveno de preveno tem lugar,
capacidade de identificao com os jovens."
b.

Quanto tempo ir a interveno exigir a cada uma dessas pessoas?

importante fazer um planeamento realista para evitar sobrecarregar as pessoas.


Deve ter sempre em conta os inconvenientes que podem advir se subestimar o tempo
necessrio para realizar a interveno.
"Chefe de projecto: duas horas por dia durante um perodo de dois anos.
Executor do projecto: 100%, isto , 40 horas por semana."

EMCDDA / OEDT 38

c.

Qual o oramento disponvel e quem o financia?

Refira o oramento global e a(s) fonte(s) de financiamento.


"Entre 200 000 e 300 000 ecus. Financiado pelo Instituto Nacional de Sade."
d.
Que recursos suplementares esto disponveis (por exemplo,
pessoas, organizaes, instalaes, materiais, etc.)?
Estes recursos devem ser identificados, pois podem constituir um apoio inestimvel.
"Est disponvel um gabinete para a preveno e o aconselhamento da droga,
totalmente equipado com computador pessoal, telefone e fax."
"Equipamento audiovisual e de projeco (monitores de TV), computador."
e.
Que factores so susceptveis de dificultar a implementao ou a
avaliao da interveno? (obstculos)
importante pensar nos obstculos potenciais, para descobrir maneiras de evit-los,
se e quando surgirem.
"Obstculos potenciais: dificuldades lingusticas, viagens demoradas, falta de
apoio financeiro e eventuais dificuldades dos profissionais, em termos de
tempo, para participarem plenamente."

1.8

Planeamento da Avaliao do Processo

a.

Est prevista uma avaliao do processo?

Basta responder sim ou no. Em caso afirmativo, ter de dar respostas mais
aprofundadas posteriormente (ver Captulo 2).
b.

De que recursos dispe para fazer uma avaliao do processo?

Pede-se que analise criticamente se possui ou no os recursos financeiros e humanos


para realizar uma avaliao do processo de forma adequada. Os custos em tempo e
dinheiro so frequentemente subestimados. aconselhvel reservar entre 10 e 30%
dos recursos financeiros ao dispor da interveno de preveno, para a avaliao do
processo e dos resultados.
"A avaliao ser realizada pela equipa de investigao da nossa unidade."
c.

Quem ir efectuar a avaliao do processo?

Dever ter planos especficos nesta matria. Refira o nome da organizao ou das
pessoas a quem espera pedir a realizao da avaliao. Descreva o seu papel
(interno ou externo relativamente interveno) e as suas caractersticas formais e
informais (membro do pessoal, qualificaes, etc.).

EMCDDA / OEDT 39

"Psiclogo - ser auxiliado por um membro do nosso pessoal. Um avaliador


externo realizar a avaliao do processo. J existem contactos com o Instituto
de Investigao da Sade Mental da universidade local."

1.9

Planeamento da avaliao dos resultados

a.

Est prevista uma avaliao dos resultados?

Tambm neste caso bastar responder simplesmente sim ou no. Em caso afirmativo,
ter de fornecer respostas mais aprofundadas, mais adiante (ver Captulo 3).
b.

De que recursos dispe para fazer uma avaliao dos resultados?

Pede-se que avalie criticamente se possui ou no os recursos financeiros e humanos


necessrios para realizar a avaliao dos resultados, de forma adequada. Os custos
de tempo e dinheiro so frequentemente subestimados. aconselhvel reservar entre
10 e 30% dos recursos financeiros ao dispor da interveno de preveno, para a
avaliao do processo e dos resultados.
"A avaliao dos resultados ser realizada pela equipa de investigao da
universidade local que colabora com o projecto."
c.

Quem ir efectuar a avaliao dos resultados?

Dever ter planos especficos nesta matria. Refira o nome da organizao ou das
pessoas a quem espera pedir a realizao da avaliao. Descreva o seu papel
(interno ou externo relativamente interveno) e as suas caractersticas formais e
informais (membro do pessoal, qualificaes, etc.).
"Haver um avaliador externo da equipa de investigao da universidade."

1.10 Reflexo sobre a fase de planeamento


a.

Quem esteve envolvido na fase de planeamento?

Dever mencionar de quem partiram as ideias e os anseios tomados em


considerao no planeamento da interveno, em que podem estar incluidos a equipa
que implementou a interveno de preveno, o grupo-alvo (intermdio/final),
decisores polticos e investigadores.
"O projecto foi concebido segundo um design de investigao/aco. O
primeiro passo foi avaliar a necessidade de uma interveno de preveno
entre o grupo-alvo. Para tal, entrevistmos famlias da comunidade,
perguntando-lhes onde esperavam que houvesse intervenes (na escola, na
famlia, na comunidade, etc.), em que medida esperavam que essas
intervenes fossem eficazes e quais as reas essenciais em que deveria
haver interveno. Deste modo, o grupo-alvo foi directamente envolvido na fase

EMCDDA / OEDT 40

de planeamento, juntamente com a prpria equipa de investigao, constituda


por dois psiclogos e dois assistentes sociais."
b.
Qual a sua apreciao global do modo como decorreu a fase de
planeamento?
Se surgiram dificuldades que resolveria de forma diferente no futuro, este o momento
de o dizer.
"Alguns aspectos da interveno planeada no foram suficientemente
ponderados. No decurso do planeamento, tornou-se evidente que tnhamos de
fazer planos mais concretos sobre o modo de transferir o benefcio da
interveno do nosso grupo-alvo intermdio (professores e assistentes sociais)
para o grupo-alvo final (populao escolar)."

EMCDDA / OEDT 41

Captulo 2: Avaliao do processo


2.1

Planeamento da Avaliao do Processo

a.
Que variveis e indicadores fornecero informaes teis sobre o
modo como a interveno foi levada a cabo? Que tipo de informao
(qualitativa ou quantitativa) pretende avaliar atravs da avaliao do
processo?
H quatro maneiras de conceptualizar as variveis e os indicadores teis:
M

A interveno ser implementada conforme foi delineada? Pode-se basear, por


exemplo, em relatrios de professores sobre a utilizao de um manual da
interveno.

Que parte da interveno atingir o grupo-alvo? Esta questo pode ser


respondida atravs de informao sobre o nmero de sesses de formao e
respectiva durao.

A interveno de preveno ser alterada durante a implementao? Os


relatrios de auto-avaliao dos formadores sobre qualquer adaptao
ocorrida no decurso da implementao da interveno sero teis, neste caso.

Qual a qualidade da interveno? Pode ser avaliada pelo grau de satisfao


sentida pelos alunos com a interveno.

A distino entre a informao quantitativa e a qualitativa reside na possibilidade de


exprimir essa informao em nmeros (quantitativa) ou em descries verbais
(qualitativa). Um exemplo de abordagem quantitativa a utilizao de um questionrio;
um exemplo de abordagem qualitativa a entrevista no-estruturada, sobre uma
experincia individual da interveno.
"Variveis a utilizar para avaliar a realizao da interveno de preveno:
observao e relatrio sobre se a interveno foi efectivamente realizada; o
nmero e a durao das sesses de formao; a satisfao de professores e
alunos. Alm destas medidas quantitativas, sero efectuadas entrevistas
colectivas a todos os professores, sobre o processo de implementao.
b.
Que mtodos e instrumentos sero usados? (entrevistas,
questionrios, instrumentos de observao)
Questionrios, entrevistas, relatrios, listas de verificao e registos escritos so
instrumentos susceptveis de utilizar para medir o processo. Outra possibilidade
poder ser o recurso observao durante a implementao da interveno.
"Realizar-se-o questionrios, entrevistas semi-estruturadas e entrevistas
informais, telefnicas, com o chefe da equipa. Efectuar-se-o entrevistas semiestruturadas aos formadores e aos participantes no curso e proceder-se-

EMCDDA / OEDT 42

observao de vrias sesses de formao e dos grupos-piloto, pelos


responsveis pela avaliao."
"O interesse, o comportamento e as atitudes dos estudantes durante a
interveno so indicadores de qualidade, que sero observados pelos
formadores e descritos num protocolo."
c.
Onde, quando e com que frequncia sero recolhidos os dados
sobre o processo? (design)
Estes aspectos so to importantes como os instrumentos de avaliao.
"No decurso de bailes e depois de cada interveno."
"Sero distribudos questionrios na sala de aula, depois de cada sesso de
formao, e realizar-se-o observaes durante a terceira, a sexta e a nona
sesses. Efectuar-se-o tambm entrevistas aos professores depois da quinta
sesso de formao."
d.
Quem fornecer a informao necessria para a avaliao do
processo?
Necessita tambm de saber quem ser inquirido ou examinado (por exemplo,
participantes
na
interveno,
formadores,
professores,
observadores
independentes, etc.).
"Obteremos informaes junto dos professores que aplicarem o programa, dos
directores das escolas onde o programa ser implementado e dos estudantes
que o frequentarem."
e.

Como planeia analisar os dados?

Nesta altura, deve planear se ir aplicar procedimentos estatsticos especiais ou se


apenas proceder descrio os dados. No primeiro caso, tem de possuir as
condies prvias necessrias para uma anlise de dados complexa (conhecimentos
estatsticos e equipamento tcnico).
"Os dados dos questionrios sero analisados pelo programa estatstico SPSS
(Statistical Package for the Social Sciences - Programa Estatstico para as
Cincias Sociais). O procedimento estatstico a utilizar ser o MANOVA."
"As entrevistas aos estudantes (satisfao com a interveno, interesse na
formao, benefcio pessoal, aumento dos conhecimentos, etc.) sero
analisadas e os resultados descritos comparativamente."
"Os dados sero analisados qualitativamente, a fim de apresentar uma
descrio tridimensional do processo de planeamento, organizao,
desenvolvimento e administrao de um curso de educao da droga, com
certificao atravs de um diploma devidamente acreditado. No mbito de uma
estratgia de investigao-aco, a equipa de investigao comunicar

EMCDDA / OEDT 43

regularmente as suas concluses ao chefe da Equipa de Preveno da Droga,


para que possam ser introduzidas alteraes que promovam uma constante
melhoria no curso."

2.2

Implementao da Interveno de Preveno

a.
Que estratgias, componentes e mtodos foram efectivamente
postos em prtica? Compare as suas respostas com o plano original na
subseco 1.6..
Ter, agora, de descrever, de forma pormenorizada, o que aconteceu efectivamente.
"Componentes
Os materiais pedaggicos utilizados pelo programa de Educao para a
Sade esto divididos em trs partes. A primeira trata do hbito de fumar
(contra-atacar o hbito de fumar, a linguagem da persuaso, a primeira
oferta, desistir do hbito). A segunda aborda o lcool (o quadro geral,
entre uma coisa e outra, um entre muitos, pergunta a ti prprio). A terceira
debrua-se sobre as drogas (imagens, um comprimido para cada doente,
porque no experimentar?). O anexo est dividido em trs seces (drogas",
informaes gerais, conhecimento de si prprio e como respiramos).
Todas as componentes foram implementadas nos trs anos do ensino
secundrio. Por exemplo, as partes um e dois da primeira seco, relativa ao
hbito de fumar, so implementadas no 1 e no 2 anos, a parte 3 no 2 ano e
as restantes no 3 ano. Por outras palavras, escolheram-se os materiais
adequados de acordo com a idade dos estudantes.
Mtodos
O mtodo pedaggico utilizado pela interveno a aprendizagem activa,
que visa apoiar e facilitar o desenvolvimento das competncias bsicas dos
estudantes. As actividades incluem: debates de turma, debates de grupo,
entrevistas, pesquisas/inquritos, atitudes, classificao, debate, redaco de
textos, desempenho de papis, os meios de comunicao social, cartazes,
envolvimento da comunidade, reflexo, etc.
Grupos-alvo intermdios
Os professores da escola secundria tiveram formao sobre os princpios e
os mtodos da interveno, facultada pela equipa cientfica, num seminrio de
trs dias. Esta formao foi aprovada pelo Departamento de Educao e a
participao dos professores foi voluntria. Juntamente com a necessria
autorizao do Departamento de Educao, foi indispensvel o consentimento
do director da escola e da Associao de Professores. A formao foi
realizada de acordo com o plano inicial.

EMCDDA / OEDT 44

Os pais tambm foram informados sobre os objectivos do programa de


Educao para a Sade. Tiveram a possibilidade de aderir a um grupo de
pais constitudo para o efeito, tendo o programa procurado promover, ao longo
de todas as suas fases, uma colaborao estreita entre as escolas e a
comunidade local."
b.
Que fontes de dados e instrumentos foram utilizados para medir a
implementao da interveno? Compare as suas respostas com o plano
original na subseco 2.1..
Entre essas fontes podem incluir-se os participantes, os formadores, o avaliador, um
observador independente, ou qualquer outra pessoa que tenha estado envolvida no
processo de implementao. Os instrumentos podem incluir questionrios, relatrios,
listas de verificao, entrevistas e grupos de debate.
"As pessoas envolvidas neste exerccio de avaliao foram as seguintes: os
professores que participaram no programa, os directores das escolas que o
implementaram e os estudantes que o frequentaram."
"A organizao da realizao do programa, a nvel regional, foi confiada a
equipas municipais de preveno da toxicodependncia na comunidade, que
prestaram informaes preciosas. Os professores, os pais e os alunos
constituram tambm fontes de dados."
A Caderno de Apontamentos para Professores alm de permitir comentrios
pessoais de cada professor que implementou o programa, tambm inclua
perguntas como: que elemento da interveno foi implementado? Em que
medida que as instrues do manual foram teis? possvel introduzir
melhorias nessas instrues? Registaram-se dificuldades durante a
implementao?"
c.
Que recursos foram efectivamente utilizados? Compare as suas
respostas com o plano original na subseco 1.7.
essencial determinar se os recursos foram utilizados conforme o planeado ou se
ocorreram alteraes. Este conhecimento ser extremamente til para qualquer
aplicao futura da sua interveno.
"Os recursos foram utilizados conforme o planeado, com a excepo seguinte:
o facto de 20% dos alunos terem abandonado a zona de residncia levou a que
a gestora do projecto precisasse de mais tempo para procurar os novos
endereos, a fim de enviar o questionrio de seguimento (follow-up). Assim,
em vez de 20 horas por semana, precisou de trabalhar 30 horas durante um
perodo de trs meses."

2.3

Regresso ao grupo-alvo

a.

Quantas pessoas foram efectivamente atingidas pela interveno?

EMCDDA / OEDT 45

Trata-se de uma pergunta bvia, mas crucial para que possa compreender melhor o
grau de coincidncia entre as intervenes efectivamente realizadas e as que estavam
planeadas.
"Foram contactados 450 alunos."
b.
Quais so as caractersticas sociodemogrficas das pessoas
atingidas pela interveno?
Esta informao to importante como o nmero de pessoas atingidas. A resposta
ajud-lo- no s a comparar o grupo-alvo previsto com o grupo-alvo efectivo, mas
igualmente a detectar eventuais efeitos de seleco.
"Sexo: 45 participantes do sexo feminino e 75 do sexo masculino. Trata-se de
uma proporo de 1 mulher para 1,7 homens. Educao: 10 estudantes do 3
Ciclo, 35 estudantes do Ensino Secundrio. 75 estudantes universitrios."
" Ensino bsico: 10% dos participantes. Escola secundria: 90% dos
participantes. O rendimento anual das famlias atingiu: <10 000 - 10%; 10 00125 000 - 60%; >25 000 - 30%."
"Outras informaes pertinentes: os participantes pertencem a uma minoria
tnica (mulheres marroquinas, muulmanas)."
c.

Como recolheu esta informao?

Uma vez que mtodos diferentes produzem resultados diferentes, importante saber
de que modo a informao foi recolhida. Diferentes mtodos de recolha de dados
podem gerar distores nas respostas - por exemplo, os participantes podem
sobrestimar o seu rendimento nos debates em grupo.
"Os dados sociodemogrficos foram recolhidos atravs de um questionrio
annimo. Este questionrio foi distribudo depois da primeira sesso e
recolhido na sesso seguinte."
Ao longo do trabalho, deve comparar as suas respostas com os planos iniciais, neste
caso o grupo-alvo previsto na subseco 1.4. Os desvios relativos ao grupo-alvo
durante a organizao da interveno podem provocar diferenas na implementao e
nos resultados finais.
"O grupo-alvo foi atingido conforme o planeado."
"Planemos atingir jovens entre os 15 e os 17 anos, visitando as festas rave.
Os participantes eram, na realidade, mais velhos (mdia de idades: 18,3
anos)."
"O ratio de homens e mulheres e o ratio de alemes relativamente a outras
nacionalidades deveriam ser iguais nos trs grupos experimentais. Na
realidade, no grupo de controlo havia mais 10% de alunos turcos do que nos
outros dois grupos."

EMCDDA / OEDT 46

2.4

Exposio

a.
De que modo avaliou a exposio? Que fontes de dados,
instrumentos ou indicadores utilizou efectivamente?
Um elemento crucial para perceber se a interveno atingiu o grupo-alvo previsto a
necessidade de estimar a visibilidade que ela teve efectivamente. Por exemplo, se
estiver a realizar uma campanha de informao pblica, necessitar de saber qual a
amplitude da distribuio de folhetos informativos. Dever ser igualmente claro acerca
das pessoas inquiridas na recolha dos dados relevantes. Estas fontes de dados
podero ser todas as pessoas envolvidas na interveno ou apenas algumas delas.
Mais uma vez, ter de discriminar os instrumentos de recolha de dados que foram
utilizados.
"Os professores das escolas que implementaram o programa foram a principal
fonte de dados. O Caderno de Apontamentos para Professores solicitava
comentrios sobre a implementao do programa, bem como informao
sobre o nmero de horas lectivas efectivamente cumpridas em cada turma."
b.
Quanto tempo durou realmente a interveno de preveno e
quantas actividades de preveno tiveram lugar? Compare as suas
respostas com o plano inicial na subseco 1.6.
Esta descrio da durao e do nmero de actividades realizadas ir ajud-lo a
calcular o nvel de exposio.
"Nos primeiros dois anos de implementao, cada turma teve 12 aulas de 45
minutos cada."
"O nmero de sesses variou entre 3 e 10, com uma mdia de 8,76 sesses. A
durao mdia de cada sesso oscilou entre menos de 30 minutos e mais de
50, com uma mdia de 40 minutos. As diferenas de tempo deveram-se
principalmente variao da durao dos perodos de aula, entre 45 e 55
minutos. A totalidade do programa consistia em dez sesses.
c.
Em que medida que o grupo-alvo foi efectivamente atingido?
Compare as suas respostas com o plano inicial na subseco 1.4..
Esta uma pergunta fundamental, pois mesmo que uma interveno de preveno
seja totalmente administrada ao grupo-alvo, uma parte desse grupo pode no ter sido
sujeito interveno, devido a ausncia, doena ou faltas.
"No total, participaram no programa 1.500 estudantes. 85% participaram nas
12 aulas do programa, 93% participaram em 10."

2.5

Qualidade da interveno de preveno

a.

Quem forneceu a informao sobre a qualidade da interveno?

EMCDDA / OEDT 47

Estas fontes podem incluir os participantes, os formadores, o avaliador, um


observador independente ou qualquer outra pessoa que tenha estado envolvida no
processo de implementao.
"Os professores e os alunos foram a nossa fonte de informao sobre a
qualidade das aces desenvolvidas."
b.
Que indicadores e instrumentos utilizou efectivamente para avaliar a
qualidade da interveno?
Entre os indicadores podem incluir-se a participao activa, as atitudes em relao
interveno, o benefcio pessoal, o grau de identificao. Os instrumentos podem ser
questionrios, relatrios, listas de verificao, entrevistas ou grupos de debate.
"Indicadores
Indicadores usados para os professores: eficcia demonstrada, grau de
satisfao, experincia de participao, versatilidade do programa, integrao
curricular, utilizao de material de apoio atractivo.
Indicadores usados para os alunos: reconhecimento do programa, adaptao
lingustica, vivncia pessoal do tempo dedicado ao programa, eficcia
revelada."
"Os professores receberam um questionrio que inclua perguntas sobre a
participao da turma no programa, a (in)disciplina (disruption) e o xito
alcanado. Procedeu-se tambm classificao global da qualidade da
implementao " do programa (1=muito mal a 4=muito bem).
Complementarmente, o observador, pertencente equipa de investigao,
realizou observaes aleatrias da implementao em cada escola, bem como
chamadas telefnicas e reunies peridicas com professores e directores de
escola. Os critrios de classificao da implementao foram discutidos entre
os membros da equipa de investigao e os do programa, antes de se
proceder observao propriamente dita, tendo-se chegado a um consenso
(utilizando exemplos hipotticos). Os itens incluam: a participao e o interesse
da turma observada, a completao das actividades da sesso, por parte dos
professores, bem como uma classificao global da implementao (1=muito
m a 4=muito boa). A classificao global do observador foi comparada com o
relatrio dos professores sobre a implementao da interveno no seu
conjunto."
c.

Quais so os resultados das avaliaes da qualidade?

Esta uma das perguntas mais cruciais, no caso de os resultados da interveno em


causa virem a ser utilizados para documentar intervenes futuras.
"A avaliao dos mtodos de ensino, da aquisio dos objectivos e do
envolvimento dos estudantes revelou os seguintes resultados: para 8,6%, os

EMCDDA / OEDT 48

mtodos de ensino foram ineficazes; para 10,4%, os objectivos no foram


alcanados; e para 13,4%, o envolvimento dos estudantes foi reduzido.
Contudo, as classificaes de qualidade global mostram que 52,7% das
classificaes foram excelentes, 46,7% foram boas, e apenas 0,6% das
classificaes foram ms."

2.6

Discusso dos resultados da Avaliao do Processo

a.
Que comparao se pode estabelecer entre os planos para a
interveno, a sua implementao efectiva e a avaliao que faz dela?
Existem discrepncias? Quais so as possveis razes dessas
discrepncias?
Dever apontar resumidamente quaisquer desvios e discrepncias verificados na
implementao da interveno, no grupo-alvo e na exposio. Esta actividade ajudlo- a analisar e a interpretar os resultados da interveno.
"A interveno foi implementada conforme o planeado - no se verificaram
discrepncias. O grupo-alvo tambm foi atingido de acordo com o que estava
previsto. Contudo, devido a faltas do pessoal, por motivo de doena, a taxa de
exposio foi inferior prevista. Em duas turmas, apenas se realizaram 6 das
10 aulas previstas."
b.

Qual o impacto das eventuais discrepncias sobre a interveno?

Caso existam discrepncias, dever analisar as suas consequncias para a


interveno. Isto ajud-lo- a compreender o significado das discrepncias no
contexto da implementao da interveno.
"Devido ao facto de a taxa de exposio ter sido mais baixa, difcil tirar
concluses sobre os efeitos da interveno. possvel que os resultados
negativos estejam relacionados com este facto."
c.
Quais so os pontos fortes e os pontos fracos da forma como a
interveno foi implementada? Compare-os com os resultados de outras
intervenes.
A resposta a esta pergunta ajud-lo- a evitar problemas semelhantes e a melhorar a
implementao no futuro. Se possvel, compare os resultados da sua interveno com
os de outras intervenes semelhantes relatadas na bibliografia. Trata-se de um
aspecto muito importante, pois constitui a base de qualquer apreciao sobre o mrito
da sua interveno.
"Os resultados deste estudo indicam uma alta qualidade na realizao do
programa, medida pelo nvel de exposio e pela apreciao global da
qualidade da implementao. Um problema relacionado com a generalizao
dos resultados decorre da assistncia que os professores receberam por parte
do pessoal do projecto. Os professores foram contactados telefonicamente e

EMCDDA / OEDT 49

tiveram a oportunidade de discutir os problemas. Esta assistncia contribuiu


provavelmente para a elevada motivao dos professores e tem de ser
demonstrado se possvel obter resultados semelhantes quando os
professores no recebem tratamento especial. As concluses da avaliao do
processo so consistentes com os resultados de outros programas escolares
sobre competncias quotidianas. (Petermann et al, 1997)."
d.
Tem sugestes para a implementao futura de intervenes de
preveno semelhantes?
Uma vez que j realizou uma interveno de preveno, encontra-se bem colocado
para fazer sugestes a outros planificadores.
"Futuramente, procuraremos: obter um maior envolvimento dos professores,
fazer uma anlise mais aprofundada das atitudes e do estilo de vida e modificar
o filme de vdeo, a fim de incluir uma parte especfica sobre as novas drogas."
e.
Tem sugestes para futuras avaliaes do processo deste tipo de
intervenes de preveno?
Tambm est j em boa posio para fazer recomendaes sobre avaliao do
processo.
"Depois de cada sesso, pedimos aos alunos que respondessem a um
questionrio sobre a sesso. Utilizmos o mesmo questionrio depois de cada
sesso e reparmos que os alunos respondiam de forma cada vez mais
descuidada. Sugerimos, por conseguinte, a incluso de perguntas especficas,
relacionadas com cada sesso, de modo a que a tarefa de responder aos
questionrios se torne mais interessante para os alunos."

EMCDDA / OEDT 50

Captulo 3: Avaliao dos Resultados


3.1

Planeamento da avaliao dos resultados

a.
Quais so os seus indicadores dos resultados e como prev
medir esses resultados?
A deciso sobre o modo de medir os resultados nem sempre fcil, mas crucial.
Devido aos constrangimentos temporais e financeiros, uma boa medida dos
resultados ter no s de ser exequvel, mas tambm de estar relacionada, de forma
mais ou menos directa, com os objectivos da interveno. A fim de saber se esta
ltima atingiu os seus objectivos, ter evidentemente de possuir um critrio claramente
definido para estes objectivos. Por outras palavras, dever ser operacionalizado e
claramente definido em termos mensurveis. Este aspecto particularmente
importante para as variveis mediadoras que, muitas vezes, no so facilmente
observveis.
"O principal indicador dos resultados ser o questionrio de auto-avaliao da
OMS, Inqurito sobre a Populao Estudantil. As perguntas incidem sobre
consumo de tabaco e de lcool, medicamentos e drogas ilegais, conhecimento
sobre as substncias, atitudes perante as mesmas, inteno de consumi-las e
comportamento anti-social."

b.
Pretende recolher informaes sobre os resultados mediante uma
avaliao quantitativa ou uma avaliao qualitativa? Que indicadores e
instrumentos se prope utilizar na recolha de informao?
A avaliao dos resultados de uma interveno, de forma cientificamente plausvel e
eficiente, exige dados quantificveis. Por conseguinte, se tenciona recolher
informao sobre os resultados seguindo uma abordagem qualitativa (por exemplo,
atravs de uma entrevista no estruturada) dever ter um plano para analisar as
respostas de forma quantitativa.
"A interveno planeia aumentar os conhecimentos e as competncias dos
educadores em matria de droga. Os conhecimentos sero medidos por um
teste escrito, a realizar aps a interveno, com 50 perguntas sobre temas
relacionados com a droga. As competncias educativas sero medidas
atravs: da elaborao, pelos participantes, de um projecto de programa
educativo sobre a droga, para um determinado grupo de utentes, num cenrio
pedaggico especfico; dum plano de aula e da respectiva concretizao. Os
participantes avaliaro o contedo e a apresentao do plano de aula uns dos
outros."

EMCDDA / OEDT 51

"Aplicaremos uma sub-escala (locus de controle) do Questionrio aos


Estudantes sobre Formao em Competncias Quotidianas (Botvin et al,
1984)."
c.
O que sabe acerca da qualidade dos instrumentos (objectividade,
fiabilidade, validade)? Tenciona testar a aplicabilidade dos
instrumentos?
Para analisar correctamente os resultados de qualquer avaliao, importante dar
informaes sobre a qualidade dos instrumentos utilizados. No caso de instrumentos
que j esto bem implantados, pode remeter para o respectivo guia ou manual.
Contudo, se elaborou os seus prprios instrumentos, talvez seja de considerar a
realizao de um estudo sobre a sua fiabilidade/validade. Testar a aplicabilidade de
um instrumento evidentemente aconselhvel num caso desses, mas dever proceder
de igual modo se utilizar um instrumento construdo para outra lngua, meio cultural,
regio, etc.. Numa situao dessas, talvez seja melhor solicitar uma validao externa,
quanto compreensibilidade e lgica do instrumento em causa.
"Planeamos utilizar o Children's Self Concept Attitudinal Inventory (SCATInventrio de Auto-Conceito Atitudinal da Criana). Enquanto teste de papel e
lpis, objectivo. Como evidncia da sua fiabilidade, as escalas do inventrio
tm um alfa de Cronbach mdio de 0,80. H igualmente provas da validade das
escalas baseadas no mtodo saber do grupo, que visa comparar estudantes
com elevado e baixo desempenho na escola. Tivemos de traduzir o
questionrio para a nossa lngua e, por isso, tencionamos realizar um pequeno
estudo de exequibilidade. Vamos pedir a dez alunos que respondam ao
inventrio e indiquem, para cada uma das questes, se compreendem o que
lhes estamos a perguntar."
d.
Junto de quem, quando e com que frequncia planeia recolher
informao sobre os resultados? (design)
Tambm importante ter uma ideia acerca da actualidade e difuso da informao
sobre os resultados.
"Utilizando um design quase-experimental, os dados sero recolhidos a partir
de um grupo experimental e de um grupo de controlo seleccionado de forma
no aleatria. A recolha de dados ter lugar em duas fases (uma semana antes
e uma semana depois da interveno)."
e.
De que modo planeia analisar as informaes que recolheu? Quais
os mtodos estatsticos adequados natureza dos dados e ao design?
Se planeia analisar os dados pessoalmente, deve descrever os procedimentos
estatsticos e o equipamento tcnico que pretende utilizar. Todavia, poder ser
aconselhvel entregar a anlise dos dados a um investigador experiente. Neste caso,
dever tambm indicar quem ir processar os dados.

EMCDDA / OEDT 52

"Os dados dos questionrios sero analisados pelo programa informtico


SPSS PC+. O processamento implica a elaborao de frequncias, quadros
com variveis mltiplas, valores mdios e comparaes entre as mdias por
grupo (qui-quadrado e t-teste)."
"A introduo e o processamento dos dados sero executados pela equipa de
investigao que trabalha para o nosso instituto."

3.2

A execuo da avaliao dos resultados

Se conseguiu concluir a avaliao dos resultados tal como estava planeada, poder
remeter para as perguntas respectivas na subseco 3.1. Se tiverem ocorrido
alteraes, descreva a avaliao tal como foi efectivamente conduzida.

3.3

A amostra

a.

Como foi recrutada a amostra ?

O modo como abordou a amostra (atravs da afixao de um aviso, um anncio no


jornal, passando palavra, etc.) to importante como o modo de recrutamento do
grupo-alvo na sua globalidade. O facto de a amostra ter participado de forma
voluntria ou obrigatria tambm significativo, sendo igualmente importante a
questo da existncia ou no de uma compensao monetria.
"O questionrio foi distribudo a turmas do 1 ano das escolas secundrias,
antes da implementao da Educaopara a Sade, e tambm s turmas de
duas escolas de controlo. O preenchimento do questionrio era obrigatrio e
teve lugar ao longo de duas horas de aula, consecutivas."
"O grupo experimental era constitudo por todas as pessoas que participaram
na interveno. O grupo de controlo foi recrutado entre estudantes da mesma
idade, sexo e caractersticas sociodemogrficas, que frequentavam os mesmos
nveis de ensino, na mesma rea geogrfica. Ambos os grupos decidiram
participar na avaliao dos resultados."
b.
Quais eram as caractersticas sociodemogrficas da amostra, a sua
dimenso, etc.?
As caractersticas da amostra e - se for caso disso - do grupo de controlo - devem
ser descritas separadamente e comparadas para detectar quaisquer diferenas
significativas. Tais diferenas provocam a diminuio do grau de comparabilidade
entre os dois grupos.
"Grupo experimental (n=120): 60 (50%) do sexo feminino, 60 (50%) do sexo
masculino. Mdia de idades 10,8 anos, Desvio-padro 2,4; amplitude 5,5-17,3.

EMCDDA / OEDT 53

Grupo de controlo (n=110): 80 (73%) do sexo feminino, 30 (27%) do sexo


masculino. Mdia de idades 11,0 anos, Desvio-padro 2,3, amplitude
6,5-17,6."
"Grupo-alvo intermdio: cinco professores, dois agentes da polcia para a
juventude e a comunidade, quatro educadores no domnio da droga. Os
participantes tinham idades compreendidas entre os 21 e os 55 anos. Grupos
tnicos: trs negros, oito brancos. Seis mulheres, cinco homens."
c.
Que semelhanas e diferenas tm
relativamente s do grupo-alvo no seu conjunto?

essas

caractersticas

Claro est que fundamental saber se a amostra representativa do grupo-alvo.


"Tal como planeado, recolhemos os dados sobre os resultados junto de um
subgrupo (20%) do grupo-alvo. Uma vez que administrmos o primeiro
questionrio sobre o comportamento de consumo de substncias a todos os
participantes na interveno, foi-nos possvel comparar as caractersticas
sociodemogrficas entre a amostra e a totalidade do grupo-alvo. No se
verificaram diferenas significativas em termos de idade, sexo ou outras
caractersticas."
d.
Conseguiu identificar os abandonos? Em caso afirmativo, quais
eram as suas caractersticas?
Se as pessoas que no permaneceram na amostra at ao fim da recolha de dados
diferirem significativamente das restantes, por exemplo quanto idade ou ao sexo,
provvel que a amostra tenha deixado de ser representativa.
"Toda a gente permaneceu na amostra. Por conseguinte, no houve
abandonos."
"Efectumos uma comparao estatstica sobre as diferenas entre as
pessoas que abandonaram o projecto e a amostra remanescente (idade, sexo,
estatuto socioeconmico, etc.). No se verificaram diferenas significativas
entre os dois grupos. Por conseguinte, os grupos so comparveis."

3.4

Os resultados

Esta subseco crucial deve obedecer ao mesmo formato que a anterior descrio
dos objectivos da interveno (subseco 1.5). As trs primeiras perguntas referem-se
s variveis dos resultados no grupo-alvo final, as restantes aos resultados no
grupo-alvo intermdio.
a.
Em que medida que a interveno afectou o comportamento de
consumo de substncias do grupo-alvo final?
"A formao em matria de competncias quotidianas teve um efeito
significativo em termos de preveno primria. A prevalncia do hbito de

EMCDDA / OEDT 54

fumar, durante trinta dias, na altura do ps-teste (um ano depois do pr-teste e
do incio da interveno) era significativamente mais baixa no grupo
experimental (6,4% tanto no ps-teste como no pr-teste) do que no grupo de
controlo (11,4% no ps-teste em comparao com 5,5% no pr-teste)."
b.
Em que medida que a interveno afectou as variveis mediadoras
relacionadas com o consumo de substncias no grupo-alvo final?
"Havia uma diferena significativa entre o grupo experimental e o grupo de
controlo relativamente ao conhecimento sobre o consumo de substncias. O
conhecimento era superior no grupo que tinha recebido a interveno. Nenhuma
das outras variveis produziu resultados significativos. No se encontraram
diferenas entre os grupos, no tocante s atitudes positivas perante o consumo
de drogas, inteno de consumi-las, ou s regras positivas relativas ao
consumo de droga."
c.
Em que medida que a interveno afectou outras variveis
mediadoras no grupo-alvo final?
"At data, apenas se encontraram diferenas significativas para uma varivel
mediadora. Os valores mdios para a competncia social eram
significativamente mais elevados no grupo experimental do que no grupo de
controlo (p<0,05)."
d.
Em que medida que a interveno afectou os objectivos do
grupo-alvo intermdio?
"A nossa campanha nos meios de comunicao social teve uma influncia
positiva sobre os grupos-alvo intermdios (pais e professores). Oitenta por
cento afirmaram que agora reflectem mais sobre a sua responsabilidade para
com as crianas e os adolescentes; 61% disseram ter aprendido muito sobre o
consumo indevido de substncias; e 45% afirmaram que agora pensam mais
sobre o seu prprio consumo de lcool e tabaco."
e.
Os diversos subgrupos so afectados de modo diferente pela
interveno? (por exemplo, homens/mulheres, grupos etrios, grupos de
risco, etc.).
"Aps a interveno, as raparigas revelaram um conhecimento superior sobre o
comportamento de consumo de drogas, em comparao com os rapazes
(t-Test p<.05)."

3.5

Discusso das concluses da avaliao dos resultados

a.
A interveno atingiu os resultados esperados? Examine eventuais
discrepncias entre as expectativas e os resultados, avanando as possveis razes
das mesmas e o respectivo impacto sobre o estudo.

EMCDDA / OEDT 55

Neste ponto, deve tentar antecipar eventuais argumentos contra a sua interpretao
dos resultados obtidos.
"Um dos objectivos da interveno era fomentar as competncias quotidianas.
At agora, apenas uma das variveis mediadoras se revelou significativamente
diferente no ps-teste - uma escala de medida da competncia social. No
perodo que decorreu ente as medies, as crianas do grupo experimental
revelaram uma melhoria muitssimo superior das crianas do grupo de
controlo. Dado que a escala de medida da competncia social contm alguns
comportamentos que so elementos importantes da interveno de preveno
(por exemplo, aprender a dizer no), os progressos registados pelo grupo
experimental podem ser considerados como confirmao do xito do
programa. Para alm da menor prevalncia do hbito de fumar neste grupo,
estes progressos tambm constituem uma confirmao indirecta do
pressuposto terico de que a melhoria das competncias quotidianas constitui
uma importante interveno de preveno primria."
b.
Quais dos resultados a que chegou considera mais relevantes e
significativos? Compare-os com os resultados de outros estudos.
"Um efeito de preveno primria semelhante sobre o hbito de fumar
(nomeadamente o adiamento da respectiva iniciao) foi frequentemente
mencionado como resultado da formao em competncias quotidianas
(Botvin, 1995)."
c.
At que ponto est seguro de que foi a interveno que causou os
resultados? Existem quaisquer explicaes alternativas para esses
resultados?
Sem uma resposta a estas perguntas, sempre possvel lanarem-se dvidas sobre
uma interveno. Por conseguinte, extremamente importante que aborde a questo
da causa e efeito.

"Dado no termos um grupo de controlo, no podemos afirmar com segurana


que os efeitos foram efectivamente causados pela nossa interveno. Uma
influncia importante a considerar o amadurecimento dos participantes ao
longo do ano."
d.

Como explica os resultados negativos?

O facto de uma avaliao dos resultados no confirmar os resultados esperados, pode


ser muito desanimador. Contudo, muito possvel que existam vrias explicaes
para os resultados negativos, tais como insuficincias da prpria interveno ou da
sua implementao (a avaliao do processo pode ser til neste ponto, para clarificar
os aspectos relevantes), falhas do design, inadequao dos instrumentos de medida
(alguns podem ser demasiado rgidos), ou ainda problemas externos que escapam ao

EMCDDA / OEDT 56

controlo da interveno (um incndio numa escola, por exemplo). Seja qual for a razo,
se deparar com resultados inesperados deve procurar encontrar uma explicao para
os mesmos, a fim de poder tirar concluses para o futuro.
"Ao contrrio das nossas expectativas, no se registaram efeitos no consumo
de lcool. Isto pode dever-se ao facto de a prevalncia do consumo de lcool
ser muito baixa neste grupo etrio sendo, portanto, possvel que os efeitos
surjam mais tarde. Realizar-se-, assim, um segundo estudo de
acompanhamento, ao fim de um ano. Tambm possvel alegar que o tema do
consumo de lcool irrelevante para este grupo etrio."
e.
Tem sugestes
semelhantes?

para

utilizao

futura

de

intervenes

Pode agora olhar para o futuro. Considera que outras pessoas podero reproduzir a
sua interveno? Em caso afirmativo, h algumas alteraes que queira recomendar?
"Os resultados positivos da interveno justificam a sua implementao numa
base muito mais ampla. Todavia, os resultados da avaliao do processo
tambm devero ser tidos em conta, sendo necessrio fazer alteraes na
estrutura da formao, de acordo com os comentrios do professor."
f.
Tem sugestes para futuras avaliaes dos resultados, deste tipo de
interveno de preveno?
As suas experincias e sugestes podero ter uma importncia crucial para outros
avaliadores e tcnicos. Estes podero beneficiar no s com os resultados positivos,
mas tambm com os negativos, evitando a repetio de erros. Da que seja essencial
uma absoluta honestidade.
"Um motivo para a ausncia de resultados positivos poder ser a falta de
instrumentos de boa qualidade para os alunos dos 10 aos 12 anos. Devero
realizar-se, por conseguinte, estudos futuros sobre o desenvolvimento e a
utilizao de instrumentos rigorosos e adequados para este grupo etrio."

EMCDDA / OEDT 57

Captulo 4: Comunicao dos resultados


4.1

Desenvolvimento de um plano de comunicao

a.

Quem deve ser informado?

Entre os pblicos potenciais contam-se os organismos financiadores, os responsveis


polticos, os gestores, o grupo-alvo da interveno, os prestadores de servios, os
grupos comunitrios e os meios de comunicao social.
"Pusemos a nossa avaliao disposio dos parceiros do projecto, das
autoridades e do pblico em geral."
"Em primeiro lugar, informaremos a comisso de planeamento, uma vez que a
principal utilizadora da informao. Daremos especial ateno presidente da
comisso, que possui grande experincia e uma lder de opinio respeitada.
Inform-la-emos pessoalmente, antes da reunio geral da comisso, e
discutiremos as concluses potencialmente controversas."
b.

Quando devem essas informaes ser comunicadas?

Se pretende que os resultados da sua avaliao tenham utilidade, o momento


oportuno para a apresentao do relatrio de avaliao pode ser decisivo. Deve ter o
cuidado de no esperar demasiado tempo para apresentar os resultados, pois mais
provvel que ocorram alteraes pouco depois de uma avaliao e enquanto a
interveno ainda est ntida na memria das pessoas. Em contrapartida, deve evitar
apresentar os resultados cedo demais. Os avaliadores sentem-se muitas vezes
compelidos a fornecer uma primeira impresso de eficcia, mas tais impresses tm
uma utilidade limitada, pois no tero sido recolhidos dados suficientes para permitir
concluses vlidas. As primeira impresses tambm tendem a fazer com que as
ltimas impresses passem despercebidas.
"Haver dois relatrios intermdios e um relatrio final destinados ao
organismo financiador. Os professores sero continuamente informados sobre
os resultados, nas reunies que tm lugar de dois em dois meses."
c.
Em que
destinatrios?

informaes

estaro

interessados

os

diferentes

Adapte a sua mensagem ao pblico destinatrio. Tenha sempre presente que pblicos
diferentes necessitam de informaes diferentes. Os tcnicos, por exemplo, estaro
provavelmente mais interessados nos detalhes da implementao, do que os
financiadores. Tambm possvel que estes ltimos estejam demasiado ocupados
para ler um relatrio inteiro, pelo que a elaborao de um resumo ser da maior
importncia. O referido resumo dever conter uma breve descrio da avaliao, uma
explicao das razes por que foi realizada e, ainda, os principais resultados,
concluses e recomendaes.

EMCDDA / OEDT 58

"Realizaremos discusses de equipa com os professores, enquanto principal


grupo-alvo intermdio, durante todo o perodo de avaliao do processo, e
comunicaremos regularmente a informao que recebemos. O principal
utilizador da avaliao dos resultados a organizao financiadora, que espera
um relatrio escrito exaustivo sobre as respectivas concluses, no final da
avaliao."
d.

Que formas de comunicao escrita ir utilizar?

Os resultados da avaliao podem ser comunicados de diversas formas, que tambm


tm de ser escolhidas de acordo com o pblico a que se dirigem. Entre os exemplos
de comunicao escrita incluem-se: o relatrio de avaliao, um resumo do mesmo,
memorandos, comunicados imprensa, artigos em revistas ou jornais cientficos,
cartazes e folhetos.
"Publicaremos um relatrio da investigao para ser distribudo s escolas e a
outros organismos pblicos e privados que trabalhem no domnio dos
problemas da juventude e respectiva preveno."
e.

Que formas de comunicao oral ir usar?

O texto escrito no tudo. Com efeito, h muitas concluses que podem ser
divulgadas de forma mais eficaz atravs de discusses pessoais, apresentaes e
conferncias ou, ainda, em audies pblicas e comparncia nos meios de
comunicao social.
"Os resultados do programa sero apresentados numa conferncia da
Associao Nacional para a Toxicodependncia e durante a Semana Europeia
de Preveno da Droga."

EMCDDA / OEDT 59

PARTE C: GLOSSRIO
Abordagem qualitativa
Nas abordagens qualitativas de avaliao, o objectivo compreender um programa ou
aspectos particulares do mesmo, na sua totalidade. Em vez de iniciar o estudo com
um conjunto prvio de expectativas para a anlise e medio dos processos e
resultados (abordagem quantitativa), d-se nfase descrio pormenorizada e
compreenso em profundidade, tal como emerge do contacto directo e da vivncia
com o programa e os seus participantes. As tcnicas qualitativas assentam na
observao, em entrevistas, estudos de caso e outros meios de trabalho de campo.
Esta abordagem pode ser aplicada exclusivamente ou em combinao com
abordagens quantitativas, por exemplo, quando um programa enfatiza os resultados
individualizados, quando h preocupaes com a qualidade do programa ou quando
os objectivos de um programa so bastante imprecisos. Os dados qualitativos no
podem ser facilmente resumidos em termos numricos, mas podem ser transformados
em dados quantitativos.

Abordagem quantitativa
Os dados quantitativos so observaes que podem ser facilmente representadas de
forma numrica, tais como as respostas a questionrios estruturados. As abordagens
quantitativas de avaliao ocupam-se primordialmente da medio de um nmero
finito de resultados especificados. A tnica colocada na medio, na sntese, na
agregao e na comparao das medies e ainda na interpretao do significado
das anlises quantitativas. Os designs experimentais e a utilizao de grupos de
controlo so tcnicas frequentemente utilizadas nas abordagens quantitativas. Estas
tcnicas so particularmente importantes quando o objectivo primordial da avaliao
determinar a eficcia do programa (abordagem qualitativa).

Adeso
A adeso um dos aspectos da implementao de uma interveno, juntamente com
a fidelidade e a remodelao. Normalmente, avalia se um programa foi
implementado no grupo experimental e no no grupo de controlo e se ambos os
grupos aderiram ou no s respectivas condies experimentais. Tambm so
indicadores de adeso no grupo experimental o facto de o programa ter sido ou no
implementado de forma suficientemente rigorosa para se concluir que foi cumprido, ou
de o programa ter tido ou no a durao suficiente para o grupo-alvo se aperceber
dele.

EMCDDA / OEDT 60

Alteraes inesperadas
As alteraes inesperadas na implementao ou na avaliao do programa so
alteraes ou desvios relativamente ao plano do programa, que no foram planeados
nem previstos. Podem ter consequncias negativas (falta de aceitao do programa,
mudanas de circunscrio escolar, cortes oramentais, etc.), mas tambm podem ter
consequncias positivas, como taxas de participao inesperadamente elevadas ou o
aparecimento de patrocinadores adicionais.

Alteraes intencionais
As alteraes intencionais so introduzidas propositadamente, a fim de melhorar a
interveno ou a avaliao.

Atitudes perante as drogas


As atitudes perante as drogas incluem todas as opinies, convices e normas que as
pessoas tm relativamente s drogas. So exemplo disso afirmaes como beber
lcool faz as pessoas comportarem-se de forma estpida, as pessoas que
consomem cannabis divertem-se mais, etc. As atitudes perante as drogas so
variveis mediadoras, frequentemente utilizadas como indicador na avaliao dos
resultados, embora nem sempre se consiga estabelecer uma relao causal com o
comportamento de consumo de drogas. Acredita-se, todavia, que as atitudes positivas
face s drogas levam a um agravamento do comportamento de consumo de droga, ao
passo que as atitudes negativas fazem declinar esse comportamento.

Avaliao das necessidades


A avaliao das necessidades (ou anlise das necessidades) a apreciao
sistemtica do fenmeno observado e da adequao da interveno proposta.
essencial para evitar juzos incorrectos sobre a dimenso e a natureza do problema
em causa e, por conseguinte, sobre a necessidade dessa interveno especfica.
Podem utilizar-se diversas tcnicas na avaliao das necessidades.
A abordagem do informante-chave envolve a identificao, a seleco e a consulta
de peritos que trabalham neste domnio. O valor desta tcnica reside na possibilidade
de obter uma impresso clara das necessidades e dos servios requeridos para o
grupo-alvo. A sua limitao deve-se ao facto de tal impresso poder basear-se em
preconceitos dos peritos ou em informaes tendenciosas. , por isso, uma boa
estratgia elaborar uma estrutura para a questo que ser com todos os peritos. Isto
permitir comparar as respostas dos diversos peritos. As perguntas devem visar
informaes especficas e concretas (quem, onde, o qu e como), como meio de
controlo adicional contra as informaes enviesadas.
A abordagem do frum comunitrio baseia-se na realizao de reunies abertas com
membros da comunidade. Pode ser utilizada para reunir informaes sobre a

EMCDDA / OEDT 61

prevalncia e a incidncia de um problema e sobre as caractersticas da


populao-alvo. Tal como acontece com a abordagem do informante-chave colocase a hiptese da informao enviesada, devido a uma sub-representao ou sobrerepresentao dos indivduos afectados pelo problema no frum comunitrio. Por
conseguinte, poder-se-o obter melhores resultados se o avaliador estudar um sector
transversal da comunidade. Mais uma vez, til fazer perguntas especficas, a fim de
assegurar a validade da informao.
A abordagem baseada na proporo de pessoas em tratamento estima a
populao-alvo atravs da anlise da experincia de uma aco de preveno
semelhante noutra comunidade. O pressuposto subjacente a esta abordagem o de
que as caractersticas e a dimenso dos dois grupos sero semelhantes.
A abordagem baseada nos indicadores estima a populao-alvo com base em
dados epidemiolgicos das fontes estatsticas nacionais. Estas estatsticas so
normalmente geradas por diversos organismos governamentais, sendo frequente
haver dados disponveis sobre as populaes das cidades grandes e pequenas e dos
distritos.
Por ltimo, os inquritos especialmente encomendados para avaliar a natureza e a
extenso do problema especfico encontram-se entre as formas mais directas e
frequentemente mais precisas de estimar a necessidade de realizar uma interveno.

Avaliador
A pessoa que actua como avaliador deve estar familiarizada com o planeamento da
avaliao, a metodologia de investigao social, os designs estatsticos e os
problemas com eles relacionados. Deve possuir conhecimentos estatsticos
suficientes para analisar os dados recolhidos, durante a implementao da
interveno, e estar familiarizada com programas informticos especficos (tais como
o SPSS, o SAS). Uma vez que a avaliao sistemtica se baseia na investigao em
cincias sociais, muitos especialistas de avaliao tambm tm uma formao bsica
em cincias sociais.
H dois modelos bsicos para a relao do avaliador com a organizao que realiza a
interveno - podendo efectuar uma avaliao interna (quando faz parte da
organizao implementadora) ou uma avaliao externa (quando trabalha para um
instituto de investigao, um gabinete de consultoria ou uma universidade). Ambas as
opes tm prs e contras. Dado os avaliadores internos terem melhor acesso ao
pessoal e administrao do programa, podem estar mais familiarizados com a
interveno do que um avaliador externo. Muitas informaes susceptveis de ser
obtidas informalmente no estaro disponveis para um avaliador externo.
Normalmente, o facto de conhecer bem o avaliador interno e confiar nele leva o
pessoal a estar mais disposto a consagrar tempo avaliao, admitir problemas e
partilhar confidncias. Os resultados da avaliao tambm podem ser comunicados
ao pessoal do projecto de forma mais fcil e informal. A desvantagem evidente de um
avaliador interno poder ser a falta de objectividade decorrente, em primeiro lugar, da

EMCDDA / OEDT 62

sua dependncia relativamente organizao e, em segundo lugar, da sua relao


pessoal com o pessoal do programa.
Quer os avaliadores internos quer os externos podem realizar os trs tipos de
avaliao: do planeamento, do processo e dos resultados. Contudo, h certas
situaes que se adequam melhor a um ou outro tipo de avaliador. A avaliao do
planeamento e do processo podero ser mais adequadas para um avaliador interno,
enquanto a avaliao dos resultados poder ser realizada com vantagem por um
avaliador externo.

Competncias quotidianas
As competncias quotidianas permitem que as pessoas lidem, de forma eficaz, com
as exigncias e os desafios da vida quotidiana, sendo transmitidas atravs do ensino
de um comportamento adequado e positivo. Aumentam a competncia individual,
reduzem a susceptibilidade ao consumo de droga e promovem a sade e o bem-estar
de crianas e adolescentes. As intervenes de preveno visam frequentemente as
seguintes competncias quotidianas: capacidade de tomada de decises e de
resoluo de problemas, pensamento criativo, pensamento crtico, capacidade de
comunicao e de estabelecimento de relaes interpessoais, conhecimento de si
prprio, empatia, capacidade de lidar com as emoes e com a tenso e capacidade
de rpida recuperao (resilincia).

Comportamento de consumo de substncias


O comportamento de consumo de substncias refere-se ao consumo de uma
determinada substncia. Este comportamento pode ser descrito em termos das
substncias consumidas (lcool, herona, cocana, cannabis etc.), dos padres de
consumo (ocasional, regular, recreativo, consumo indevido, consumo com
dependncia, etc.) e da frequncia do consumo.

Conhecimentos sobre o consumo de substncias


Este conceito refere-se ao conhecimento concreto que os participantes tm sobre o
consumo de substncias. Com base na mxima de que saber poder, parte-se do
princpio de que o desconhecimento deixa as pessoas expostas ao consumo de
substncias, ao passo que o conhecimento dos factos relevantes lhes permite
escolher padres de estilo de vida saudveis. O conhecimento sobre o consumo de
substncias uma varivel mediadora frequentemente utilizada como indicador
na avaliao dos resultados.

Design
O design um plano que indica com que frequncia, quando e junto de quem a
informao ser recolhida, no decurso de uma avaliao. Um bom design essencial
para que os resultados de uma avaliao possam vir a ter utilizao futura. Um design

EMCDDA / OEDT 63

que tenha pelo menos um grupo experimental e um grupo de controlo designado


por design de grupo de controlo; um design de sries temporais utiliza apenas um
grupo experimental, mas efectua, no mnimo, trs recolhas de dados. Um design que
no utiliza nem grupo de controlo, nem anlise de srie temporal o design pr- e
ps-teste.

Design do grupo de controlo


O design do grupo de controlo (ou design experimental) compara os dados obtidos a
partir do grupo de controlo com os resultados provenientes do grupo experimental, a
fim de identificar eventuais diferenas nas variveis que a interveno deve
supostamente alterar. H dois tipos de design do grupo de controlo: o verdadeiro
design experimental e o design quase-experimental. De acordo com o primeiro, os
participantes so aleatoriamente seleccionados para os grupos. Para assegurar o
carcter aleatria da distribuio, cada pessoa, ou grupo de pessoas, da populaoalvo deve ter a mesma possibilidade de ser seleccionada para o grupo experimental
ou para o grupo de controlo. Esta abordagem considerada a mais correcta porque
evita os desvios sistemticos (isto , o efeito de seleco, o enviesamento) entre
os grupos e aumenta a validade dos resultados da interveno. No entanto,
dispendiosa, o que leva a que, na avaliao das intervenes de preveno, a
aleatoriedade raramente seja assegurada. Em vez disso, tendem a ser utilizados
designs quase-experimentais em que as pessoas so seleccionadas para os grupos
atravs de outros procedimentos, tais como por semelhana (em que escolhido o
grupo de controlo que mais se assemelha ao grupo experimental).

Efeitos de seleco
Os efeitos de seleco reduzem a natureza representativa de uma amostra. Podem
dever-se ao facto de os participantes mais fceis de atingir serem tambm os mais
susceptveis de mudar. Os projectos assentes na cooperao voluntria so, por isso,
os mais frequentemente afectados pelos efeitos de seleco (ver tambm
enviesamento).

Entrevista
Nos estudos de avaliao, a entrevista um instrumento utilizado para avaliar os
dados sobre o processo e os resultados da implementao. As entrevistas podem
diferir quanto ao grau de padronizao (entrevistas estruturadas, semi-estruturadas ou
no-estruturadas), o tipo de contacto (frente a frente, telefnico ou por escrito), ou o
nmero de pessoas entrevistadas em simultneo (entrevistas individuais ou de grupo).

Enviesamento
O enviesamento refere-se a todas as espcies de alteraes, no planeadas e muitas
vezes despercebidas, que ocorrem no decurso do processo de recolha de dados e

EMCDDA / OEDT 64

que podem prejudicar os resultados da avaliao. Um exemplo de enviesamento a


situao em que s alguns subgrupos especficos do grupo-alvo seleccionado
participam na aco (apenas crianas muito motivadas, por exemplo). Uma tal
amostra est enviesada e os resultados podem ser invlidos. O enviesamento
tambm pode ser introduzido atravs da mortalidade e de erros de lgica no design
da avaliao.

Estilo de vida
O estilo de vida est relacionado com as atitudes especficas perante as drogas, em
determinados grupos e em condies sociais ou ambientais especficas. A cultura da
dana um exemplo de estilo de vida, em que a frequncia de clubes est associada
ao consumo de drogas sintticas. Uma aco de preveno pode ter entre os seus
objectivos a mudana de estilo de vida.

Exposio
A exposio serve para indicar em que medida o grupo-alvo efectivamente
experienciou a interveno. Isto inclui o nmero e a durao das sesses de
interveno e os materiais utilizados. O grau de exposio est igualmente
relacionado com os nveis de participao e o facto de os participantes terem ou no
sido realmente atingidos pela interveno

Factores de proteco
Os factores de proteco so uma circunstncia pessoal ou social que, segundo se
pensa, fazem diminuir a probabilidade - neste caso - de um consumo indevido de
substncias. So, por conseguinte, o oposto dos factores de risco. Podem alterar,
ou mesmo inverter, os prognsticos de evoluo negativa e permitir que os indivduos
superem acontecimentos negativos das suas vidas. Entre os factores individuais de
proteco, consistentemente identificados na bibliografia, incluem-se a competncia
social, a capacidade de resolver problemas, a autonomia e a auto-eficcia, o
sentimento de que a vida tem um objectivo e de que possvel controlar o futuro.
Exemplos de factores de proteco, no seio da famlia, so a assistncia e o apoio, a
definio de fronteiras, um grande respeito pelas crianas e o incentivo sua
participao e envolvimento. Factores de proteco mais gerais incluem o sucesso
escolar e a existncia de laos fortes com instituies com preocupaes sociais.

Factores de risco
Os factores de risco so circunstncias pessoais ou sociais que, segundo se julga,
aumentam a probabilidade - neste caso - do consumo indevido de substncias. So,
por conseguinte, o oposto dos factores de proteco. As evidncias sugerem que
as crianas socialmente inadaptadas e agressivas correm maior risco de desenvolver
problemas de droga do que as crianas melhor integradas. Vrios estudos

EMCDDA / OEDT 65

demonstraram que comportamentos anti-sociais como a agressividade podem


prognosticar - logo no primeiro ano do ensino bsico - uma iniciao precoce ao
consumo de substncias e posterior consumo indevido. A bibliografia faz a distino
entre os factores de risco na primeira infncia (tais como a falta de competncia social
e a falta de apoio social no seio da famlia), os factores de risco no final da infncia
(falta de capacidade para resolver problemas, normas familiares prejudiciais, falta de
auto-estima) e os factores de risco na adolescncia (influncia negativa dos pares,
auto-estima reduzida devido adolescncia).

Fiabilidade
A fiabilidade, a validade e a objectividade so indicadores importantes da
qualidade de um instrumento. A fiabilidade de um instrumento definida como o
grau em que se podem obter resultados ou valores idnticos, em recolhas de dados
repetidas com os mesmos sujeitos. Os ndices de fiabilidade revelam se o instrumento
produz ou no resultados consistentes. A falta de fiabilidade provoca o efeito de
atenuar ou ignorar as verdadeiras diferenas, quando estas existem. Se, por exemplo,
os resultados de uma interveno eficaz forem medidos com um instrumento sem
fiabilidade, a interveno pode parecer menos eficaz do que na realidade, e viceversa.

Fidelidade
Juntamente com a adeso e a remodelao, a fidelidade um aspecto da
implementao do programa. A fidelidade mede se o programa foi ou no executado
do modo como tinha sido inicialmente delineado, ou seja, at que ponto se manteve
fiel ao plano. possvel medi-la quer atravs do julgamento subjectivo de um avaliador,
quer pelo processo, mais objectivo, da documentao dos procedimentos, como, por
exemplo, da realizao do nmero requerido de sesses do programa.

Grupo-alvo
O grupo-alvo o grupo de pessoas, famlias, organizaes, comunidades ou qualquer
outra unidade identificvel a que uma interveno de preveno se dirige. Podem
identificar-se dois tipos de grupo-alvo: os grupos-alvo finais e os grupos-alvo
intermdios. Uma anlise e uma estimativa cuidadosas da dimenso e da natureza do
grupo-alvo so condies prvias essenciais para fundamentar a necessidade de
uma aco de preveno, alm de aumentarem a qualidade e a eficcia do projecto.

Grupo-alvo final
O grupo-alvo final o grupo de pessoas que em ltima anlise beneficiaro da
interveno. Podem ser visados directamente pela interveno ou indirectamente
atravs do grupo-alvo intermdio. Na identificao do grupo-alvo final, podem
utilizar-se dois conceitos: o conceito de populao em risco e o conceito de populao

EMCDDA / OEDT 66

necessitada. O primeiro abrange um segmento da populao com probabilidades


elevadas de desenvolver comportamentos de consumo de substncias (por exemplo,
crianas de lares desfeitos, crianas com pais ou irmos toxicodependentes). Em
contrapartida, o termo populao necessitada define a populao-alvo como uma
unidade com caractersticas especficas (por exemplo, todos os alunos do 5 ano).

Grupo-alvo intermdio
Um grupo-alvo intermdio um grupo de pessoas visadas por uma interveno e que
desempenham um papel de mediao. Espera-se que essas pessoas sejam capazes
de influenciar o futuro comportamento de consumo de substncias do grupo-alvo
final, transmitindo-lhe os contedos da interveno. As abordagens centradas no efeito
multiplicador, as baseadas nos grupos de pares e as dirigidas s famlias so
exemplos de aces dirigidas a um grupo-alvo intermdio.

Grupo de controlo
O grupo de controlo um grupo de pessoas que no participam na interveno de
preveno que est a ser avaliada. Este grupo ou no sofre qualquer interveno ou
alvo de aces que no estejam relacionadas com a interveno em causa.

Hbitos culturais
Neste contexto, os hbitos culturais so os comportamentos de consumo de
substncias que sofrem a influncia das normas culturais ou sociais, de uma
sociedade especfica. So exemplo disso o consumo de vinho s refeies, no sul da
Europa, ou o consumo de cerveja depois do trabalho, na Alemanha. Os hbitos
culturais determinam o consumo ou no consumo de drogas em situaes sociais, a
quantidade e a frequncia do consumo, podendo influenciar ainda a percepo do
comportamento de consumo de droga. Uma interveno de preveno poder ter
como objectivo a alterao destes hbitos culturais, de modo a fomentar a aceitao
de alternativas em que as drogas esto excludas.

Incidncia
A incidncia definida como o nmero de casos novos reveladores de um dado
fenmeno, que surgem numa rea geogrfica especfica durante um perodo de tempo
especfico.

Indicador
Um indicador uma medida que reflecte um problema ou circunstncia especfica. Os
indicadores so utilizados em substituio de um objectivo ou conceito que no
podem ser medidos directamente ou que apenas sero observados no futuro. A
seleco de indicadores adequados tem de ser alicerada na bibliografia, em teorias

EMCDDA / OEDT 67

ou em investigaes anteriores. Os indicadores so utilizados para medir a


qualidade da implementao ou o resultado de uma interveno.

Instrumentos
Os instrumentos referem-se a todos os mtodos utilizados na recolha de informaes
sobre o grupo-alvo, a avaliao, etc. Os instrumentos mais utilizados na avaliao so
os questionrios de auto-avaliao, os testes, as classificaes, as entrevistas e os
instrumento de observao. aconselhvel utilizar instrumentos com uma
objectividade, validade e fiabilidade bem fundamentadas. A aplicabilidade dos
instrumentos deve ser pr-testada, antes de uma utilizao em maior escala.

Instrumentos de observao
Os instrumentos de observao so utilizados para avaliar uma situao ou
circunstncia especfica. No caso da avaliao da preveno, a observao
normalmente utilizada para medir a implementao de uma interveno,
especialmente a sua fidelidade. utilizada quer como fonte nica de informao
quer como fonte adicional destinada a validar outras medies da implementao. A
observao, efectuada quer pelo pessoal de investigao quer por observadores
independentes, considerada a forma de medio mais objectiva, podendo ser
levada a cabo quer com pormenor narrativo, quer mediante a utilizao de questes
de estrutura padronizada ou esquemas de classificao.

Inteno de consumir drogas


A inteno de consumir drogas uma varivel mediadora, frequentemente utilizada
como indicador na avaliao dos resultados. Trata das crenas dos indivduos
como, por exemplo, se iro ou no consumir drogas no futuro. especialmente til nos
programas de preveno primria dirigidos s crianas mais novas, quando no faz
sentido perguntar se j consumiram drogas.

Interveno de preveno
Uma interveno de preveno descreve uma aco que ser realizada com o fim de
prevenir um comportamento de consumo de substncias. As intervenes de
preveno podem ser realizadas em diferentes cenrios e com diferentes mtodos e
contedos. A sua durao pode variar entre a realizao de aces isoladas e
projectos a longo prazo que se estendem por vrios meses ou anos.

Mtodos estatsticos
Consoante o tipo de dados, existem vrios mtodos estatsticos diferentes que tm de
ser utilizados quando se fazem comparaes entre grupos. So exemplo de
procedimentos de comparao entre grupos com duas variveis o teste qui-quadrado,

EMCDDA / OEDT 68

o t-teste, e a Anlise de Varincia (ANOVA). Os procedimentos para mais de duas


variveis dependentes so designados por comparaes multivariadas de que
exemplo a Anlise de Varincia Multivariada (MANOVA).
Para a anlise de medies repetidas (por exemplo, o pr-teste e ps-teste), tm
de ser utilizados procedimentos estatsticos adequados para amostras dependentes.
Isto significa que os testes qui-quadrado no podem ser usados.
Para comparar os dados dos resultados com os dados do processo deve utilizar-se a
anlise de regresso. Este procedimento determina, por exemplo se, e em que
medida, os efeitos de uma interveno se devem ao modo como foi executada.
Teste qui-quadrado
O teste qui-quadrado usado para comparar dados de dois ou mais grupos
diferentes. Pode ser utilizado para variveis relativas a categorias, como o gnero (ao
contrrio de variveis contnuas como a idade). O teste converte uma varivel em
categorias e calcula uma estatstica qui-quadrado. A estatstica assim calculada
fornece informao sobre se os grupos so comparveis ou se so significativamente
diferentes.
T-teste
O t-teste verifica se a mdia de uma varivel para os sujeitos de um grupo
significativamente diferente da mesma mdia num grupo de controlo, podendo ser
usado quer em amostras independentes quer dependentes.
Anlise de varincia (ANOVA)
A ANOVA usada para examinar as diferenas entre as mdias de dois ou mais
grupos independentes, analisando at que ponto qualquer diferena observada seria
improvvel num conjunto de amostras aleatrias de uma nica populao.

Mortalidade
A investigao dos abandonos crucial para as intervenes de preveno a mdio e
longo prazo. Um desistente algum que participou na(s) recolha(s) de dados
inicial(ais), mas que no permaneceu na amostra ao longo da interveno ou da
recolha de dados. Um grande nmero de abandonos pode constituir uma ameaa
validade dos resultados, pois gera enviesamento. Pode causar igualmente
problemas anlise estatstica devido diminuio da amostra.

Mudanas estruturais
A abordagem estrutural visa alterar o ambiente - incluindo o ambiente social - de modo
a que se torne mais provvel que os indivduos se comportem da forma desejada.
Entre as abordagens estruturais contam-se os projectos dirigidos a problemas sociais
relacionados com a droga, os centros de aconselhamento para problemas dos

EMCDDA / OEDT 69

associados e as alternativas livres de droga, tais como centros de juventude e


instalaes desportivas.

Natureza dos dados


A natureza dos dados determina o modo como se ir proceder avaliao e os
mtodos estatsticos que podem ser utilizados. Estes procedimentos estatsticos esto
agrupados em escalas.
A escala mais primitiva a nominal. Na escala nominal, os objectos e os factos so
simplesmente classificados como, por exemplo, masculino/feminino, fumador/nofumador, etc. Os dados nominais podem ser analisados por tcnicas como o teste
qui-quadrado.
O nvel seguinte a escala ordinal. Esta ordena objectos e factos (por exemplo,
1=muito fraco, 2=fraco, 3=bom, 4=muito bom), mas no possvel adicionar, subtrair,
multiplicar ou dividir nmeros numa escala ordinal. Da que a medida de tendncia
central, nos dados ordinais, seja, por exemplo, a moda e no a mdia. Os dados
ordinais podem ser analisados por tcnicas como o teste Mann-Whitney U-Test ou o
teste Wilcoxon.
O nvel seguinte a escala intervalar. Uma escala intervalar permite-nos determinar a
distncia entre os nveis, porque cada unidade da escala representa uma dimenso
fixa (como os graus Celsius). Os dados intervalares podem ser analisados pelo
t-teste ou pela anlise de varincia.
O nvel mais elevado a escala de razo Esta integra o conceito de zero absoluto, o
que significa que a relao entre dois valores se mantm igual, tal como acontece com
a altura ou com o peso. Os dados, nas cincias sociais, so muito frequentemente, do
nvel nominal ou ordinal, por vezes de nvel intervalar e quase nunca de razo.

Normas
As normas so regras de comportamento, no escritas, cognitivamente representadas
como crenas ou opinies. No contexto do consumo de substncias, as crenas
normativas foram identificadas nos estudos empricos como fortes variveis
mediadoras para o incio do comportamento de consumo de substncias. Entre os
objectivos de uma interveno de preveno pode estar o de influenciar ou alterar
estas crenas normativas.

Objectividade
A objectividade , juntamente com a fiabilidade e a validade, um importante
indicador da qualidade de um instrumento. Refere-se ao facto de os resultados
produzidos pelo instrumento deverem ser independentes da pessoa que mede os
dados - pessoas diferentes que utilizem o mesmo instrumento devem chegar aos
mesmos resultados.

EMCDDA / OEDT 70

Objectivos
Os objectivos so descries especficas e mensurveis do resultado pretendido com
a interveno de preveno. Para fins de avaliao, a formulao dos objectivos deve
especificar as variveis a alterar e estabelecer critrios de xito, mensurveis. Uma
assero plausvel e susceptvel de ser testada deve conciliar as actividades do
programa com os objectivos e estes ltimos com os resultados pretendidos. Se os
objectivos gerais, vagos, no forem formulados em termos de objectivos especficos,
no ser possvel implementar uma interveno ou avaliar a sua eficcia.

Observador
Um observador assiste s actividades de uma interveno de preveno, com o intuito
de ouvir e ver o comportamento verbal e no verbal e a interaco dos participantes e
organizadores do projecto. Em contraste com a observao quotidiana, esta
observao emprica exige um plano que especifique os comportamentos a observar,
se ou no permitida uma interpretao da observao e onde, quando e como a
observao tem lugar e registada.
O observador deve ser informado sobre o conceito subjacente interveno de
preveno em causa, para compreender melhor o significado da observao, mas
no lhe devem ser explicadas as hipteses de avaliao especficas, para evitar
enviesamentos de observao. Alm disso, deve ter formao em matria de
utilizao dos instrumentos de observao.

Obstculos
A situao financeira, a afectao de pessoal, questes polticas, dificuldades
administrativas e muitas outras circunstncias so susceptveis de entravar a
avaliao de uma interveno de preveno. Entre os obstculos podem incluir-se as
perdas de financiamento, eventuais atitudes negativas do pessoal, a deciso de no
se publicar o relatrio de avaliao ou a recusa de uma escola em permitir a
realizao de um inqurito aos estudantes.

Perspectivas variveis sobre a necessidade


Potencialmente, os profissionais, os responsveis polticos e os grupos-alvo tm
todos perspectivas diferentes sobre aquilo que constitui um problema. O que parece
constituir um problema para um grupo pode no ser entendido como tal por outro. A
investigao no pode, evidentemente, resolver a questo de qual a perspectiva
correcta, mas pode eliminar os conflitos eventualmente resultantes da abordagem
dos fenmenos de droga, a partir de perspectivas diferentes. Parte da avaliao do
planeamento pode consistir na avaliao das necessidades, a partir das diversas
perspectivas eventualmente envolvidas na interveno.

EMCDDA / OEDT 71

Pr-teste e ps-teste
O design pr-teste e ps-teste uma maneira simples de planear uma avaliao dos
resultados sem utilizar um grupo de controlo. Neste design, as nicas pessoas
avaliadas so as que recebem a interveno. So testadas (por exemplo, quanto aos
seus conhecimentos, atitudes ou intenes) antes e depois da interveno. As
diferenas entre as duas medies so depois verificadas para avaliar a sua
significncia estatstica. A vantagem deste design a sua simplicidade e o facto de
no exigir muito tempo. A sua principal desvantagem que, na ausncia de um grupo
de controlo, no se sabe se os resultados so realmente devidos interveno ou a
outros factores no controlados.

Prevalncia
A prevalncia o nmero de casos com uma dada condio ou caracterstica, entre a
populao de uma determinada rea geogrfica, em dado momento (por exemplo, o
nmero de pessoas que consumiram cannabis no ltimo ano).

Problemas de comportamento
H certos problemas de comportamento que podem ser considerados como
factores de risco relativamente ao consumo de droga. Entre estes podem incluir-se
os comportamentos inadequadamente tmidos ou agressivos, o hbito de mentir, de
roubar, de faltar s aulas, a ansiedade, etc.

Qualidade da implementao da interveno


A qualidade da implementao refere-se ao modo como os participantes ou os
tcnicos classificam a interveno e a sua qualidade. Os indicadores relativos s
percepes sobre a interveno podem incluir a aceitao dos seus contedos, o grau
de identificao com esses contedos ou a respectiva credibilidade, a satisfao com
a interveno, os benefcios pessoais e a pertinncia da interveno para o problema.
Entre os indicadores relacionados com a percepo da qualidade da interveno
podem contar-se a capacidade de persuaso do tcnico, a motivao deste e a
interaco entre o tcnico e os participantes.

Questionrio
Um questionrio uma listagem de perguntas, cujas respostas podem ser
sistematicamente avaliadas. Consoante as modalidades de resposta, existem
questionrios de respostas abertas (em que a prpria pessoa tem de formular as
respostas) e questionrios de respostas fechadas (em que tem de escolher entre
vrias respostas possveis).

EMCDDA / OEDT 72

Remodelao
A remodelao um dos aspectos da implementao, tal como a adeso e a
fidelidade. Refere-se a alteraes nos contedos e na implementao dos
programas, relativamente ao padro inicialmente estabelecido. Distingue-se da falta
de adeso por envolver alteraes intencionais e planeadas, que foram introduzidas a
fim de aumentar a eficcia do programa (ao contrrio da falta de aceitao, da no
cooperao ou de mudanas no planeadas). A remodelao especialmente
importante quando os efeitos do programa podem ser melhorados atravs da
adaptao dos seus contedos a determinados ambientes ou populaes.

Representatividade (coverage)
A representatividade exprime em que medida uma interveno atinge o grupo-alvo
pretendido. Pode ser definida como o rcio entre o nmero de participantes efectivos
e o nmero de participantes previstos, sendo uma baixa representatividade susceptvel
de aumentar o enviesamento.

Validade
A validade, a fiabilidade e a objectividade so indicadores importantes da
qualidade de um instrumento. As apreciaes sobre a validade respondem questo
de determinar se um instrumento mede efectivamente aquilo que pretende conhecer e
se ou no adequado.

Variveis mediadoras
As variveis mediadoras esto supostamente ligadas ao comportamento de consumo
de substncias, na medida em que estimulam as alteraes a esse comportamento,
proporcionadas pela interveno.
possvel distinguir duas espcies de variveis mediadoras:
as que esto directamente relacionadas com o consumo de substncias, tais
como conhecimento sobre o consumo de substncias, atitudes perante as
drogas, inteno de consumir drogas e normas;
e as que apenas esto indirectamente relacionadas com o consumo de
substncias, tais como competncias quotidianas, factores de proteco,
mudanas estruturais, estilo de vida, hbitos culturais e problemas de
comportamento.

EMCDDA / OEDT 73

BIBLIOGRAFIA
A bibliografia abaixo apresentada no pretende dar uma panormica geral exaustiva
da bibliografia sobre avaliao. Trata-se, mais propriamente, de artigos e livros que
constituram fontes teis para a concepo das Linhas Orientadoras. As obras
assinaladas com um asterisco (*) foram consideradas especialmente teis para a
conduo das avaliaes.
Braverman, M. (1989) Evaluating health promotion programs. (Avaliao dos
programas de promoo da sade) San Francisco: Jossey-Bass Inc.
Bruvold, W. (1993) 'A meta-analysis of adolescent smoking prevention programs'
(Uma meta-anlise dos programas de preveno do tabaco entre
adolescentes), American Journal of Public Health, 83 (6), 872-880.
Card, J. et al (1992) 'Planning an evaluation and estimating its cost', Evaluation and
the Professionals, (Planear uma avaliao e estimar os seus custos - A
avaliao e os profissionais) 15 (4), 75-89.
Collins, L. and Seitz, L. (1994) Advances in data analysis for prevention interveno.
(Progressos na anlise de dados para as intervenes de preveno) NIDA
research monograph, Rockville: NIDA.
Conrad, K. et al (1991) 'Threats to internal validity in worksite health promotion
programme research: common problems and possible solutions', (Ameaas
validade interna dos programas de investigao em matria de promoo da
sade no local de trabalho: problemas comuns e solues possveis) American
Journal of Health Promotion, 6 (2), 112-122.
Dryfoos, J. (1993) 'Lessons from evaluation of prevention programs' (Lies da
avaliao dos programas de preveno), Prevention Evaluation Report, 1 (1),
2-3.
Elder, J. et al (1994) 'CATCH: 'Process evaluation of environmental factors and
programs' (Avaliao de processo dos factores e programas ambientais),
Health Education Quarterly, 2, 107-127.
*Fitz-Gibbon, C. and Morris, L. (1988) How to analyze data (second edition) (Como
analisar dados), Beverly Hills: Sage.
*Fitz-Gibbon, C. and Morris, L. (1989) How to design a program evaluation (third
edition) (Como planear uma avaliao de programa), Beverly Hills: Sage.
Hansen, W. et al (1991) 'Program integrity as a moderator of prevention programme
effectiveness: results for fifth grade students in the adolescent alcohol prevention
trial' (Integridade do programa como moderador da eficcia dos programas de
preveno: resultados da experincia de preveno do consumo de lcool por
adolescentes entre os alunos do 5 ano), Journal of Studies on Alcohol, 52 (6),
568-579.

EMCDDA / OEDT 74

Hansen, W. (1996) 'Pilot test results comparing the All Stars Program with seventh
grade DARE: program integrity and mediating variable analysis' (Resultados de
testes-piloto comparando o Programa All Stars com o DARE no 7 ano:
integridade do programa e mediao da anlise das variveis), Substance Use
& Misuse, 31 (10), 1359-1377.
*Henerson, M. et al (1988) How to measure attitudes (second edition) (Como medir
as atitudes), Beverly Hills: Sage.
*Herman, J. et al (1989) Evaluator's handbook (third edition) (Manual do avaliador),
Beverly Hills: Sage.
Hughes, J. and Sullivan, K. (1988) 'Critical reviews, outcome assessment in social
skills training with children' (Anlises crticas, avaliao dos resultados no ensino
de competncias sociais a crianas), Journal of School Psychology, 26,
167-183.
*King, J. et al (1988) How to assess program implementation (second edition)
(Como avaliar a execuo dos programas), Beverly Hills: Sage.
Klepp, K. et al (1993) 'Ten-year follow-up of the Oslo Youth Study Smoking
Prevention Programme' (Dez anos de acompanhamento do estudo do
Programa de Preveno do tabaco entre a juventude de Oslo), Preventive
Medicine, 22, 453-462.
Meyer, A. et al (1993) 'Balancing the priorities of evaluation with the priorities of the
setting: a focus on positive youth development programmes in school settings'
(Equilibrar as prioridades da avaliao com as prioridades do cenrio:
perspectiva sobre programas de desenvolvimento da juventude positivos
realizados na escola), The Journal of Primary Prevention, 14 (2), 95-113.
Morgan, M. (in press) Towards the development of an instrument bank for the
evaluation of prevention (Para o desenvolvimento de um banco de instrumentos
para a avaliao da preveno), Lisbon: EMCDDA.
*Morris, L. et al (1988) How to measure performance and use tests (second edition)
(Como medir o desempenho e utilizar os testes), Beverly Hills: Sage.
*Morris, L. et al (1988) How to communicate evaluation findings (second edition)
(Como comunicar as concluses da avaliao), Beverly Hills: Sage.
Muthen, B. and J`reskog, K. (1983) 'Selectivity problems in quasi-experimental
studies' (Problemas de selectividade em estudos quase-experimentais),
Evaluation Quarterly, 7 (2), 139-174.
NIDA (1997) Preventing drug use among children and adolescents - a
research-based guide (Preveno do consumo de droga entre as crianas e os
adolescentes - um guia baseado na investigao), Rockville: NIDA.
*Patton, M. (1989) How to use qualitative methods in evaluation (third edition) (Como
utilizar os mtodos qualitativos na avaliao), Beverly Hills: Sage.

EMCDDA / OEDT 75

Pentz, M. et al (1990) 'Effects of program implementation on adolescent drug use


behavior' (Efeitos da execuo dos programas no comportamento de consumo
de droga entre os adolescentes), Evaluation Review, 14 (3), 264-289.
Pentz, M. and Trebow, E. (1991) 'Implementation issues in drug abuse prevention
research' (Questes de implementao na investigao sobre a preveno do
consumo de droga), in Leukefeld, D. and Bukoski, W. (Eds) Drug abuse
prevention interveno research: methodological issues (Investigao das
intervenes de preveno do consumo de droga: questes metodolgicas),
Rockville: NIDA.
*Rossi, P. and Freeman, H. (1982) Evaluation - a systematic approach (second
edition) (Avaliao - uma abordagem sistemtica), Beverly Hills: Sage.
Scheirer, M. and Rezmovic, E. (1983) 'Measuring the degree of programme
implementation' (Medio do grau de implementao do programa), Evaluation
Review, 7 (5), 599-633.
Schinke, S. et al (1991) Substance abuse in children and adolescents (Abuso de
substncias entre as crianas e os adolescentes), Beverly Hills: Sage.
Scriven, M. (1991) Evaluation thesaurus (fourth edition) (Lxico da avaliao),
Beverly Hills: Sage.
*Stecher, B. and Davis, W. (1988) How to focus an evaluation (second edition)
(Como perspectivar uma avaliao), Beverly Hills: Sage.
Sloboda, Z. and David, S. (1997) Preventing drug use among children an
adolescents. A research based guide (Preveno do consumo de droga entre
as crianas e os adolescentes. Um guia baseado na investigao), Rockville:
NIDA.
Steckler, A. et al (1992) 'Toward integrating qualitative and quantitative methods: an
introduction' (Para a integrao dos mtodos qualitativos e quantitativos: uma
inroduo), Health Education Quarterly, 19 (1), 1-8.
Stufflebeam, D. (1995) The Personal Evaluation Standards. How to assess systems
for evaluation educators (sixth edition) (Padres de avaliao pessoal. Como
avaliar sistemas para os formadores de avaliao), Newbury Park: Corwin.
Tobler, N. (1986) 'Meta-analysis of 143 adolescent drug prevention programmes:
quantitative outcome results of programme participants compared to a control or
comparison group' (Meta-anlise de 143 programas de preveno da droga
entre os adolescentes: dados quantitativos sobre os resultados segundo os
participantes nos programas em comparao com grupos de controlo ou de
comparao), Journal of Drug Abuse, 16 (4), 537-567.
Torabi, M. (1993) 'General standards for educational avaliations (Normas gerais
para as avaliaes pedaggicas), Health Values, 17 (4), 57-59.
Uhl, A. (1997a) 'Probleme bei der Evaluation von Pr@ventionsma8nahmen im
Suchtbereich', Wiener Zeitschrift fhr Suchtforschung, 20, in press.

EMCDDA / OEDT 76

Uhl, A. (1997b) 'Evaluation of primary prevention in the field of illicit drugs: definitions
- concepts - problems' (Avaliao da preveno primria no domnio das drogas
ilcitas: definies, conceitos, problemas), in Springer, A. and Uhl, A. (Eds)
Evaluation research in regard to primary prevention of drug abuse (Estudos de
avaliao em matria preveno primria do consumo de droga), Brussels:
European Commission.
Vaeth, P. et al (1995) 'Examining the link between provider roles and program
development: findings from a process evaluation of a community-based
prevention program' (Anlise da relao entre o papel dos tcnicos e o
desenvolvimento dos programas: concluses de uma avaliao de processo de
um programa de preveno baseado na comunidade), The Journal of Primary
Prevention, 16 (1), 55-73.
Van der Stel, J. (Ed.) (1998) Alcohol, Drugs and Tobacco Handbook Prevention,
Pompidou Group, Council of Europe, Jellinek Consultancy Amsterdam.
Wagner, E. and Guild, P.A. (1989) 'Primer on evaluation methods: choosing a
strategy' (Manual sobre os mtodos de avaliao: escolher uma estratgia),
American Journal of Health Promotion, 4 (2), 134-139.

EMCDDA / OEDT 77

Vous aimerez peut-être aussi