Académique Documents
Professionnel Documents
Culture Documents
Metodologa de la
Investigacin Cientfica.
TEMA :
DISEO METODOLGICO DE LA
INVESTIGACIN CIENTFICA
TIPO DE INVESTIGACIN
Profesor:
Dr. Bernardo Manuel Corujo Martnez
2003
DISEO METODOLGICO
Tipo de Estudio
Area de estudio
Variables y Operacionalizacin
Plan de Anlisis
Tcnicas y Procedimientos
Universo y muestra.
De recoleccin de la Informacin (fuentes, tcnicas e instrumentos).
De procedimientos de la Informacin (Plan de tabulacin y Anlisis).
Para la investigacin cuantitativa el diseo representa una gua bastante estructurada y exacta de cmo se
va a realizar la investigacin. Se elabora antes de iniciar la etapa de recoleccin de datos y es poco
flexible en cuanto a la realizacin de modificaciones una vez iniciada esta etapa. En la investigacin
cualitativa, el diseo toma su significado un tanto diferente, en el sentido que es una planificacin ms
flexible. Indica la pauta o las grandes lneas de accin pero no plantea exactamente cmo se va a realizar
cada aspecto. Por esto se le denomina diseo emergente, el cual permite ir explorando el fenmeno de
estudio y modificando el cambio y los mtodos segn sea necesario.
TIPO DE INVESTIGACIN
Uno de los aspectos en toda investigacin es la decisin sobre el tipo de estudio a realizar. Campos define
el tipo de estudio as:
Es el esquema general o marco estratgico que le da unidad, coherencia, secuencia y sentido
practico todas las actividades que se emprenden para buscar respuesta al problema y objetivos
planteados.
El tipo de estudio se define preliminarmente desde la etapa de identificacin y formulacin del problema;
sin embargo, cada etapa del proceso de investigacin provee e elementos que sirven para su seleccin
definitiva. La revisin de literatura y la consulta a personas conocedoras del tema de estudio contribuyen
a una mejor eleccin.
Investigacin clsica cuantitativa
Existen muchas clasificaciones sobre tipos de estudio. A continuacin sern abordadas aquellas que,
segn nuestra opinin y tras la revisin de diferentes literaturas encontramos ms comprensible y
practica, adems la hemos aplicado de forma practica dndonos valiosos resultados. A continuacin
expondremos las ms relevantes.
Al respecto se seala una de las clasificaciones, con la salvedad de que en la practica una investigacin
puede ubicarse en varias de las siguientes:
TIPOS DE ESTUDIOS:
A. Segn el tiempo de ocurrencia de los hechos y registro de la informacin:
Retrospectivo
Prospectivos
Retroprospectivos
B. Segn el perodo y secuencia en que se realiza el estudio:
Transversales
Longitudinales
C. Segn el control que tiene el investigador de las variables en un grupo de individuos o unidades:
Casos y Controles
Cohorte
D.Segn el anlisis y el alcance de los resultados:
Descriptivos
Analticos
Experimentales
A.
hechos
registros
de
la
informacin
En relacin con estos aspectos, los estudios se clasifican en retrospectivos y prospectivos. Los
retrospectivos son aquellos en los que el investigador indaga sobre hechos ocurridos en el pasado; en los
prospectivos se registra la informacin segn van ocurriendo los fenmenos.
Registro de datos que
Ocurrieron en el pasado
RETROSPECTIVO
PROSPECTIVO
en algunos estudios se registra informacin sobre hechos ocurridos con anterioridad al diseo del estudio,
y el registro continua segn los hechos van ocurriendo. Estos son los estudios retrospectivos.
B.
Segn este criterio de clasificacin, los estudios pueden ser transversales y longitudinales. Una
investigacin es transversal cuando se estudian las variables simultneamente en determinado momento,
haciendo un corte en el tiempo. En este caso, el tiempo no es importante en relacin con la forma en que
se dan los fenmenos.
El longitudinal estudia una o ms variables a lo largo de un periodo, que varia segn el problema
investigado y las caractersticas de la variable que se estudia. En este tipo de investigacin el tiempo s es
importante, ya sea porque el comportamiento de las variables se mide en un periodo dado o porque el
tiempo es determinado en la relacin causa-efecto.
Debe sealarse que en le estudio longitudinal el anlisis del comportamiento de la variable puede ser
continua, a lo largo del periodo, o bien, dicho anlisis puede ser desarrollado en forma peridica.
Usualmente la informacin es tomada de una muestra a la cual se hace el seguimiento a lo largo del
periodo de estudio. Sin embargo, en algunos casos esta informacin puede ser tomada de diferentes
grupos de una sola poblacin.
Un ejemplo de una muestra de diferentes grupos de una misma poblacin es el siguiente: el estudio del
nivel de entrada de estudiantes a una universidad durante un periodo, para lo que toman grupo de nuevo
ingreso, cada cinco aos, con el objeto de hacer la medicin de la variable.
Otro ejemplo, que ilustra las diferentes formas de realizar estudios longitudinales es el siguiente: se desea
investigar cmo los conocimientos sobre la prevencin de las ETS determinan el comportamiento sexual
de las personas. En este caso el estudio puede hacerse peridicamente.
C.
Tomando como base este criterio, los estudios se clasifican en descriptivos, analticos y experimentales.
Galn Morera, entro otros, agrega los cuasi experimentales y los de intervencin; a estos ltimos otros
autores le llaman experimentales.
A continuacin se proceder a explicar cada uno de estos diseos, tomando como base lo que al respecto
han escrito los autores mencionados; entro otros.
Los estudios descriptivos son la base y punto inicial de los toros tipos y son aquellos que estn dirigidos
a determinar cmo es o cmo est la situacin de las variables que se estudian en una poblacin. La
presencia o ausencia de algo, la frecuencia con que ocurre un fenmeno (prevalencia o incidencia), y en
quines, donde y cuando se est presentando determinado fenmeno. Dan respuesta a interrogantes como:
Cuntas personas estn trabajando en los distintos niveles de atencin a la salud y su distribucin por
categoras y profesiones? Cuntos y cuales curso de capacitacin ha recibido el personal desde que entr
a laborar en la institucin? Cules es la magnitud de la diarrea en determinadas comunidades? Qu
opina la comunidad y el personal de un determinado centro de salud sobre la calidad de atencin que se
brinda? qu conocimientos tienen las madres sobre los cuidados que debe recibir un nio que padece una
infeccin respiratoria leve?
Estos estudios pueden ser transversales o longitudinales, as como tambin retrospectivos o prospectivos,
a ambos. Asimismo, brindan la base cognoscitiva para otros estudios descriptivos, y analticos, generando
posibles hiptesis para su futura comprobacin o rechazo.
Es menester sealar que en relacin con los estudios descriptivos se menciona otro denominado
exploratorio, dado que su propsito es familiarizarse al investigador con determinada situacin del rea
problema a investigar, en aquellos casos en que no existe suficiente conocimiento para la elaboracin del
marco terico; con frecuencia se les ha considerado como descriptivos.
A continuacin se presenta un resumen acerca de los estudios descriptivos.
Qu investigan?
Caractersticas de la poblacin.
Magnitud de problemas;: prevalencia, incidencia, proporcin.
Factores asociados al problema.
Condiciones de salud y vida de la poblacin.
Eventos epidemiolgicos, sociolgicos, educacionales, administrativos, opinin de as personas sobre
diferentes temas.
Cules son sus caractersticas?
En un primer nivel de investigacin.
Presenta hechos o fenmenos pero no los explica.
El diseo no va enfocado a comprobacin de hiptesis, aun cuando se basan en hiptesis generales
implcitas.
Segn las variables a estudiar, los estudios pueden ser transversales, longitudinales, prospectivos y
retrospectivos.
Qu resultados pueden obtenerse?
Caracteriza el problema.
Provee bases para otros estudios descriptivos.
Sugiere asociacin de variables como punto de partida para estudios analticos.
Da bases para plantear hiptesis que conduzcan a otras investigaciones.
Cules son sus limitaciones?
Solo busca describir fenmenos o situaciones y plantear posible relacin entre variables.
No tiene alcance ara comprobar relaciones explicativas entre las variables.
No permite hacer predicciones.
Los estudios analticos o explicativos buscan contestar por qu sucede determinado fenmeno, cual es el
factor de riesgo asociado, o cul es el efecto de esa causa o factor de riesgo. En general, estos diseos
buscan la asociacin o correlacin entre variables. Usualmente un cambio en la magnitud de una de ellas
esta relacionada con un cambio en la otra variable, que puede ser un aumento o una disminucin. Pueden
ser tambin estudios de cohortes y de casos y controles. En general, en estos ltimos se desea conocer
qu parte de la poblacin que present determinado problema estuvo expuesta a la causa o factor asociado
a ese problema, partiendo del efecto (E) a la causa (C) Breilh y Granda, plantean que se emplean para
conocer la proporcin de casos que pueden deberse a un proceso que en terreno emprico se denomina
factor causal. Al hablar de causa y efecto se entiende que la causa puede ser una caracterstica, variable
condicionante o factor asociado y el efecto un resultado de esa causa. En una relacin entre variable se
esperara que un mayor numero de casos presentara la variable condicionante; la bsqueda de esa relacin
se hace retrospectivamente, partiendo del efecto o resultado a la causa o factor condicionante.(Figura 1).
En el estudio de cohorte interesa conocer qu parte de la poblacin expuesta a la causa o la variable
condicionante enferm o present determinado resultado; se dice entonces que el diseo de la causa o
variable condicionante hacia el efecto o resultado.
En este tipo de estudio se elimina, para efectos de conformar los grupos, la poblacin que presenta la
condicin o resultado; el grupo de estudio lo constituye el que presenta la causa o variable condicionante.
El grupo control est conformado por aquellos que no estn expuestos a dicha variable. En forma
prospectiva se hace el seguimiento de ambos grupos a fin de estudiar el resultado o efecto.
Si la hiptesis es correcta o cierta y existe relacin entre las variables en estudio, se espera que el numero
de personas que llegan a presentar el efecto sea mayor en el grupo con causa, que en el grupo sin causa.
Diseo de estudios analticos. Cohorte (Figura N2).
En este tipo de estudio se compara la relacin causa-efecto entre grupo de estudio y grupo de control, lo
que permite explicar el origen o causa de un fenmeno. Los resultados de los grupos bajo estudio estn
destinados a probar hiptesis sobre esas relaciones de causa/efecto. Se puede ilustrar lo anterior tomando
como ejemplo el cncer pulmonar como efecto y el habito de fumar como causa o factor de riesgo; este
ejemplo parte de la hiptesis de que existe una relacin entre el habito de fumar y la incidencia de cncer
pulmonar.
En el estudio y controles se mide o se estudia cuntas personas enfermas de cncer pulmonar estuvieron
expuestas al riesgo de fumar, o sea que el estudio parte del efecto (E) a la causa (C). Estas
investigaciones, segn este enfoque, se consideran transversales, porque estudian, en un momento dado,
cuantas personas de las que enfermaron tenan el habito de fumar, o sea que la recoleccin de la
informacin sobre ambas variables se hace el mismo tiempo. Tambin se clasifican como retrospectivos
debido a que el habito de fumar se ha desarrollado en tiempo pasado.
En el estudio de cohortes interesa conocer cuntas personas de las que tienen habito de fumar presentan
posteriormente cncer pulmonar. En un estudio longitudinal, ya que se siguen dos grupos a travs de un
periodo largo, por lo que a su vez es prospectivo.
Otro ejemplo, de estudio analtico es la relacin de la prueba de seleccin de estudiantes con el
rendimiento acadmico de los mismos, partiendo de la hiptesis de que a mayor resultado en la prueba de
seleccin de los estudiantes, mejor rendimiento acadmico. En este ejemplo se desea explicar si existe o
no asociacin entre ambas variables, pudindose utilizar un diseo retrospectivo o uno prospectivo.
Un estudio sobre los factores que influyen en el destete temprano puede realizarse con un diseo
analtico, tanto de casos y controles como cohorte. Seria de casos y controles si es una poblacin se toma
un grupo de madres que destet preczmente y otro grupo de madres que amamant el tiempo
recomendado; luego se determinan retrospectivamente o transversalmente los factores que determinaron
el destete. Para que este mismo estudio sea a tipo cohorte, se tomaran las madres desde el inicio de la
lactancia y se observaran hacia delante para determinar sus caractersticas (trabajo, educacin, opinin
sobre las ventajas de la lactancia, procedencia, entre otras) as como el destete. Luego de determinar la
relacin entre el destete y las caractersticas de las madres a travs de pruebas de asociacin o correlacin.
A continuacin se resumen los aspectos referentes a los estudios analticos:
Qu investiga?
Factores relacionados con determinado fenmeno, o sea la relacin entre variables.
La causa o factor de riesgo.
El riesgo ante un fenmeno.
Factores de riesgo o aspectos que tienen ms influencia en el fenmeno que se estudia.
Cules son sus caractersticas?
Es un nivel ms avanzado de investigacin en relacin con el descriptivo.
Se plantean hiptesis tendentes a la verificacin de relaciones explicativas. No se establecen
relaciones causales.
Estudia problemas partiendo de la causa al efecto y viceversa.
Requiere de la agrupacin de la muestra o poblacin de estudio en categoras de anlisis. (Grupo de
estudio/grupo control).
No se hace intervencin, se estudian grupos que ya presentan la variable independiente.
Qu resultados pueden esperarse?
Valida o rechaza las hiptesis formuladas. Es decir, establece relacin o asociacin entre variables
(causa-efecto).
Provee bases para otros estudios analticos o experimentales.
Provee informacin para evaluar la eficacia de intervenciones implementadas en los servicios de
salud o en las comunidades.
Cules son sus limitaciones?
La asociacin causa-efecto no se puede establecer tan claramente como en otros diseos. (tipo
experimental).
Las variables se estudian segn como ests se presentan en forma natural.
Los estudios experimentales se caracterizan por la introduccin y manipulacin del factor causal o de
riesgo para la determinacin posterior del efecto. Para esta manipulacin se organiza la muestra en dos
INVESTIGACIN CUALITATIVA
A continuacin se presentan los diseos ms utilizados en la investigacin cualitativa, la cual, se aparta de
la investigacin; en el uso preferencial de la informacin cualitativa, en cuanto al objetivo de la
investigacin, la cual busca transformar una situacin determinada, en los mtodos y tcnicas que se usan
para recabar, analizar e interpretar los resultados, y en el uso que se hace de los conocimientos
producidos.
Como se plante anteriormente, los mtodos y las tcnicas que se utilizan pueden ser combinados, es
decir una investigacin tradicional puede utilizar tcnicas de investigacin cualitativa para recolectar
informacin y viceversa. La diferencia se encuentra en el paradigma epistemolgico de base, como en
uno o ms de los aspectos mencionados en el prrafo anterior.
El problema de la objetividad, confiabilidad y validez es especialmente sensible en la investigacin
cualitativa. EL problema de cmo hacer crebles y confiables los resultados de la investigacin orientada
por los paradigmas interpretativos ha sido abordado de diferentes maneras. As como la investigacin
cuantitativa utiliza los criterios de confiabilidad y validez, la investigacin cualitativa se basa en ciertos
procedimientos que tienen como fin aumentar la calidad y objetividad de la informacin. Nos referimos a
la credibilidad, la transferibilidad y la confirmabilidad.
La credibilidad se logra de diversas maneras, como es a travs del uso de la observacin persistente y
focalizada; el chequeo con los informantes, tratando de constatar la versin del investigador de lo que l
ha credo detectar con las opiniones de grupos de personas que tienen conocimiento sobre el sujeto de la
investigacin; la triangulacin, que consiste en el uso de mltiples mtodos y tcnicas para recabar
informacin sobre el mismo fenmeno de estudio.
La transferibilidad se refiere fundamentalmente a la posibilidad de generalizar los resultados a la
poblacin de la cual se ha estudiado una parte. En el caso de la investigacin cualitativa solo se pueden
hacer ciertas inferencias lgicas sobre situaciones o poblaciones que sean muy similares a la estudiada.
La comparabilidad, equivalente a la confiabilidad, consiste en la comprobacin por parte de un
investigador externo de la adecuacin de la estrategia seguida, la calidad de la informacin recolectada, la
coherencia interna de los datos, la relacin entre estos y las interpretaciones realizadas.
LA INVESTIGACIN PARTICIPATIVA
B. Hall, afirma que el fin de este tipo de investigacin es contribuir con la generacin de un conocimiento
del cual se apoderan todos los involucrados, a travs de la integracin de la actividad investigativa con el
trabajo educativo y la accin.
Le Boterf define la investigacin participativa como aquella que trata de ayudar a la poblacin
encuestada en la identificacin, el anlisis critico de sus problemas y necesidades y la bsqueda de
soluciones de los problemas que ellos mismos quieren estudiar y resolver.
Al igual que en otros tipos de investigacin cualitativa, no existen recetas o un modelo nico para la
investigacin participativa, ya que en cada situacin las condiciones especficas (situacin sociopoltica,
aspectos culturales, recursos y limitaciones para realizar la investigacin, caractersticas del problema,
propsito y objetivos) son diferentes y la investigacin debe ser adaptada a las mismas.
El modelo que aqu se presenta recoge las experiencias de algunos investigadores en este campo.
Los momentos de la investigacin participativa nos permiten resumir y destacar la importancia de algunas
de sus caractersticas:
La problemtica de estudio es identificada por la poblacin sujeto de la investigacin.
Es participativa, la poblacin debe tomar parte en cada momento de la investigacin. Lo que
garantiza el compromiso de la poblacin es su apoderamiento del conocimiento.
La investigacin se centra en la transformacin de una situacin que representa un problema sentido
por la poblacin, no basta la produccin de un conocimiento, este tiene que llevar a la accin como
parte de la investigacin misma.
LA INVESTIGACIN - ACCIN
Este tipo de investigacin tiene caractersticas bastante similares a la investigacin participativa. Es por
esto que muchos autores se refieren.
A la investigacin-accin-participacin. Estimamos que la diferencia fundamental entre este tipo y la
investigacin participativa radica en la magnitud de la transformacin social que se pretende lograr.
LA INVESTIGACIN ETNOGRFICA
Este tipo de investigacin tiene sus orgenes en la tradicin antropolgica y est orientada hacia el estudio
de los fenmenos sociales con la intencin de describirlos y comprenderlos en el proceso de construccin
del conocimiento. El objeto de estudio es el proceso de construccin del conocimiento. El objeto de
estudio es el proceso social y su dimensin histrica y dinmica y no solamente su configuracin formal o
estructural. El propsito es descifrar el significado de la conducta, incluyendo la explicacin de lo
aparente como de lo no tan aparente. Es ms que una herramienta de recoleccin de datos y no es
equivalente a la participacin observante. Es un enfoque, algo que empalma el mtodo con la teora.
Alrededor de la investigacin etnogrfica ha girado un gran debate. Por una parte sta ha sido cuestionada
por creerse que no corresponde a las normas y procedimientos cientficos; por otra se ha pensado que el
termino se aplica a todo lo que es uso de tcnicas innovadoras, pudiendo observarse desde trabajos
etnogrficos de mero nivel descriptivo, dentro de la ms arraigada posicin positivista, hasta otros que
buscan describir el funcionamiento de una cultura particular en los trminos ms prximos posibles a las
formas en que los miembros de esa cultura perciben su universo.
La etnografa se ha visto desde varias perspectivas, que van desde entenderla como una tcnica de
observacin hasta concebirla como un mtodo en el que el investigador desarrolla hiptesis que surgen de
la realidad (Ground Theory). Esta lnea de pensamiento tiene su referencial en la teora de Gramsci, la que
da importancia a la historia y a la interpretacin de los conceptos y de relaciones culturales, dando nfasis
a las relaciones especificas que se dan entre una cultura determinada y la superestructura en que ocurren
los fenmenos sociales. Da pues, gran relevancia a la dimensin histrica de os fenmenos y construye el
presente histrico partiendo del pasado y tomando en cuenta el futuro, as como las contradicciones de los
procesos sociales. Esto significa que no es cierta la concepcin comn que se tiene de que la etnografa es
un trabajo de campo libre de supuestos y ataduras tericas. Es cierto que en la mayora de las
investigaciones de este tipo de investigador inicia su estudio sin hiptesis especificas previas y sin
categoras ya establecidas para clasificar las observaciones. Esto con el fin de evitar las pre-concepciones
que pueden llevar a observaciones e interpretaciones sesgadas. Lo anterior no deja de ser un riesgo del
empirismo, de hacer observaciones que no estn basadas en un conocimiento fundamentado.
Cmo se hace una investigacin etnogrfica? En trminos generales no hay recetas o camisas de
fuerza, mucho depender de la creatividad del investigador. Sin embargo, se pueden precisar algunos
momentos:
1. Definicin de los objetivos de la investigacin.
2. Recoleccin preliminar de informacin.
3. Anlisis de la informacin y construccin de hiptesis.
4. Contrastacin de las hiptesis con los planteamientos tericos.
5. Primera descripcin analtica, intento de comprender los fenmenos e identificacin de nuevas
observaciones a realizarse.
6. Nuevas observaciones ya ms focalizadas segn lo identificado en el paso anterior,.
7. Anlisis de la nueva informacin, critica de las hiptesis.
8. Construccin conjunta de la interpretacin, entre todos los que tiene que ver con el tema en estudio.
9. Estructuracin del informe final.
En la investigacin etnogrfica el investigador observa y a la vez interpreta, seleccionando en el contexto
lo que es significativo con relacin a la construccin terica que est realizando. Crea nuevas hiptesis,
analiza y construye el contenido de los conceptos iniciales. Es un proceso, donde se da la posibilidad de
crear y enriquecer la teora. La reconstruccin del proceso social se hace mediante una construccin
terica subyacente. La teora no requiere concebirse y plantearse desde el inicio del proceso de
investigacin, sino que se va construyendo durante el proceso. Esto, con el propsito de que no limite la
observacin.
Este tipo de investigacin se distingue por el uso principal que hace de la observacin, ya sea con
observadores participantes o no. La observacin trata de registrar todo lo que ocurre con y alrededor del
fenmeno que se estudia. Es por esto que la confiabilidad y validez de la observacin se vuelve tan
crucial, ya que pueden actuar numerosos factores difciles de controlar, tanto referente al objeto de la
observacin como del observador, y ms an en la interpretacin que ste hace de los hechos. La
interpretacin del significado de una situacin puede estar presente en la mente del observador durante el
acto de observacin.
La investigacin etnogrfica tiene muchos campos y reas de aplicacin en salud,. A continuacin se
listan algunos posibles temas o reas de investigacin:
Cuantitativa
Cualitativa
Resultado/fin
El producto es informacin.
no lleva a acciones concretas
o autogestin.
Es fundamentalmente terica.
Fin es la transformacin.
Involucra a los participantes en acciones.
Tipo de
Conocimiento
Marco terico
Se define y construye al
Planificar la investigacin
Seleccin de
Variables
Tipo de
Variables
Calidad de la
Informacin
Enfatiza la confiabilidad.
Enfatiza la validez.
Muestra
Grande
Pequea.
Tipo de Anlisis
principal
Anlisis causal-correlacin
Anlisis descriptivo-interpretativo
Es aplicada.
Seleccin de Grupos
FIGURA N 2
Diseo de estudios analticos
Cohorte
Con efecto
Con causa
Sin efecto
POBLACION
Con efecto
Sin causa
Sin efecto
Con efecto
(No se incluye
en el estudio)
Prospectivo
Seleccin de grupos
FIGURA N 3
Diseo experimental clsico
Grupo de estudio
Experimental
FACTOR
+
CAUSAL
Positivo
Efecto
Negativo
Positivo
Grupo testigo
O control
Medicin
Variable Independiente
FACTOR
CAUSAL
Efecto
Aplicacin
Negativo
Medicin de Variable
Dependiente
Bibliografa Consultada
1- Pineda, E.B.; de Alvarado, E. L.; de Canales, F. H.: Metodologa de la Investigacin: Tipos
de estudios .Serie PALTEX para Ejecutores de Programas de Salud N 35. OPS / OMS, 1994.
2- Guerrero Gonzlez Medina .Epidemiologa. Coleccin ciencias de la salud de AddisonWeslwy Iberoamericana, E.U.A.. 1986.
3- Instituto Nacional de Epidemiologa ( INE) Dr Juan H. Jara. Curso de epidemiologa general
para profesionales, Mar del Plata . Repblica Argentina. 1977.
4- Ortiz Zulma, Esandi M Eugenia, Bortman M :Epidemiologa Bsica y Vigilancia en Salud.
Mdulo 2 Tipos de estudios epidemiolgicos. Programa Viga . Ministerio de salud y Accin
Social.2000.
5- DANKHE, G. L. (1976). Investigacin y comunicacin, en C. Fernndez-Collado y G. L.
Dankhe (Eds): la comunicacin humana: ciencia social. Mxico, D. F.: McGraw-Hill de
Mxico. Captulo 13, pp. 385-454.