Ronda de Ensayos de Aptitud IHCAFE 2014-1 - Informe Final

2014.07.
11
Informe Final
Programa de ensayos de
aptitud
Caf verde
RC 1305-6 V 1.1
Centro Nacional de Calidad del Caf
Instituto Hondureo del Caf

2014.07.11
Informe Final
Programa de ensayos de
aptitud
Caf verde
RC 1305-6 V 1.1
Instituto Hondureo del Caf

Elaborado por: Carlos Ivn Roque, Msc.
Revisado y aprobado por: Ing. Orieta C. Pinto

ndice
Introduccin 4
1 Preparacin y distribucin de las muestras de ensayo de aptitud 6
2 Ensayos requeridos y mtodos de ensayo utilizados 6
3 Valores asignados y evaluacin del desempeo 7
4 Resultados de los participantes 9
5 Comentarios 18
ANEXOS 19
Programa de ensayos de aptitud Caf verde
INFORME FINAL RC 1305-6 V 1.1
4/21 about.me/roquehn 2014.07.11

Introduccin
Descripcin del programa
El programa de ensayos de aptitud en caf verde fue gestionado por el Instituto Hondureo
del Caf (IHCAFE), a travs de su Centro Nacional de Calidad del Caf (CNCC), con el fin de
facilitar al sector cafetalero un esquema de comparacin interlaboratorios para ensayos de
control de la calidad del caf. Las pruebas incluidas en el presente ejercicio son:
Determinacin de defectos y de materia extraa;
Anlisis sensorial; y
Prdida de masa.
Aunque el presente ejercicio fue auspiciado por IHCAFE y el CNCC provey las muestras de
caf verde, la Coordinacin Tcnica del programa fue delegada a un consultor independiente,
quien prepar el protocolo del programa, las instrucciones para los participantes, los
formularios para los informes y otros recursos, y distribuy los mismos a travs de una
Plataforma de ensayo de aptitud en caf verde (http://calidadcafe.blogspot.com).
La Coordinacin Tcnica codific y distribuy las muestras de ensayos de aptitud a los
participantes y una vez recibidos los resultados de los ensayos por parte de los participantes,
proces estadsticamente los datos, segn la naturaleza de las caractersticas evaluadas.
Finalmente, los resultados de la ronda son comunicados a los participantes a travs del
presente informe.
Confidencialidad de los resultados
La identidad de los participantes es confidencial y conocida slo por las personas involucradas
en la operacin del Programa, salvo que el participante renuncie bajo su responsabilidad a la
confidencialidad.
Los reportes de resultados de los participantes se mantienen en estricta confidencia,
incluyendo los datos referentes a los mtodos utilizados, las condiciones experimentales y
toda informacin sensible generada durante el ejercicio. No se divulga ningn documento
que no est destinado a uso pblico. El Informe Final es en s de uso pblico porque no revela
la identidad de los participantes.
Los participantes pueden renunciar a la confidencialidad para fines de discusin y asistencia
mutua, por ejemplo, para mejorar el desempeo. El participante puede tambin renunciar a la
confidencialidad para fines reglamentarios o de reconocimiento.
Si una autoridad legalmente vlida, o una parte interesada, requiere que los resultados sean
proporcionados directamente por la Coordinacin Tcnica, se notificar por escrito a los
participantes afectados.


Datos de contacto
Para apelar sobre algn resultado o para expresar cualquier inquietud con respecto al presente
informe, los participantes pueden contactar a los organizadores del Programa a travs de los
siguientes medios:
Coordinacin Tcnica del programa
Carlos Ivn Roque, Msc.
Plataforma: http://calidadcafe.blogspot.com
e-mail: carlosroquehn@gmail.com Website: http://about.me/roquehn
Tel (504) 2235-7975
Ing. Orieta C. Pinto
e-mail 1: opinto@ihcafe.hn e-mail 2: oriettapinto@gmail.com
Tel (504) 2556-9100

Puede acceder a la Plataforma de ensayo de aptitud en caf verde a travs de la url:
http://calidadcafe.blogspot.com o escaneando el siguiente cdigo:


Programa de ensayos de aptitud caf verde
Informe final

1. Preparacin y distribucin de las muestras de ensayo de aptitud
El CNCC seleccion las muestras de ensayos de aptitud garantizando que se han obtenido de
un procesamiento uniforme y cuya estabilidad se ha verificado. El CNCC seleccion muestras
de granos de caf verde de entre los lotes de la Taza de Excelencia
1
. Las muestras se componen
de una misma variedad, provienen de un mismo lote y una misma altura. Los lotes
seleccionados se tamizaron a travs de una serie de anlisis sensoriales, siendo catados al
menos en cuatro diferentes sesiones por un panel de diez catadores calificados cada vez,
obteniendo resultados consistentes y sin detectar dao. El CNCC asegura la homogeneidad y
la estabilidad de las muestras para los propsitos del estudio.
Para la ronda se utilizaron dos muestras de granos de caf verde, cultivados en distintas zonas
de Honduras, identificadas en este informe como A y B. Ambas muestras fueron divididas
en porciones homogneas y entregadas a los participantes etiquetndolas con un cdigo
nico. Para el anlisis sensorial y la determinacin de prdida de masa, cada participante
recibi una porcin independiente de las muestra A y B respectivamente, por lo que stas no
constituyen rplicas. Para la determinacin de defectos y de materia extraa, los participantes
recibieron una porcin de la muestra A.
Se utiliz un sistema de triple embalaje para el transporte de las muestras: un empaque de
aluminio reforzado al vaco; lminas de bolsas de aire, para proteger las muestras contra
impactos y vibraciones; y un sobre de papel manila, para agrupar las muestras e indicar el
nombre de la persona de contacto. Las muestras se distribuyeron a travs de UPS y servicios
de correo interno de los participantes.
Se proveyeron las instrucciones para manipular las muestras (RC1305-3) a travs del correo
electrnico y de la plataforma de ensayos de aptitud (http://calidadcafe.blogspot.com). Se
indicaron los ensayos a cada muestra pertinentes en una vieta adherida a la misma.
2. Ensayos requeridos y mtodos de ensayo utilizados

Ensayo Caracterstica Rango esperado Mtodos utilizados
Determinacin de
defectos y de
materia extraa
Nmero de defectos por
imperfeccin. Clasificacin
establecida en NHN 4.
0 defectos secundarios
0 defectos primarios
NHN 53:2011
Anlisis sensorial Fragancia, aroma, sabor, sabor
posgusto, acidez, cuerpo, balance,
dulzura, uniformidad, taza
[60 100] puntos
NHN 54:2011
Prdida de masa Prdida de masa a 105 C. [10 12] g/100 g OHN-ISO 6673:2003
AOAC 950.46

1
Para mayor referencia puede consultar en http://www.ihcafe.hn/


3. Valores asignados y evaluacin del desempeo
3.1. Generalidades
Los valores asignados y los criterios provistos para evaluar el desempeo de los participantes
se definieron conforme a las directrices de la norma ISO/IEC 17043:2010. El tratamiento
estadstico aplicado a los datos cuantitativos y la seleccin de los medios grficos para el
anlisis de los resultados siguieron los lineamientos de la norma ISO 13528:2005.
2

3.2. Determinacin de defectos y de materia extraa
Debido a la naturaleza categrica de los resultados (frecuencia de granos con ciertos defectos
o de objetos forneos), la tcnica apropiada para evaluar el desempeo de los participantes
es cotejar sus resultados con el valor asignado. Si son idnticos, el desempeo es aceptable.
Si no son idnticos, se deja a juicio de los expertos de cada laboratorio determinar si el
resultado es adecuado para el uso previsto.
3

El valor asignado se determina por la moda estadstica de defectos completos reportados, es
decir por los resultados ms frecuentes entre los participantes. Se consideran atpicos aquellos
defectos reportados slo por menos del 5 % de los participantes.
Como parte del ensayo, los participantes clasificaron la calidad del caf verde analizado segn
las especificaciones establecidas en la norma NHN 4:2011. Se determina tambin la
clasificacin ms frecuente entre los participantes como valor asignado.
Se tipifican como satisfactorios aquellos resultados que sean consistentes con los valores
asignados.
3.3. Anlisis sensorial
El valor asignado para cada atributo se determina mediante la moda estadstica, es decir con
base en las puntuaciones individuales ms frecuentes entre los participantes.
El desempeo de los participantes se evala a travs de las pruebas no paramtricas de
Friedman, Kendall y de Wilcoxon, mismas que se explican en el anexo A. De la prueba de
Wilcoxon se generan puntuaciones Z* mediante la siguiente ecuacin:

Donde z* es una aproximacin al puntaje paramtrico z de distribucin normal.
Las pruebas de Friedman y de Kendall se aplican para verificar si existe suficiente consenso
entre los participantes y la magnitud de ese consenso, respectivamente. Estas pruebas se
realizan con un nivel de significancia del 5 %.

2
Aunque la norma ISO 13528:2005 se especifica para datos cuantitativos, los mtodos grficos que recomienda
fueron adaptados a los datos cualitativos y semicuantitativos presentan en este informe.
3
ISO/IEC 17043:2010 B.3.2.1

Los valores reportados por cada participante se contrastan con los valores asignados
respectivos, aplicando la prueba de Wilcoxon. Con este procedimiento estadstico se estima
el valor Z* y el mismo puede ser interpretado segn el siguiente criterio:
Z* Valoracin del desempeo
|
| 2,77
Satisfactorio
2,77 < |
| < 3,26
Cuestionable
|
| 3,26
Insatisfactorio
Los valores satisfactorios corresponden a una probabilidad de error de rechazo del 5 % y los
valores insatisfactorios corresponden a una probabilidad de error de rechazo 0,25 % de los
valores reportados con respecto al valor asignado. Ambos lmites son ajustados para pruebas
no paramtricas.
3.4. Determinacin de prdida de masa
El ensayo se realiz por dos participantes, cada uno aplicando un mtodo diferente (ver 2).
Se verifica si existen diferencias significativas entre las medias y las desviaciones estndar de
los resultados reportados por ambos participantes aplicando una prueba de t de Student y
una prueba de F, respectivamente. Ambas pruebas se efectan con un 95 % de confianza.
Los resultados que no son estadsticamente comparables no son aptos en conjunto para
calcular un valor asignado y un parmetro de reproducibilidad aceptables; por tanto no puede
realizarse un juicio sobre su exactitud. No obstante, el valor esperado de las muestras A y B
debera encontrarse entre 10 % y 12 % (ver 2).


4. Resultados de los participantes

4.1. Anlisis de defectos y de materia extraa
Tabla 1. Valores asignados para el anlisis de defectos y de material extraa
TIPO DE DEFECTO DEFECTOS COMPLETOS 350 g CLASIFICACIN
Conchas 1
CAF ESPECIAL
Partido/Mordido/Cortado 1
Tabla 2. Resultados del anlisis de defectos y de material extraa
CDIGO DE LABORATORIO 568 710 980
CDIGO DE MUESTRA MT75V
b
QADA7 UQJ1B
TIPO DE DEFECTO UNIDADES
DEFECTOS
COMPLETOS
350 g
UNIDADES
DEFECTOS
COMPLETOS
350 g
UNIDADES
DEFECTOS
COMPLETOS
350 g
C
A
T
E
G
O
R
A

1

Grano Negro 0 0
Grano Agrio 0 0
Cereza seca 0 0
Dao por hongo 0 0
Materia Extraa 0 0
Grano Severo brocado 1 0
C
A
T
E
G
O
R
A

2

Parcial Negro 2 0 0 0
Parcial Agrio 5 1 0 0
Pergamino 2 0 2 0
Flotador 0 0
Inmaduro 1 0 0 0 8 1
Averanado o Arrugado 0 0
Conchas
a
7 1 6 1 9 1
Partido/Mordido/Cortado
a
5 1 6 1 5 1
Cascara o Pulpa seca 0 0 1 0
Grano Leve brocado 0 0
Total de defectos
3 2 3
Clasificacin
CAF ESPECIAL CAF ESPECIAL CAF ESPECIAL
Observaciones

Caf verde con bastante
pelcula adherida
DESEMPEO SATISFACTORIO SATISFACTORIO SATISFACTORIO

Valores consensuados

Valores atpicos

Nota a: estos defectos constituyen el valor asignado.
Nota b: MT75V es una porcin de la muestra A destinada a otros ensayos dentro de la ronda.

Grfico 1. Histograma de frecuencias Defectos completos en 350 g reportados por tipo de imperfeccin
IMPERFECCIN [NHN 4:2011]

% Participantes
Grano Negro

Grano Agrio

Cereza seca

Dao por hongo

Materia Extraa

Grano Severo brocado

Parcial Negro

Parcial Agrio 568

33,3 %
Pergamino

Flotador

Inmaduro 980

33,3 %
Averanado o Arrugado

Conchas 568 710 980

100,0 %
Partido/Mordido/Cortado 568 710 980

100,0 %
Cascara o Pulpa seca

Grano Leve brocado

Participantes que reportan

Grfico 2. Histograma de frecuencias Total de defectos reportados
TOTAL DE DEFECTOS

% Participantes
0

1

2 710
33,3 %
3 568 980
66,6 %
4

5


Grfico 3. Histograma de frecuencias Clasificacin reportada
CLASIFICACIN [NHN 4:2011]

% Participantes

Caf Especial 568 710 980
100,0 %
Caf Premium

Fuera de rango




4.2. Anlisis Sensorial
Para este ensayo se dio la posibilidad de presentar resultados de varios catadores por
laboratorio. Por participantes se debe entender que se trata de catadores individuales.
Los siguientes cuadros resumen los datos reportados por los participantes. El cdigo del
participante se configura concatenando el cdigo del laboratorio al cual pertenece con un
cdigo alfabtico binario nico que identifica el catador. Los resultados siempre permiten
comparar el desempeo global del laboratorio con respecto al ensayo.
4.2.1. Puntuaciones reportadas y valores asignados
Tabla 3. Resultados del anlisis sensorial Puntajes reportados y valor asignado muestra A
PARTICIPANTE Y MUESTRA ANALIZADA
568FM 710VW 710UU 710TK 710MV 710SQ 710VT 710VK 980SU
VA
ATRIBUTO MT75V 4KXD6 4KXD6 4KXD6 4KXD6 4KXD6 4KXD6 4KXD6 P42S1
Fragancia/Aroma 8.00 7.50 7.50 7.50 7.50 7.50 7.50 8.00 7.75 7.50
Sabor 8.00 7.50 7.50 7.50 7.50 8.00 7.50 7.50 8.00 7.50
Sabor residual 8.00 7.50 7.50 7.50 7.50 7.50 7.50 7.50 8.00 7.50
Acidez 8.00 7.50 7.50 7.50 8.00 7.50 8.00 7.50 7.75 7.50
Cuerpo 8.00 8.00 8.00 8.00 7.50 8.00 7.50 8.00 8.00 8.00
Uniformidad 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00
Balance 10.00 7.50 7.50 7.50 7.50 7.50 7.50 7.50 7.75 7.50
Limpieza 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00
Dulzura 8.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00
Puntaje del catador 7.00 7.50 7.50 8.00 7.00 7.50 7.50 7.50 7.25 7.50
PUNTAJE FINAL 85.00 83.00 83.00 83.50 82.50 83.50 83.00 83.50 84.50 83.00
VA: Valor asignado (moda).
Tabla 4. Resultados del anlisis sensorial impresin general y observaciones sobre la muestra A
Participante Impresin general Observaciones
568FM Caf floral, ctrico, balanceado, con dulzura,
persistente
Sin comentario
710VW Aroma caramelo, frutas Ctrico, caramelo, post gusto a frutas
710UU Aroma frutas, dulce Ctrico, caramelo, frutas
710TK Aroma frutas, ctrico Ctrico, caramelo
710MV Aroma ctrico, dulce Ctrico, caramelo
710SQ Aroma dulce, floral Floral, dulce, miel
710VT Aroma floral, dulce ctrico, miel, frutas, dulce
710VK Aroma frutas, ctrico Caramelo, ctrico
980SU Sin comentario Fragancias dulce a chocolate ,cuerpo compacto,
acidez ctrica sabor a bayas rojas post gusto limpio


Tabla 5. Resultados del anlisis sensorial Puntajes reportados y valor asignado muestra B
PARTICIPANTE Y MUESTRA ANALIZADA
VA
ATRIBUTO 2JY26 KDPZ5 KDPZ5 KDPZ5 KDPZ5 KDPZ5 KDPZ5 KDPZ5 8XFYF
Fragancia/Aroma 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00 6.25 7.00
Sabor 6.50 6.50 6.50 7.00 7.00 6.50 6.50 6.50 6.50 6.50
Sabor residual 6.50 6.50 7.00 6.50 6.00 6.50 6.50 6.50 6.50 6.50
Acidez 7.00 7.00 7.00 7.00 7.00 7.00 6.00 7.00 7.00 7.00
Cuerpo 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00
Uniformidad 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00
Balance 10.00 7.00 7.00 7.00 6.50 7.00 6.50 7.00 6.50 7.00
Limpieza 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00
Dulzura 7.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00
Puntaje del catador 7.00 6.50 6.00 7.00 7.00 6.50 6.50 7.00 6.50 7.00
PUNTAJE FINAL 78.00 77.50 77.50 78.50 77.50 77.50 76.00 78.00 76.25 77.50
VA: Valor asignado (moda).
Tabla 6. Resultados del anlisis sensorial impresin general y observaciones sobre la muestra B
Participante Impresin general Observaciones
568FM Caf sabor a cosecha vieja, a madera y chocolate Sin comentario
710VW Aroma chocolate Chocolate, spero
710UU Aroma chocolate, dulce dulce, spero
710TK Aroma chocolate Dulce
710MV Aroma ctrico, dulce Dulce, spero
710SQ Aroma chocolate Chocolate
710VT Aroma chocolate Man, spero
710VK Aroma chocolate, dulce Chocolate, spero
980SU Regular Fragancias herbosas a cartn, cuerpo medio,
acidez media, sabor a cosecha vieja, cartn, papel
4.2.2. Pruebas de significancia
Tabla 7. Resultados Pruebas de Friedman y de W de Kendall - Estadsticos de contraste
a
muestra A
N 10
Chi-cuadrado 10.526
Grados de libertad 8
Significancia. 0.230
Coeficiente de concordancia de Kendall (W) 0.132
a. Datos Procesados en IBM SPSS 18
Tabla 8. Resultados Pruebas de Friedman y de W de Kendall - Estadsticos de contraste
a
muestra B
N 10
Chi-cuadrado (X
2
) 8.965
Grados de libertad 8
Significancia. 0.345
Coeficiente de concordancia de Kendall (W) 0.112
a. Datos Procesados en IBM SPSS 18


Muestra A: La prueba de Friedman (X
2
= 10.526, n = 10, p > 0.05) permite afirmar que existe
suficiente consenso entre los participantes.
Muestra B: La prueba de Friedman (X
2
= 8.965, n = 10, p > 0.05) permite afirmar que existe
suficiente consenso entre los participantes.
El resultado global del anlisis sensorial, tanto de la muestra A como B, proporciona suficiente
consenso para determinar que los valores asignados son fiables.
4.2.3. Estadsticas de desempeo
a) Comparacin de valores individuales
Grfico 4. Anlisis Sensorial Puntajes reportados por los participantes vs. Valor asignado Muestra A

Grfico 5. Anlisis Sensorial Puntajes reportados por los participantes vs. Valor asignado Muestra B

568FM, 85.00
710VW, 83.00 710UU, 83.00
710TK, 83.50
710MV, 82.50
710SQ, 83.50
710VT, 83.00
710VK, 83.50
980SU, 84.50
82.00
82.50
83.00
83.50
84.00
84.50
85.00
85.50
P
u
n
t
a
j
e

F
i
n
a
l
Anlisis sensorial - puntaje final [MUESTRA A]
568FM, 78.00
710UU, 77.50
710TK, 77.50
710MV, 78.50
710SQ, 77.50710VW, 77.50
710VT, 76.00
710VK, 78.00
980SU, 76.25
75.50
76.00
76.50
77.00
77.50
78.00
78.50
79.00
P
u
n
t
a
j
e

F
i
n
a
l
Anlisis sensorial - puntaje final [MUESTRA B]

b) Puntuaciones estandarizadas
Tabla 9. Resumen del desempeo de participantes en anlisis sensorial puntuaciones Z* muestra A
Z* -0.88 0.00 0.00 -1.00 -0.58 -1.00 0.00 -1.00 -1.73
DESEMPEO
b

NOTAS a: significancia asinttica; b: satisfactorio, dudoso, insatisfactorio
Grfico 6. Anlisis Sensorial - Distribucin de valores Z* Muestra A

Tabla 10. Resumen del desempeo de participantes en anlisis sensorial puntuaciones Z* muestra B
568FM 710UU 710TK 710MV 710SQ 710VW 710VT 710VK 980SU
Z*
0.00 -1.00 -0.45 -1.00 -0.58 -1.00 -1.63 0.00 -1.63
DESEMPEO
b

NOTAS a: significancia asinttica; b: satisfactorio, dudoso, insatisfactorio
Grfico 7. Anlisis Sensorial - Distribucin de valores Z* Muestra B

-1.73
-1.00 -1.00 -1.00
-0.88
-0.58
0.00 0.00 0.00
-4.00
-3.00
-2.00
-1.00
0.00
1.00
2.00
3.00
4.00
z*
Participante [catador(a)]
-1.63 -1.63
-1.00 -1.00 -1.00
-0.58
-0.45
0.00 0.00
-4.00
-3.00
-2.00
-1.00
0.00
1.00
2.00
3.00
4.00
z*


Grfico 8. Grfico de barras de las puntuaciones z* (3,5 a -3,5) para el anlisis sensorial en la ronda de una
prueba de aptitud en caf verde - Muestras A y B por participante

4.3. Prdida de masa
Tabla 11. Determinacin de prdida de masa resultados reportados para muestras A y B [g/100 g]
Cdigo de participante 710 710 510
510
Cdigo de muestra 4KXD6 KDPZ5 Q9MNP TXCA8
Muestra A B A
B
Rplica 1 10,05 11,27 7,08 9,36
Rplica 2 10,01 11,29 7,04 8,74
Media reportada por participante* 10,03 11,27 7,06 8,92
Media calculada por proveedor* 10,03 11,28 7,06 9,05
Desvo estndar 0,03 0,01 0,03 0,44
RSD[%]** 0.28% 0.13% 0.40% 4.84%
Incertidumbre reportada por participante 0,08 0,08 0,06 1,26
* se presentan discrepancias entre las medias reportadas y las medias calculadas. Para las pruebas estadsticas de
comparacin se utilizan las medias calculadas (criterio conforme a ISO/IEC 17043:2010 4.7.1.5).
Tabla 12. Determinacin de prdida de masa resultados reportados para muestras A y B
Muestra A

Muestra B
Prueba F para varianzas

Prueba F para varianzas

710 510 710 510
Media 10.03 7.06 Media 9.05 11.28
Varianza 0.0008 0.0008 Varianza 0.1922 0.0002
F 1.0000

F 961.0
P(F<=f) una cola 0.5000

P(F<=f) una cola 0.0205
Valor crtico para F 161.4 Valor crtico para F 161.4
-0.88
0.00 0.00
-1.00
-0.58
-1.00
0.00
-1.00
-1.73
0.00
-1.00 -1.00
-0.45
-1.00
-0.58
-1.63
0.00
-1.63
-3.50
-2.50
-1.50
-0.50
0.50
1.50
2.50
3.50
z*
A B

Tabla 12. Determinacin de prdida de masa resultados reportados para muestras A y B
Muestra A

Muestra B
Prueba t para medias

Prueba t para medias
710 510 710 510
Media 10.03 7.06 Media 11.28 9.05
Varianza 0.0008 0.0008 Varianza 0.0002 0.1922
Varianza agrupada 0.0008 Diferencia hipottica 0
Diferencia hipottica 0 Grados de libertad 1
Grados de libertad 2 Estadstico t 7.19
Estadstico t 105.01 P(T<=t) dos colas 0.0880
P(T<=t) dos colas 0.00009 Valor crtico de t (dos colas) 12.71
Valor crtico de t (dos colas) 4.30
Muestra A: La prueba de t de student (t = 105.01, n = 2, p < 0.05) indica que las cantidades
de prdida de masa no son comparables, asumiendo una probabilidad de error de 0.009 %
en esta afirmacin.
Muestra B: La prueba F (F = 961.0, n = 2, p < 0.05) indica que las varianzas de la medicin de
prdida de masa son significativamente diferentes. No se evidencian diferencias significativas
estadsticamente entre las medias, asumiendo una probabilidad de error de 8.8 % en esta
afirmacin.
Debido al uso de mtodos de ensayo empricos diferentes para la determinacin de prdida de masa, no se
puede inferir que uno de los resultados sea errneo.
Grfico 9. Comparacin de promedios con intervalos de confianza (95 %)



Grfico 10. Comparacin de promedios con intervalos de confianza (95 %)

Grfico 11. Prdida de masa - Comparacin de promedios con incertidumbres expandidas
reportadas Muestras A y B

6.5
7.5
8.5
9.5
10.5
11.5
710 A 510 A 710 B 510 B

5. Comentarios
5.1. Se recomienda interpretar con precaucin las comparaciones entre resultados de
ensayo del anlisis de defectos y de materia extraa, en vista de que una de las muestras de
ensayo de aptitud utilizada por los participantes fue preparada con otro propsito (ver nota
b en Tabla 2). Las muestras destinadas al anlisis de defectos y de materia extraa fueron
preparadas por el CNCC agregando deliberadamente a cada porcin cierta clase de defectos,
no as las dems muestras de ensayo de aptitud.
5.2. Los ensayos para la identificacin de defectos y de materia extraa y el anlisis
sensorial son cualitativos y generan datos discretos, basados en frecuencias o en
categorizaciones; por tanto, la interpretacin estadstica de los mismos debe hacerse a travs
de procedimientos estadsticos apropiados. Se recomienda en este sentido no hacer
inferencias a partir de los resultados a travs de estadsticos paramtricos (p.e. media
aritmtica y desviacin tpica).
5.3. Se recomienda interpretar con precaucin la comparacin de resultados del ensayo de
prdida de masa. Estadsticamente, estos resultados son comparables con un 95 % de
confianza en cuanto a las medias aritmticas; no obstante, una desviacin estndar
suficientemente grande puede hacer que esta prueba estadstica arroje resultados incorrectos.
Particularmente, el valor promedio del participante 710 para la muestra B tiene una
dispersin que abarca la media del participante 510.
Debido al uso de mtodos de ensayo empricos diferentes para la determinacin de
prdida de masa, no se puede inferir que uno de los resultados sea errneo.



ANEXOS
A . Pruebas no paramtricas aplicadas a la evaluacin del desempeo del
anlisis sensorial.
A.1 Generalidades
Los atributos calificados en el anlisis sensorial se expresan por medio de puntuaciones que
matemticamente consisten en valores ordinales o semicuantitativos. Para este tipo de datos
no es apropiado calcular estadsticas de resumen ni utilizar medidas de evaluacin tales como
los valores de z convencionales, aun cuando los resultados sean numricos
4
. Esto se debe a
que esos nmeros no representan una escala continua, sujeta a los requerimientos de las
pruebas paramtricas; de modo que sus promedios y desviaciones estndar no se pueden
interpretar.
Se aplica la prueba de Friedman para verificar que existe suficiente consenso entre los
participantes y considerar la reproducibilidad de los resultados. Adicionalmente, se calcula un
coeficiente de concordancia (W) [Kendall y Wallis] para estimar la magnitud de dicho
consenso. A continuacin se explica brevemente en qu consisten dichas pruebas.
A.2 Desempeo global del consenso
La prueba de Friedman es utilizada para comparar rangos de ms de dos grupos relacionados,
determinando si existen diferencias significativas entre los grupos, con cierto nivel de riesgo
de aceptar datos realmente no conformes
Anloga a la prueba de ANOVA, los datos se ordenan en matrices donde generalmente los
grupos a comparar se conforman en columnas y las caractersticas valoradas en filas. En el
presente caso, se comparan los participantes (grupos o columnas) en funcin de las
puntuaciones que determinaron sensorialmente (atributos o filas).
Las puntuaciones originales se transforman en rangos. Para cada grupo se ordenan las
puntuaciones individuales en orden ascendente, si los grupos son coincidentes, es decir que
existe suficiente consenso, el orden de las puntuaciones debe ser similar. Los rangos obtenidos
son sumados y se procesan aplicando el algoritmo de Friedman que es capaz de proporcionar
informacin sobre la comparabilidad entre las poblaciones de rangos de cada grupo.
= [

(+)

=
] ( +)
Ecuacin 1
Donde: n representa el nmero de filas (atributos); k representa el nmero de grupos
(catadores); Ri es la suma de los rangos pertinentes a cada grupo. Existen tambin otros
arreglos algebraicos para este algoritmo.
El estadstico Fr sigue la distribucin chi-cuadrada, con k 1 grados de libertad, siendo k el
nmero de grupos comparados. El programa SPSS, utilizado en anlisis de datos y evaluacin

4
ISO/IEC 17043:2010 B.3.2.3

de los resultados de este programa de ensayos de aptitud, entrega los resultados del
estadstico Fr en forma de
2
(chi-cuadrada).
Una vez obtenido el estadstico, ste se compara con un valor crtico. Si el estadstico de
prueba no es significativamente mayor al valor crtico entonces se infiere que no existen
diferencias importantes entre los grupos relacionados; por el contrario, si el estadstico de
prueba es mayor al valor crtico, se puede suponer que al menos uno de los grupos
comparados, sin saber cul(es) con precisin, es discrepante.
Cuando se desarrollan contrastes entre ms de dos grupos, la probabilidad de error tiende a
expandirse, por lo que el nivel de riesgo inicial (alfa) debe ser ajustado. En el presente ejercicio,
dicho ajuste se realiza aplicando la siguiente ecuacin:

Ecuacin 2
Donde es el nivel de riesgo o significancia asumida, usualmente de 0,05, y k es el nmero
de grupos comparados.
Adicionalmente se calcula el coeficiente de concordancia W de Kendall, que estudia la relacin
existente en conjuntos de rangos de tres o ms grupos y puede tomas valores entre cero y
uno. Con este coeficiente se puede inferir que existe una concordancia perfecta cuando su
valor es uno, cuando todos los catadores, por ejemplo, valoran los n objetos, o atributos, del
mismo modo, es decir cuando coinciden plenamente en sus categorizaciones; por el contrario,
cuando su valor es cero, la concordancia es nula, es decir que no existe ningn consenso entre
las valoraciones al mismo conjunto de objetos, o atributos. Para afirmar que la concordancia
es significativa se hace una prueba estadstica transformando el coeficiente al chi cuadrada de
Friedman. De la misma manera, teniendo antes el estadstico de Friedman, puede calcularse
el coeficiente W de Kendall, mediante el siguiente algoritmo:
2
= ( 1)
Ecuacin 3
Donde k es el nmero de grupos (p.e. catadores) y n es el nmero de objetos (p.e. atributos).
A.3 Desempeo individual de los participantes
Cuando la prueba de Friedman arroja resultados significativos, la misma no es capaz de
identificar cules y cuntos participantes son estadsticamente diferentes al resto.
Complementariamente, se utiliza la prueba de Wilcoxon, con un riesgo ajustado, para
comparar los grupos por pares. Esta es una prueba no paramtrica que compara dos muestras
pareadas o relacionadas (misma muestra) y es equivalente a la prueba paramtrica de t de
Student para datos pareados.
Ejemplo
Puntuacin Participante Valor asignado por atributo Diferencia
Atributo 1
x1 y1 x1 - y1
Atributo 2
x2 y2 x2 y2
Atributo 3
x3 y3 x3 - y3
Atributo 4
x4 y4 x4 - y4


Para la prueba de Wilcoxon se utiliza el nivel de riesgo o significancia ajustado (
B
), como se
indica en A.2 (Ecuacin 2).
La prueba de Wilcoxon genera una media y un desvo estndar no paramtricos con respecto
al par de grupos que se compara, con los cuales se puede hacer una aproximacin a un z-
score mediante la siguiente ecuacin:

Ecuacin 4
Donde z* es una aproximacin al puntaje z de distribucin normal; T es la suma de los rangos
medios de las diferencias negativas o positivas, segn cual sea la ms pequea de ambas,
entre el par de atributos;
son la media y el desvo estndar no paramtricos calculados

con los siguientes algoritmos:
=
(+)

Ecuacin 5

=
(+)(+)

Ecuacin 6
Donde n es el nmero de pares de datos diferentes de cero.

Referencias bibliogrficas
1. Proficiency testing for sensory ranking panels: mesauring panel perfomance. McEwan, Jean A., y
otros. 2003, Food Quality and Preference, pgs. 247 - 256.
2. OHN-ISO/IEC 17043:2010. Evaluacin de la conformidad Requisitos generales para los ensayos
de aptitud.
3. ISO 13528:2005. Statistical methods for use in proficiency testing by interlaboratory comparisons.
4. Corder, Gregory W. y Foreman, Dale I. Nonparametric statistics for non-statisticians - A step-byStep
Approach. Hoboken : John Wiley & Sons, Inc., 2009.

Ronda de Ensayos de Aptitud IHCAFE 2014-1 - Informe Final

Transféré par

Informations du document

Copyright

Formats disponibles

Partager ce document

Partager ou intégrer le document

Options de partage

Avez-vous trouvé ce document utile ?

Ce contenu est-il inapproprié ?

Droits d'auteur :

Formats disponibles

Ronda de Ensayos de Aptitud IHCAFE 2014-1 - Informe Final

Transféré par

Droits d'auteur :

Formats disponibles

2014.07.

son la media y el desvo estndar no paramtricos calculados

Vous aimerez peut-être aussi