ronda de ensayos de aptitud ihcafe 2014-1 - informe final

2014.07.11

Informe Final

Programa de ensayos de

aptitud

Caf verde

RC 1305-6 V 1.1

Centro Nacional de Calidad del Caf

Instituto Hondureo del Caf

2014.07.11

Informe Final

Programa de ensayos de

aptitud

Caf verde

RC 1305-6 V 1.1


Instituto Hondureo del Caf

Elaborado por: Carlos Ivn Roque, Msc.

Revisado y aprobado por: Ing. Orieta C. Pinto

ndice

Introduccin 4

1 Preparacin y distribucin de las muestras de ensayo de aptitud 6

2 Ensayos requeridos y mtodos de ensayo utilizados 6

3 Valores asignados y evaluacin del desempeo 7

4 Resultados de los participantes 9

5 Comentarios 18

ANEXOS 19

Programa de ensayos de aptitud Caf verde

INFORME FINAL RC 1305-6 V 1.1

4/21 about.me/roquehn 2014.07.11

Introduccin

Descripcin del programa

El programa de ensayos de aptitud en caf verde fue gestionado por el Instituto Hondureo

del Caf (IHCAFE), a travs de su Centro Nacional de Calidad del Caf (CNCC), con el fin de

facilitar al sector cafetalero un esquema de comparacin interlaboratorios para ensayos de

control de la calidad del caf. Las pruebas incluidas en el presente ejercicio son:

Determinacin de defectos y de materia extraa;

Anlisis sensorial; y

Prdida de masa.

Aunque el presente ejercicio fue auspiciado por IHCAFE y el CNCC provey las muestras de

caf verde, la Coordinacin Tcnica del programa fue delegada a un consultor independiente,

quien prepar el protocolo del programa, las instrucciones para los participantes, los

formularios para los informes y otros recursos, y distribuy los mismos a travs de una

Plataforma de ensayo de aptitud en caf verde (http://calidadcafe.blogspot.com).

La Coordinacin Tcnica codific y distribuy las muestras de ensayos de aptitud a los

participantes y una vez recibidos los resultados de los ensayos por parte de los participantes,

proces estadsticamente los datos, segn la naturaleza de las caractersticas evaluadas.

Finalmente, los resultados de la ronda son comunicados a los participantes a travs del

presente informe.

Confidencialidad de los resultados

La identidad de los participantes es confidencial y conocida slo por las personas involucradas

en la operacin del Programa, salvo que el participante renuncie bajo su responsabilidad a la

confidencialidad.

Los reportes de resultados de los participantes se mantienen en estricta confidencia,

incluyendo los datos referentes a los mtodos utilizados, las condiciones experimentales y

toda informacin sensible generada durante el ejercicio. No se divulga ningn documento

que no est destinado a uso pblico. El Informe Final es en s de uso pblico porque no revela

la identidad de los participantes.

Los participantes pueden renunciar a la confidencialidad para fines de discusin y asistencia

mutua, por ejemplo, para mejorar el desempeo. El participante puede tambin renunciar a la

confidencialidad para fines reglamentarios o de reconocimiento.

Si una autoridad legalmente vlida, o una parte interesada, requiere que los resultados sean

proporcionados directamente por la Coordinacin Tcnica, se notificar por escrito a los

participantes afectados.




Datos de contacto

Para apelar sobre algn resultado o para expresar cualquier inquietud con respecto al presente

informe, los participantes pueden contactar a los organizadores del Programa a travs de los

siguientes medios:

Coordinacin Tcnica del programa

Carlos Ivn Roque, Msc.

Plataforma: http://calidadcafe.blogspot.com

e-mail: [email protected] Website: http://about.me/roquehn

Tel (504) 2235-7975


Ing. Orieta C. Pinto

e-mail 1: [email protected] e-mail 2: [email protected]

Tel (504) 2556-9100

Puede acceder a la Plataforma de ensayo de aptitud en caf verde a travs de la url:

http://calidadcafe.blogspot.com o escaneando el siguiente cdigo:




Programa de ensayos de aptitud caf verde

Informe final

1. Preparacin y distribucin de las muestras de ensayo de aptitud

El CNCC seleccion las muestras de ensayos de aptitud garantizando que se han obtenido de

un procesamiento uniforme y cuya estabilidad se ha verificado. El CNCC seleccion muestras

de granos de caf verde de entre los lotes de la Taza de Excelencia1. Las muestras se componen

de una misma variedad, provienen de un mismo lote y una misma altura. Los lotes

seleccionados se tamizaron a travs de una serie de anlisis sensoriales, siendo catados al

menos en cuatro diferentes sesiones por un panel de diez catadores calificados cada vez,

obteniendo resultados consistentes y sin detectar dao. El CNCC asegura la homogeneidad y

la estabilidad de las muestras para los propsitos del estudio.

Para la ronda se utilizaron dos muestras de granos de caf verde, cultivados en distintas zonas

de Honduras, identificadas en este informe como A y B. Ambas muestras fueron divididas

en porciones homogneas y entregadas a los participantes etiquetndolas con un cdigo

nico. Para el anlisis sensorial y la determinacin de prdida de masa, cada participante

recibi una porcin independiente de las muestra A y B respectivamente, por lo que stas no

constituyen rplicas. Para la determinacin de defectos y de materia extraa, los participantes

recibieron una porcin de la muestra A.

Se utiliz un sistema de triple embalaje para el transporte de las muestras: un empaque de

aluminio reforzado al vaco; lminas de bolsas de aire, para proteger las muestras contra

impactos y vibraciones; y un sobre de papel manila, para agrupar las muestras e indicar el

nombre de la persona de contacto. Las muestras se distribuyeron a travs de UPS y servicios

de correo interno de los participantes.

Se proveyeron las instrucciones para manipular las muestras (RC1305-3) a travs del correo

electrnico y de la plataforma de ensayos de aptitud (http://calidadcafe.blogspot.com). Se

indicaron los ensayos a cada muestra pertinentes en una vieta adherida a la misma.

2. Ensayos requeridos y mtodos de ensayo utilizados

Ensayo Caracterstica Rango esperado Mtodos utilizados

Determinacin de

defectos y de

materia extraa

Nmero de defectos por

imperfeccin. Clasificacin

establecida en NHN 4.

0 defectos secundarios

0 defectos primarios

NHN 53:2011

Anlisis sensorial Fragancia, aroma, sabor, sabor

posgusto, acidez, cuerpo, balance,

dulzura, uniformidad, taza

[60 100] puntos NHN 54:2011

Prdida de masa Prdida de masa a 105 C. [10 12] g/100 g OHN-ISO 6673:2003

AOAC 950.46

1 Para mayor referencia puede consultar en http://www.ihcafe.hn/




3. Valores asignados y evaluacin del desempeo

3.1. Generalidades

Los valores asignados y los criterios provistos para evaluar el desempeo de los participantes

se definieron conforme a las directrices de la norma ISO/IEC 17043:2010. El tratamiento

estadstico aplicado a los datos cuantitativos y la seleccin de los medios grficos para el

anlisis de los resultados siguieron los lineamientos de la norma ISO 13528:2005.2

3.2. Determinacin de defectos y de materia extraa

Debido a la naturaleza categrica de los resultados (frecuencia de granos con ciertos defectos

o de objetos forneos), la tcnica apropiada para evaluar el desempeo de los participantes

es cotejar sus resultados con el valor asignado. Si son idnticos, el desempeo es aceptable.

Si no son idnticos, se deja a juicio de los expertos de cada laboratorio determinar si el

resultado es adecuado para el uso previsto.3

El valor asignado se determina por la moda estadstica de defectos completos reportados, es

decir por los resultados ms frecuentes entre los participantes. Se consideran atpicos aquellos

defectos reportados slo por menos del 5 % de los participantes.

Como parte del ensayo, los participantes clasificaron la calidad del caf verde analizado segn

las especificaciones establecidas en la norma NHN 4:2011. Se determina tambin la

clasificacin ms frecuente entre los participantes como valor asignado.

Se tipifican como satisfactorios aquellos resultados que sean consistentes con los valores

asignados.

3.3. Anlisis sensorial

El valor asignado para cada atributo se determina mediante la moda estadstica, es decir con

base en las puntuaciones individuales ms frecuentes entre los participantes.

El desempeo de los participantes se evala a travs de las pruebas no paramtricas de

Friedman, Kendall y de Wilcoxon, mismas que se explican en el anexo A. De la prueba de

Wilcoxon se generan puntuaciones Z* mediante la siguiente ecuacin:

=

Donde z* es una aproximacin al puntaje paramtrico z de distribucin normal.

Las pruebas de Friedman y de Kendall se aplican para verificar si existe suficiente consenso

entre los participantes y la magnitud de ese consenso, respectivamente. Estas pruebas se

realizan con un nivel de significancia del 5 %.

2 Aunque la norma ISO 13528:2005 se especifica para datos cuantitativos, los mtodos grficos que recomienda

fueron adaptados a los datos cualitativos y semicuantitativos presentan en este informe. 3 ISO/IEC 17043:2010 B.3.2.1




Los valores reportados por cada participante se contrastan con los valores asignados

respectivos, aplicando la prueba de Wilcoxon. Con este procedimiento estadstico se estima

el valor Z* y el mismo puede ser interpretado segn el siguiente criterio:

Z* Valoracin del desempeo

|| 2,77 Satisfactorio

2,77 < || < 3,26 Cuestionable

|| 3,26 Insatisfactorio

Los valores satisfactorios corresponden a una probabilidad de error de rechazo del 5 % y los

valores insatisfactorios corresponden a una probabilidad de error de rechazo 0,25 % de los

valores reportados con respecto al valor asignado. Ambos lmites son ajustados para pruebas

no paramtricas.

3.4. Determinacin de prdida de masa

El ensayo se realiz por dos participantes, cada uno aplicando un mtodo diferente (ver 2).

Se verifica si existen diferencias significativas entre las medias y las desviaciones estndar de

los resultados reportados por ambos participantes aplicando una prueba de t de Student y

una prueba de F, respectivamente. Ambas pruebas se efectan con un 95 % de confianza.

Los resultados que no son estadsticamente comparables no son aptos en conjunto para

calcular un valor asignado y un parmetro de reproducibilidad aceptables; por tanto no puede

realizarse un juicio sobre su exactitud. No obstante, el valor esperado de las muestras A y B

debera encontrarse entre 10 % y 12 % (ver 2).




4. Resultados de los participantes

4.1. Anlisis de defectos y de materia extraa

Tabla 1. Valores asignados para el anlisis de defectos y de material extraa

TIPO DE DEFECTO DEFECTOS COMPLETOS 350 g CLASIFICACIN

Conchas 1 CAF ESPECIAL

Partido/Mordido/Cortado 1

Tabla 2. Resultados del anlisis de defectos y de material extraa

CDIGO DE LABORATORIO 568 710 980

CDIGO DE MUESTRA MT75V b QADA7 UQJ1B

TIPO DE DEFECTO UNIDADES DEFECTOS

COMPLETOS

350 g

UNIDADES

DEFECTOS

COMPLETOS

350 g

UNIDADES

DEFECTOS

COMPLETOS

350 g

CA

TEG

OR

A 1

Grano Negro 0 0

Grano Agrio 0 0

Cereza seca 0 0

Dao por hongo 0 0

Materia Extraa 0 0

Grano Severo brocado 1 0

CA

TEG

OR

A 2

Parcial Negro 2 0 0 0

Parcial Agrio 5 1 0 0

Pergamino 2 0 2 0

Flotador 0 0

Inmaduro 1 0 0 0 8 1

Averanado o Arrugado 0 0

Conchasa 7 1 6 1 9 1

Partido/Mordido/Cortadoa 5 1 6 1 5 1

Cascara o Pulpa seca 0 0 1 0

Grano Leve brocado 0 0

Total de defectos 3 2 3 Clasificacin CAF ESPECIAL CAF ESPECIAL CAF ESPECIAL

Observaciones Caf verde con bastante

pelcula adherida

DESEMPEO SATISFACTORIO SATISFACTORIO SATISFACTORIO

Valores consensuados

Valores atpicos

Nota a: estos defectos constituyen el valor asignado.

Nota b: MT75V es una porcin de la muestra A destinada a otros ensayos dentro de la ronda.




Grfico 1. Histograma de frecuencias Defectos completos en 350 g reportados por tipo de imperfeccin

IMPERFECCIN [NHN 4:2011] % Participantes Grano Negro

Grano Agrio

Cereza seca

Dao por hongo

Materia Extraa

Grano Severo brocado

Parcial Negro

Parcial Agrio 568 33,3 %

Pergamino

Flotador

Inmaduro 980 33,3 %

Averanado o Arrugado

Conchas 568 710 980 100,0 %

Partido/Mordido/Cortado 568 710 980 100,0 %

Cascara o Pulpa seca

Grano Leve brocado

Participantes que reportan

Grfico 2. Histograma de frecuencias Total de defectos reportados

TOTAL DE DEFECTOS % Participantes 0

1

2 710 33,3 %

3 568 980 66,6 %

4

5


Grfico 3. Histograma de frecuencias Clasificacin reportada

CLASIFICACIN [NHN 4:2011] % Participantes

Caf Especial 568 710 980 100,0 %

Caf Premium

Fuera de rango





4.2. Anlisis Sensorial

Para este ensayo se dio la posibilidad de presentar resultados de varios catadores por

laboratorio. Por participantes se debe entender que se trata de catadores individuales.

Los siguientes cuadros resumen los datos reportados por los participantes. El cdigo del

participante se configura concatenando el cdigo del laboratorio al cual pertenece con un

cdigo alfabtico binario nico que identifica el catador. Los resultados siempre permiten

comparar el desempeo global del laboratorio con respecto al ensayo.

4.2.1. Puntuaciones reportadas y valores asignados

Tabla 3. Resultados del anlisis sensorial Puntajes reportados y valor asignado muestra A

PARTICIPANTE Y MUESTRA ANALIZADA

568FM 710VW 710UU 710TK 710MV 710SQ 710VT 710VK 980SU VA

ATRIBUTO MT75V 4KXD6 4KXD6 4KXD6 4KXD6 4KXD6 4KXD6 4KXD6 P42S1

Fragancia/Aroma 8.00 7.50 7.50 7.50 7.50 7.50 7.50 8.00 7.75 7.50

Sabor 8.00 7.50 7.50 7.50 7.50 8.00 7.50 7.50 8.00 7.50

Sabor residual 8.00 7.50 7.50 7.50 7.50 7.50 7.50 7.50 8.00 7.50

Acidez 8.00 7.50 7.50 7.50 8.00 7.50 8.00 7.50 7.75 7.50

Cuerpo 8.00 8.00 8.00 8.00 7.50 8.00 7.50 8.00 8.00 8.00

Uniformidad 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00

Balance 10.00 7.50 7.50 7.50 7.50 7.50 7.50 7.50 7.75 7.50

Limpieza 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00

Dulzura 8.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00

Puntaje del catador 7.00 7.50 7.50 8.00 7.00 7.50 7.50 7.50 7.25 7.50

PUNTAJE FINAL 85.00 83.00 83.00 83.50 82.50 83.50 83.00 83.50 84.50 83.00

VA: Valor asignado (moda).

Tabla 4. Resultados del anlisis sensorial impresin general y observaciones sobre la muestra A

Participante Impresin general Observaciones

568FM Caf floral, ctrico, balanceado, con dulzura,

persistente

Sin comentario

710VW Aroma caramelo, frutas Ctrico, caramelo, post gusto a frutas

710UU Aroma frutas, dulce Ctrico, caramelo, frutas

710TK Aroma frutas, ctrico Ctrico, caramelo

710MV Aroma ctrico, dulce Ctrico, caramelo

710SQ Aroma dulce, floral Floral, dulce, miel

710VT Aroma floral, dulce ctrico, miel, frutas, dulce

710VK Aroma frutas, ctrico Caramelo, ctrico

980SU Sin comentario Fragancias dulce a chocolate ,cuerpo compacto,

acidez ctrica sabor a bayas rojas post gusto limpio




Tabla 5. Resultados del anlisis sensorial Puntajes reportados y valor asignado muestra B

PARTICIPANTE Y MUESTRA ANALIZADA

568FM 710VW 710UU 710TK 710MV 710SQ 710VT 710VK 980SU VA

ATRIBUTO 2JY26 KDPZ5 KDPZ5 KDPZ5 KDPZ5 KDPZ5 KDPZ5 KDPZ5 8XFYF

Fragancia/Aroma 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00 6.25 7.00

Sabor 6.50 6.50 6.50 7.00 7.00 6.50 6.50 6.50 6.50 6.50

Sabor residual 6.50 6.50 7.00 6.50 6.00 6.50 6.50 6.50 6.50 6.50

Acidez 7.00 7.00 7.00 7.00 7.00 7.00 6.00 7.00 7.00 7.00

Cuerpo 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00 7.00

Uniformidad 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00

Balance 10.00 7.00 7.00 7.00 6.50 7.00 6.50 7.00 6.50 7.00

Limpieza 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00

Dulzura 7.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00 10.00

Puntaje del catador 7.00 6.50 6.00 7.00 7.00 6.50 6.50 7.00 6.50 7.00

PUNTAJE FINAL 78.00 77.50 77.50 78.50 77.50 77.50 76.00 78.00 76.25 77.50

VA: Valor asignado (moda).

Tabla 6. Resultados del anlisis sensorial impresin general y observaciones sobre la muestra B

Participante Impresin general Observaciones

568FM Caf sabor a cosecha vieja, a madera y chocolate Sin comentario

710VW Aroma chocolate Chocolate, spero

710UU Aroma chocolate, dulce dulce, spero

710TK Aroma chocolate Dulce

710MV Aroma ctrico, dulce Dulce, spero

710SQ Aroma chocolate Chocolate

710VT Aroma chocolate Man, spero

710VK Aroma chocolate, dulce Chocolate, spero

980SU Regular Fragancias herbosas a cartn, cuerpo medio,

acidez media, sabor a cosecha vieja, cartn, papel

4.2.2. Pruebas de significancia

Tabla 7. Resultados Pruebas de Friedman y de W de Kendall - Estadsticos de contraste a muestra A

N 10

Chi-cuadrado 10.526

Grados de libertad 8

Significancia. 0.230

Coeficiente de concordancia de Kendall (W) 0.132

a. Datos Procesados en IBM SPSS 18

Tabla 8. Resultados Pruebas de Friedman y de W de Kendall - Estadsticos de contraste a muestra B

N 10

Chi-cuadrado (X2) 8.965

Grados de libertad 8

Significancia. 0.345

Coeficiente de concordancia de Kendall (W) 0.112

a. Datos Procesados en IBM SPSS 18




Muestra A: La prueba de Friedman (X2 = 10.526, n = 10, p > 0.05) permite afirmar que existe

suficiente consenso entre los participantes.

Muestra B: La prueba de Friedman (X2 = 8.965, n = 10, p > 0.05) permite afirmar que existe

suficiente consenso entre los participantes.

El resultado global del anlisis sensorial, tanto de la muestra A como B, proporciona suficiente

consenso para determinar que los valores asignados son fiables.

4.2.3. Estadsticas de desempeo

a) Comparacin de valores individuales

Grfico 4. Anlisis Sensorial Puntajes reportados por los participantes vs. Valor asignado Muestra A

Grfico 5. Anlisis Sensorial Puntajes reportados por los participantes vs. Valor asignado Muestra B

568FM, 85.00

710VW, 83.00 710UU, 83.00

710TK, 83.50

710MV, 82.50

710SQ, 83.50

710VT, 83.00

710VK, 83.50

980SU, 84.50

82.00

82.50

83.00

83.50

84.00

84.50

85.00

85.50

Pu

nta

je F

inal

Anlisis sensorial - puntaje final [MUESTRA A]

568FM, 78.00

710UU, 77.50710TK, 77.50

710MV, 78.50

710SQ, 77.50 710VW, 77.50

710VT, 76.00

710VK, 78.00

980SU, 76.25

75.50

76.00

76.50

77.00

77.50

78.00

78.50

79.00

Pu

nta

je F

inal

Anlisis sensorial - puntaje final [MUESTRA B]




b) Puntuaciones estandarizadas

Tabla 9. Resumen del desempeo de participantes en anlisis sensorial puntuaciones Z* muestra A

568FM 710VW 710UU 710TK 710MV 710SQ 710VT 710VK 980SU

Z* -0.88 0.00 0.00 -1.00 -0.58 -1.00 0.00 -1.00 -1.73

DESEMPEO b

NOTAS a: significancia asinttica; b: satisfactorio, dudoso, insatisfactorio

Grfico 6. Anlisis Sensorial - Distribucin de valores Z* Muestra A

Tabla 10. Resumen del desempeo de participantes en anlisis sensorial puntuaciones Z* muestra B

568FM 710UU 710TK 710MV 710SQ 710VW 710VT 710VK 980SU

Z* 0.00 -1.00 -0.45 -1.00 -0.58 -1.00 -1.63 0.00 -1.63

DESEMPEO b

NOTAS a: significancia asinttica; b: satisfactorio, dudoso, insatisfactorio

Grfico 7. Anlisis Sensorial - Distribucin de valores Z* Muestra B

-1.73

-1.00 -1.00 -1.00 -0.88-0.58

0.00 0.00 0.00

-4.00

-3.00

-2.00

-1.00

0.00

1.00

2.00

3.00

4.00

z*

Participante [catador(a)]

-1.63 -1.63-1.00 -1.00 -1.00

-0.58 -0.450.00 0.00

-4.00

-3.00

-2.00

-1.00

0.00

1.00

2.00

3.00

4.00

z*

Participante [catador(a)]




Grfico 8. Grfico de barras de las puntuaciones z* (3,5 a -3,5) para el anlisis sensorial en la ronda de una

prueba de aptitud en caf verde - Muestras A y B por participante

4.3. Prdida de masa

Tabla 11. Determinacin de prdida de masa resultados reportados para muestras A y B [g/100 g]

Cdigo de participante 710 710 510 510 Cdigo de muestra 4KXD6 KDPZ5 Q9MNP TXCA8

Muestra A B A B

Rplica 1 10,05 11,27 7,08 9,36

Rplica 2 10,01 11,29 7,04 8,74

Media reportada por participante* 10,03 11,27 7,06 8,92

Media calculada por proveedor* 10,03 11,28 7,06 9,05

Desvo estndar 0,03 0,01 0,03 0,44

RSD[%]** 0.28% 0.13% 0.40% 4.84%

Incertidumbre reportada por participante 0,08 0,08 0,06 1,26

* se presentan discrepancias entre las medias reportadas y las medias calculadas. Para las pruebas estadsticas de

comparacin se utilizan las medias calculadas (criterio conforme a ISO/IEC 17043:2010 4.7.1.5).

Tabla 12. Determinacin de prdida de masa resultados reportados para muestras A y B

Muestra A Muestra B

Prueba F para varianzas Prueba F para varianzas 710 510 710 510

Media 10.03 7.06 Media 9.05 11.28

Varianza 0.0008 0.0008 Varianza 0.1922 0.0002

F 1.0000 F 961.0

P(F




Tabla 12. Determinacin de prdida de masa resultados reportados para muestras A y B

Muestra A Muestra B

Prueba t para medias Prueba t para medias

710 510 710 510

Media 10.03 7.06 Media 11.28 9.05

Varianza 0.0008 0.0008 Varianza 0.0002 0.1922

Varianza agrupada 0.0008 Diferencia hipottica 0

Diferencia hipottica 0 Grados de libertad 1

Grados de libertad 2 Estadstico t 7.19

Estadstico t 105.01 P(T




Grfico 10. Comparacin de promedios con intervalos de confianza (95 %)

Grfico 11. Prdida de masa - Comparacin de promedios con incertidumbres expandidas

reportadas Muestras A y B

6.5

7.5

8.5

9.5

10.5

11.5

710 A 510 A 710 B 510 B




5. Comentarios

5.1. Se recomienda interpretar con precaucin las comparaciones entre resultados de

ensayo del anlisis de defectos y de materia extraa, en vista de que una de las muestras de

ensayo de aptitud utilizada por los participantes fue preparada con otro propsito (ver nota

b en Tabla 2). Las muestras destinadas al anlisis de defectos y de materia extraa fueron

preparadas por el CNCC agregando deliberadamente a cada porcin cierta clase de defectos,

no as las dems muestras de ensayo de aptitud.

5.2. Los ensayos para la identificacin de defectos y de materia extraa y el anlisis

sensorial son cualitativos y generan datos discretos, basados en frecuencias o en

categorizaciones; por tanto, la interpretacin estadstica de los mismos debe hacerse a travs

de procedimientos estadsticos apropiados. Se recomienda en este sentido no hacer

inferencias a partir de los resultados a travs de estadsticos paramtricos (p.e. media

aritmtica y desviacin tpica).

5.3. Se recomienda interpretar con precaucin la comparacin de resultados del ensayo de

prdida de masa. Estadsticamente, estos resultados son comparables con un 95 % de

confianza en cuanto a las medias aritmticas; no obstante, una desviacin estndar

suficientemente grande puede hacer que esta prueba estadstica arroje resultados incorrectos.

Particularmente, el valor promedio del participante 710 para la muestra B tiene una

dispersin que abarca la media del participante 510.

Debido al uso de mtodos de ensayo empricos diferentes para la determinacin de

prdida de masa, no se puede inferir que uno de los resultados sea errneo.




ANEXOS

A . Pruebas no paramtricas aplicadas a la evaluacin del desempeo del anlisis sensorial.

A.1 Generalidades

Los atributos calificados en el anlisis sensorial se expresan por medio de puntuaciones que

matemticamente consisten en valores ordinales o semicuantitativos. Para este tipo de datos

no es apropiado calcular estadsticas de resumen ni utilizar medidas de evaluacin tales como

los valores de z convencionales, aun cuando los resultados sean numricos4. Esto se debe a

que esos nmeros no representan una escala continua, sujeta a los requerimientos de las

pruebas paramtricas; de modo que sus promedios y desviaciones estndar no se pueden

interpretar.

Se aplica la prueba de Friedman para verificar que existe suficiente consenso entre los

participantes y considerar la reproducibilidad de los resultados. Adicionalmente, se calcula un

coeficiente de concordancia (W) [Kendall y Wallis] para estimar la magnitud de dicho

consenso. A continuacin se explica brevemente en qu consisten dichas pruebas.

A.2 Desempeo global del consenso

La prueba de Friedman es utilizada para comparar rangos de ms de dos grupos relacionados,

determinando si existen diferencias significativas entre los grupos, con cierto nivel de riesgo

de aceptar datos realmente no conformes

Anloga a la prueba de ANOVA, los datos se ordenan en matrices donde generalmente los

grupos a comparar se conforman en columnas y las caractersticas valoradas en filas. En el

presente caso, se comparan los participantes (grupos o columnas) en funcin de las

puntuaciones que determinaron sensorialmente (atributos o filas).

Las puntuaciones originales se transforman en rangos. Para cada grupo se ordenan las

puntuaciones individuales en orden ascendente, si los grupos son coincidentes, es decir que

existe suficiente consenso, el orden de las puntuaciones debe ser similar. Los rangos obtenidos

son sumados y se procesan aplicando el algoritmo de Friedman que es capaz de proporcionar

informacin sobre la comparabilidad entre las poblaciones de rangos de cada grupo.

= [

(+)

= ] ( + ) Ecuacin 1

Donde: n representa el nmero de filas (atributos); k representa el nmero de grupos

(catadores); Ri es la suma de los rangos pertinentes a cada grupo. Existen tambin otros

arreglos algebraicos para este algoritmo.

El estadstico Fr sigue la distribucin chi-cuadrada, con k 1 grados de libertad, siendo k el

nmero de grupos comparados. El programa SPSS, utilizado en anlisis de datos y evaluacin

4 ISO/IEC 17043:2010 B.3.2.3




de los resultados de este programa de ensayos de aptitud, entrega los resultados del

estadstico Fr en forma de 2 (chi-cuadrada).

Una vez obtenido el estadstico, ste se compara con un valor crtico. Si el estadstico de

prueba no es significativamente mayor al valor crtico entonces se infiere que no existen

diferencias importantes entre los grupos relacionados; por el contrario, si el estadstico de

prueba es mayor al valor crtico, se puede suponer que al menos uno de los grupos

comparados, sin saber cul(es) con precisin, es discrepante.

Cuando se desarrollan contrastes entre ms de dos grupos, la probabilidad de error tiende a

expandirse, por lo que el nivel de riesgo inicial (alfa) debe ser ajustado. En el presente ejercicio,

dicho ajuste se realiza aplicando la siguiente ecuacin:

=

Ecuacin 2

Donde es el nivel de riesgo o significancia asumida, usualmente de 0,05, y k es el nmero

de grupos comparados.

Adicionalmente se calcula el coeficiente de concordancia W de Kendall, que estudia la relacin

existente en conjuntos de rangos de tres o ms grupos y puede tomas valores entre cero y

uno. Con este coeficiente se puede inferir que existe una concordancia perfecta cuando su

valor es uno, cuando todos los catadores, por ejemplo, valoran los n objetos, o atributos, del

mismo modo, es decir cuando coinciden plenamente en sus categorizaciones; por el contrario,

cuando su valor es cero, la concordancia es nula, es decir que no existe ningn consenso entre

las valoraciones al mismo conjunto de objetos, o atributos. Para afirmar que la concordancia

es significativa se hace una prueba estadstica transformando el coeficiente al chi cuadrada de

Friedman. De la misma manera, teniendo antes el estadstico de Friedman, puede calcularse

el coeficiente W de Kendall, mediante el siguiente algoritmo:

2 = ( 1) Ecuacin 3

Donde k es el nmero de grupos (p.e. catadores) y n es el nmero de objetos (p.e. atributos).

A.3 Desempeo individual de los participantes

Cuando la prueba de Friedman arroja resultados significativos, la misma no es capaz de

identificar cules y cuntos participantes son estadsticamente diferentes al resto.

Complementariamente, se utiliza la prueba de Wilcoxon, con un riesgo ajustado, para

comparar los grupos por pares. Esta es una prueba no paramtrica que compara dos muestras

pareadas o relacionadas (misma muestra) y es equivalente a la prueba paramtrica de t de

Student para datos pareados.

Ejemplo Puntuacin Participante Valor asignado por atributo Diferencia

Atributo 1 x1 y1 x1 - y1 Atributo 2 x2 y2 x2 y2 Atributo 3 x3 y3 x3 - y3 Atributo 4 x4 y4 x4 - y4




Para la prueba de Wilcoxon se utiliza el nivel de riesgo o significancia ajustado (B), como se

indica en A.2 (Ecuacin 2).

La prueba de Wilcoxon genera una media y un desvo estndar no paramtricos con respecto

al par de grupos que se compara, con los cuales se puede hacer una aproximacin a un z-

score mediante la siguiente ecuacin:

=

Ecuacin 4

Donde z* es una aproximacin al puntaje z de distribucin normal; T es la suma de los rangos

medios de las diferencias negativas o positivas, segn cual sea la ms pequea de ambas,

entre el par de atributos; y

son la media y el desvo estndar no paramtricos calculados

con los siguientes algoritmos:

=

(+)

Ecuacin 5

= (+)(+)

Ecuacin 6

Donde n es el nmero de pares de datos diferentes de cero.

Referencias bibliogrficas

1. Proficiency testing for sensory ranking panels: mesauring panel perfomance. McEwan, Jean A., y

otros. 2003, Food Quality and Preference, pgs. 247 - 256.

2. OHN-ISO/IEC 17043:2010. Evaluacin de la conformidad Requisitos generales para los ensayos

de aptitud.

3. ISO 13528:2005. Statistical methods for use in proficiency testing by interlaboratory comparisons.

4. Corder, Gregory W. y Foreman, Dale I. Nonparametric statistics for non-statisticians - A step-byStep

Approach. Hoboken : John Wiley & Sons, Inc., 2009.

PORTADAndice Introduccin Descripcin del programaConfidencialidad de los resultados Datos de contacto

1. Preparacin y distribucin de las muestras de ensayo de aptitud 2. Ensayos requeridos y mtodos de ensayo utilizados 3. Valores asignados y evaluacin del desempeo 3.1. Generalidades 3.2. Determinacin de defectos y de materia extraa3.3. Anlisis sensorial 3.4. Determinacin de prdida de masa

4. Resultados de los participantes 4.1. Anlisis de defectos y de materia extraa 4.2. Anlisis Sensorial 4.2.1. Puntuaciones reportadas y valores asignados 4.2.2. Pruebas de significancia 4.2.3. Estadsticas de desempeo a) Comparacin de valores individuales b) Puntuaciones estandarizadas

4.3. Prdida de masa

5. Comentarios ANEXOSA . Pruebas no paramtricas aplicadas a la evaluacin del desempeo del anlisis sensorial. A.1 Generalidades A.2 Desempeo global del consenso A.3 Desempeo individual de los participantes

Referencias bibliogrficas

ronda de ensayos de aptitud ihcafe 2014-1 - informe final

Documents