---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------- RELATÓRIO DO PROGRAMA PILOTO DE ENSAIO DE PROFICIÊNCIA EM ANÁLISE DE ENDOTOXINAS Produto: Água Sintética (apirogênica) EMPRESA CERTIFICADA ISO 9001:2008 RELATÓRIO DE 2015 MOD01 rev13 APOIO: ASSOCIAÇÃO REDE DE METROLOGIA E ENSAIOS DO RIO GRANDE DO SUL AV. ASSIS BRASIL, 8787 - CEP 91140-001 PORTO ALEGRE - RS – BRASIL FONE/FAX: 51 3347-8745 - CNPJ: 97.130.207/0001-12 e-mail: [email protected] - Internet: http://www.redemetrologica.com.br PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS ÍNDICE Introdução ..................................................................................................... 03 Coordenação ................................................................................................. 03 Reconhecimentos ......................................................................................... Itens de ensaio / Rastreabilidade................................................................ 03 04 Preparação das amostras............................................................................. 04 Confidencialidade ......................................................................................... 04 Teste de homogeneidade e estabilidade.................................................... Análise estatística dos resultados e avaliação de desempenho.............. 04 05 Participantes.................................................................................................. 05 Escolha do método de Ensaio..................................................................... 05 Resultados obtidos ...................................................................................... 06 Testes de Homogeneidade e Estabilidade.................................................. 09 Considerações finais.................................................................................... 11 Referências normativas ............................................................................... 11 Procedimentos utilizados no projeto e implementação do programa .... 11 Resultados da Pesquisa de Satisfação ...................................................... 12 REDE METROLÓGICA RS © - MOD01- Relatório de EP de Ensaios - rev13 Página 2 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS INTRODUÇÃO O presente relatório apresenta os resultados da rodada do Programa de Endotoxinas de 2015. Este Ensaio de Proficiência tem o propósito de: - determinar o desempenho individual dos participantes para os ensaios propostos; monitorar continuamente o desempenho dos participantes; propiciar subsídios aos participantes para a identificação e solução de problemas analíticos; identificar diferenças interlaboratoriais; agregar valor ao controle da qualidade dos participantes; e fornecer confiança adicional aos clientes dos participantes. A interpretação dos desempenhos dos participantes é realizada através do Escore Z. São seguidas as orientação do ABNT ISO/IEC 17043 e ISO 13528. Os participantes cujos resultados apresentados neste relatório foram enquadrados como questionáveis ou insatisfatórios devem observar com atenção os comentários gerais no final deste documento. O modelo do EP desenvolvido é, segundo a norma ISO/IEC 17043, Modelo 2: PEP Simultâneo. COORDENAÇÃO A Coordenação deste Ensaio de Proficiência foi conduzida pela Secretaria Executiva da Rede Metrológica, com o devido apoio do Grupo Técnico de Endotoxinas da Rede Metrológica RS. Integrantes do Grupo Técnico: Nome Entidade Samanta Anunciato Zynich * Green Lab Helene P. Carvalho Barbosa Lonza E-mail [email protected] [email protected] * Responsável pelo GT Contatos na Secretaria Executiva: Marília Rodrigues (Coordenadora dos EP ou PI)– [email protected] Filipe Albano (Coordenador da Qualidade) – [email protected] RECONHECIMENTOS Certificada ISO 9001 desde 1997, a Rede Metrológica RS passou em fevereiro de 2004 por auditoria na qual teve incluído no seu escopo de certificação o processo de provisão de programas de comparações interlaboratoriais/ensaios de proficiência. Isso significa dizer que os ensaios de proficiência promovidos pela Rede Metrológica RS são realizados de acordo com um sistema da qualidade devidamente documentado e auditado. Esta ação pioneira é mais uma demonstração do compromisso assumido da Rede Metrológica RS para a melhoria contínua de seus processos, apoiando o aprimoramento da qualidade dos participantes. A Rede Metrológica RS é uma das maiores provedoras da América do Sul de Ensaios de Proficiência, cadastrada no EPTIS (European Proficiency Testing Information System) desde novembro de 2006. REDE METROLÓGICA RS © - MOD01- Relatório de EP de Ensaios - rev13 Página 3 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS ITENS DE ENSAIO / RASTREABILIDADE Foram avaliados os seguintes itens de ensaios: Parâmetro Unidade Endotoxina UE/mL As análises foram realizadas em duplicata, constando o registro dos dois resultados no relatório. A escolha dos itens de ensaio para o presente programa foi definida pelos membros do Grupo Técnico da Rede Metrológica RS. Os itens adquiridos para o programa são: LAL Reagent Water - 500ml (Lot Number: 0000437688), Endotoxin, E. coli O55:B5 (Lot Number: 0000298905) – Lonza Company. • LOCAL DA PREPARAÇÃO DOS ITENS DE ENSAIO, OBTENÇÃO DA MATRIZ PARA PREPARAÇÃO DOS ITENS DE ENSAIO (SUBCONTRATADO) As amostras foram preparadas a partir da utilização de matrizes (sintéticas) e padrões, no Laboratório Green Lab (Rua Felipe de Oliveira, 293 – Santa Cecília – Porto Alegre – RS). A obtenção da água apirogênica e padrões foi de responsabilidade da empresa Lonza. • PREPARAÇÃO DOS ITENS DE ENSAIO (ADIÇÃO E FORMULAÇÃO) A preparação das amostras é de responsabilidade da Rede Metrológica RS, contando com o apoio do Grupo Técnico da área. Os analitos de interesse foram preparados no laboratório subcontratado e adicionados às amostras de água reagente. As amostras foram homogeneizadas e após os frascos foram envasados em ordem, fechados e etiquetados. Estes foram armazenados em caixas de isopor com gelo reciclável para posterior envio, conforme o cronograma da rodada. CONFIDENCIALIDADE A política da Rede Metrológica RS visa manter confidencialidade sobre os participantes do Ensaio de Proficiência. Portanto, os participantes inscritos recebem um código/senha de identificação que é sorteado ou enviado lacrado para cada laboratório. Dessa forma a Rede Metrológica RS fica totalmente isenta da identificação dos mesmos. TESTES DE HOMOGENEIDADE E ESTABILIDADE (SUBCONTRATADO) A Rede Metrológica RS executou uma análise estatística com relação à homogeneidade e à estabilidade das amostras do programa, visando verificar se a variabilidade proveniente da eventual falta de homogeneidade ou estabilidade não foi significante perante a variabilidade total dos ensaios. Estes testes foram realizados durante a realização do programa. Para estas amostras, a Rede Metrológica designou o laboratório Green Lab. Para realização dos testes de homogeneidade e estabilidade foi escolhido o ensaio de Endotoxinas. O teste de homogeneidade e estabilidade foi realizado conforme a norma ISO 13528:2005 Statistical methods for use in proficiency testing by interlaboratory comparisons. REDE METROLÓGICA RS © - MOD01- Relatório de EP de Ensaios - rev13 Página 4 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS ANÁLISE ESTATÍSTICA DOS RESULTADOS E AVALIAÇÃO DE DESEMPENHO O desempenho de cada laboratório participante deste Ensaio de Proficiência foi avaliado a partir da análise estatística dos resultados enviados, sendo definida a estimativa do valor real (valor designado) através de consenso, seguindo as diretrizes da norma ISO 13528:2005 - Statistical methods for use in proficiency testing by interlaboratory comparisons. Resultados de ensaios qualitativos: Para os ensaios qualitativos os valores de referências foram obtidos através da moda dos resultados dos participantes. A moda é o valor que aparece com maior freqüência em um conjunto de dados. O desempenho de cada laboratório neste caso foi avaliado e classificado entre “Conforme” e “NãoConforme”, comparando o resultado frente ao valor de referência. Convém lembrar que as avaliações obtidas pelos participantes em comparações interlaboratoriais, também chamado controle externo, não atestam a competência (ou não competência) dos mesmos, uma vez que constitui, apenas, parte da informação necessária para que, aliado a outros indicadores e controles internos, se faça um diagnóstico preciso da situação do laboratório. Desta forma, o objetivo deste relatório não é classificar os participantes em função dos seus resultados e sim apresentar de forma conjunta o desempenho dos mesmos. Estas informações servirão de subsídio para análise crítica e implementação de possíveis ações corretivas. PARTICIPANTES Os participantes abaixo participam deste programa de ensaio de proficiência. Os mesmos são identificados neste relatório por um código, de conhecimento exclusivo de cada um. Como os códigos foram sorteados no início do programa para cada participante, a Rede Metrológica RS não tem o conhecimento dos respectivos códigos de cada participantes. EMPRESA CIDADE ESTADO CONTROLE ANALITICO ANALISES TECNICAS LTDA OSASCO SP CONÁGUA AMBIENTAL LTDA GOIANIA GO CORPLAB BRASIL SERVIÇOS ANALÍTICOS AMBIENTAIS LTDA. LAURO DE FREITAS BA FREITAG LABORATÓRIOS LTDA TIMBÓ SC GREEN LAB PORTO ALEGRE RS INSTITUTO TERAPÊUTICO DELTA LTDA INDAIATUBA SP MEDLAB PRODUTOS DIAGNÓSTICOS LTDA SAO PAULO SP MICROAMBIENTAL LAB. COM. E SERV. EM ÁGUA LTDA. SAO CAETANO DO SUL SP PHARMACONTROL PORTO ALEGRE RS TOXILAB PORTO ALEGRE RS ESCOLHA DO MÉTODO DE ENSAIO Os métodos/técnicas analíticos sugeridos e equivalentes para o programa são: Parâmetro Endotoxinas REDE METROLÓGICA RS © - Método/técnica sugerido e equivalente - Método de Coagulação em Gel; - Método Turbidimétrico; MOD01- Relatório de EP de Ensaios - rev13 Página 5 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS - Método Cromogênico. ANÁLISE ESTATÍSTICA DOS DADOS – RESULTADOS Tabela de dados estatísticos para o parâmetro em questão: ANÁLISE DE ENDOTOXINAS (UE/mL) Amostra: Amostra Sintética X Rodada: Única Número de laboratórios que forneceram resultados: 09 Ano: 2015 Desempenho Desempenho 1º Resultado 2º Resultado Código do Lab 1ª via 2ª via 1ª via 2ª via 1 0,376 0,432 Presença Presença Conforme Conforme Método Turbidimétrico 2 >0,25 >0,25 Presença Presença Conforme Conforme Método de Coagulação em Gel 3 0,549 0,547 Presença Presença Conforme Conforme Método Cromogênico 4 >0,125 >0,125 Presença Presença Conforme Conforme Método de Coagulação em Gel 5 >0,125 >0,125 Presença Presença Conforme Conforme Método de Coagulação em Gel 6 0,793 0,817 Presença Presença Conforme Conforme Método Cromogênico 7 > 1,0 > 1,0 Presença Presença Conforme Conforme Método de Coagulação em Gel 9 >0,25 >0,25 Presença Presença Conforme Conforme Método de Coagulação em Gel 10 0,646 0,664 Presença Presença Conforme Conforme Método Cromogênico Métodos ou técnicas Tabela de classificação dos resultados: Dados Estatísticos Valor de Referência Percentual de resultados conformes Percentual de Resultados não-conformes REDE METROLÓGICA RS © - Valores obtidos >0,125 (Presença) 100% 0% MOD01- Relatório de EP de Ensaios - rev13 Página 6 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS Tabela de dados estatísticos para o parâmetro em questão: ANÁLISE DE ENDOTOXINAS (UE/mL) Amostra: Amostra Sintética Y Rodada: Única Número de laboratórios que forneceram resultados: 09 Ano: 2015 Código do Lab 1ª via 2ª via 1ª via 2ª via Desempenho Desempenho 1º Resultado 2º Resultado 1 <0,01 <0,01 Ausência Ausência Conforme Conforme Método Turbidimétrico 2 <0,25 <0,25 Ausência Ausência Conforme Conforme Método de Coagulação em Gel 3 <0,03 <0,03 Ausência Ausência Conforme Conforme Método Cromogênico 4 <0,125 <0,125 Ausência Ausência Conforme Conforme Método de Coagulação em Gel 5 <0,125 <0,125 Ausência Ausência Conforme Conforme Método de Coagulação em Gel 6 <0,05 <0,05 Ausência Ausência Conforme Conforme Método Cromogênico 7 <0,25 <0,25 Ausência Ausência Conforme Conforme Método de Coagulação em Gel 9 <0,25 <0,25 Ausência Ausência Conforme Conforme Método de Coagulação em Gel 10 <0,005 <0,005 Ausência Ausência Conforme Conforme Método Cromogênico Métodos ou técnicas Tabela de classificação dos resultados: Dados Estatísticos Valor de Referência < 0,125 (Ausência) Percentual de resultados conformes Percentual de Resultados não-conformes REDE METROLÓGICA RS © - Valores obtidos 100% 0% MOD01- Relatório de EP de Ensaios - rev13 Página 7 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS OBSERVAÇÕES Código Observações 1 Data das análises: 12/05/2015. Para amostra Y os resultados são: Via/Análise 1: <0,01UE/mL Via/Análise 2: <0,01UE/mL Digitei "0" pois o programa não permite digitar o resultado com símbolo. 2 Amostra X (UE/mL) Via/Análise 1: >0,25 Amostra X (UE/mL) Via/Análise 2: >0,25 Amostra Y (UE/mL) Via/Análise 1: <0,25 Amostra Y (UE/mL) Via/Análise 2: <0,25 Data de análises: 12/05/2015 3 Análises foram realizadas em 13/05/2015 Amostra Y Via 1 e 2 apresentaram resultados <0,03. 4 As analises foram realizadas no dia 13/05/2015. Sensibilidade do reagente LAL: 0,125 UE/mL Não foi realizada diluicao da amostra. Amostra X Analise 1: > 0,125 UE/mL (o simbolo correto é maior ou igual, mas o site não aceita) Analise 2: > 0,125 UE/mL (o simbolo correto é maior ou igual, mas o site não aceita) Amostra Y Analise 1: < 0,125 UE/mL Analise 2: < 0,125 UE/mL 5 Conforme orientado pela parte técnica da Rede Metrológica RS, não inserimos sinal de menor ou maior no campo de resultados, porém os resultados encontrados foram os seguintes: Via/Análise 1 "X": > 0,125 UE/mL Via/Análise 2 "X": > 0,125 UE/mL Via/Análise 1 "Y": < 0,125 UE/mL Via/Análise 2 "Y": < 0,125 UE/mL 6 Amostra Y (UE/mL): Via/Análise 1: <0,05 Via/Análise 2: <0,05 Data de análise: 13/05/2015 7 Data do Recebimento: 12.05.2015. Preservação da amostra: entre 3 e 6°C. Data/hora da realização do teste: 12.05.2015 - 15h. Método Semi-quantitativo. RESULTADO: Amostra “X”: Endotoxina Positiva > 1,0 UE/mL.(Resultado Superior a 1,0 UE/mL) Amostra "Y": Endotoxina Negativa < 0,25 UE/mL.(Resultado Inferior a 0,25 UE/mL) 9 Resultados Qualitativos: Amostra X (UE/mL): Análise 1: >0,25 / Análise 2 : >0,25 Amostra Y (UE/mL): Análise 1: <0,25 / Análise 2 : <0,25 Data da análise : 12/05/2015 10 Data de realização dos ensaios: 13/05/15. O resultado obtido para a amostra Y análise 1 e análise 2 foi <0,00500EU/mL. REDE METROLÓGICA RS © - MOD01- Relatório de EP de Ensaios - rev13 Página 8 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS TESTES DE HOMOGENEIDADE E ESTABILIDADE – RESULTADOS As tabelas a seguir apresentam os resultados dos ensaios de homogeneidade e estabilidade. TESTE DE HOMOGENEIDADE PARÂMETRO: ANÁLISE DE ENDOTOXINAS (UE/mL) Data da Análise: AMOSTRA X - 12/05/2015 Método Utilizado: Turbidimétrico Amostras Via 1 Via 2 Média Amplitude 1 2 3 4 5 6 7 8 9 10 0,412 0,357 0,378 0,336 0,364 0,366 0,389 0,359 0,417 0,415 0,408 0,340 0,403 0,320 0,385 0,357 0,396 0,425 0,401 0,415 0,4 0,3 0,4 0,3 0,4 0,4 0,4 0,4 0,4 0,4 0,00 0,02 0,03 0,02 0,02 0,01 0,01 0,07 0,02 0,00 Média Geral do teste de hom. Desvio das médias (s x ) 0,38 0,029 Desvio dentro das amostras (s w) 0,018 Desvio entre as amostras (ss ) 0,026 Desvio do grupo de laborat. do EP 0,3 * Desvio 0,311 0,093 Critério de Aceitação: Para as amostras serem consideradas homogêneas, o desvio entre as amostras (s s ) deve ser menor do que 0,3*Desvio do grupo de laboratórios participantes para o parâmetro que está sendo avaliado. As amostras analisadas são consideradas homogêneas. REDE METROLÓGICA RS © - MOD01- Relatório de EP de Ensaios - rev13 Página 9 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS TESTE DE ESTABILIDADE PARÂMETRO: ANÁLISE DE ENDOTOXINAS (UE/mL) Das amostras dos testes de homogeneidade, foram selecionadas 3 amostras aleatoriamente, conforme orientações da ISO 13528, para execução dos teste de estabilidade. Os dados abaixo são referentes ao teste de estabilidade das amostras deste Ensaio de Proficiência. Data da Análise: AMOSTRA X - 26/05/2015 Método Utilizado: Turbidimétrico Amostra 3 7 10 Via 1 0,517 0,487 0,490 Via 2 0,502 0,469 0,540 Média 0,510 0,478 0,515 Amplitude Média das médias do teste de estabilidade (y) 0,50 Média das médias do teste de homogeneidade (x) 0,38 Critério de Aceitação: Para as amostras serem consideradas estáveis, o módulo da diferença das média obtidas no teste de homogeneidade e da média obtida no Desvio robusto (do grupo de laborat. do EP) 0,3 * Desvio Robusto 0,31 0,093201 Diferença entre as médias |x-y| 0,12 As amostras apresentaram um pequeno desvio de estabilidade, sendo que o valor da Endotoxina (UE/mL) aumentou de 0,38 para 0,50 (comparando as médias dos testes de homogeneidade e estabilidade). Este fato não prejudicou o programa, visto que as amostras ainda se encontravam dentro do valor designado como referência (>0,125) para amostra X. NOTA: As amostras Y foram testadas e todos os resultados (de 10 amostras coletadas ao longo do lote) foram negativos (<0,125 UE/mL), garantindo a homogeneidade do procedimento de preparo. REDE METROLÓGICA RS © - MOD01- Relatório de EP de Ensaios - rev13 Página 10 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS CONSIDERAÇÕES FINAIS Parâmetros Comentários sobre os desempenhos dos participantes Cometários Os laboratórios apresentaram um resultado uniforme nas análises realizadas, uma vez que 100% dos participantes obtiveram resultados Conformes nas amostras X e Y. O provedor definiu uma avaliação qualitativa de desempenho, visto que nem todos os métodos permitem uma quantificação dos resultados (com exceção dos métodos turbidimétrico e cromogênico). As amostras se demonstraram adequadas ao uso pretendido, pois os testes de homogeneidade e estabilidade apresentaram resultados adequados em relação ao propósito do programa. Ainda, os testes confirmaram o valor designado como referência pelo provedor. REFERÊNCIAS NORMATIVAS: ABNT NBR ISO/IEC 17025 – Requisitos gerais para a competência de laboratórios de ensaio e calibração. ABNT NBR ISO 9001 – Sistema de gestão da qualidade – Requisitos. ABNT NBR ISO/IEC 17043 – Requisitos gerais para ensaios de proficiência ISO 5725 – 5 – Accuracy (trueness and precision) of measurement methods ans results – Part 5: Alternative methods for the determination of the precision of a standard measurement method. ISO 5725 – 6 – Accuracy (trueness and precision) of measurement methods ans results – Part 6:Use in practice of accuracy values. ISO 13528 – Statistical methods for use in proficiency testing by interlaboratory comparisons. ISO GUIDE 35 – Reference materials – General and statistical principles for certification. ISO GUM – Guia para a Expressão da Incerteza de Medição. MONTGOMERY, D.C. (2004), Introdução ao controle estatístico da qualidade. LTC: Rio de Janeiro. PROFICIENCY TESTING AUSTRALIA (PTA). Guide to Proficiency Testing Australia. Revised July, 2012. PROCEDIMENTOS UTILIZADOS NO PROJETO E IMPLEMENTAÇÃO DO PROGRAMA: RM82 - Manual da Qualidade do Provedor de Ensaios de Proficiência RM 36 - Procedimento para realização de Ensaios de Proficiência. RM85 - Procedimento para Designação do Valor de Referencia e Calculo de Incerteza na área de Ensaios RM72 - Cartilha para Preparação de Amostras Líquidas ______________________ Porto Alegre, 09 de junho de 2015. Emissão autorizada por: Revisado Tecnicamente por: Emissão nº: 01 REDE METROLÓGICA RS © - Filipe A. Samanta Z. x MOD01- Relatório de EP de Ensaios - rev13 Página 11 de 12 PROGRAM A PILOTO DE ENSAIO DE PROFICIÊNCIA EM AN ÁLISE DE ENDOTOXINAS RESTULTADOS DA PESQUISA DE SATISFAÇÃO Nº de laboratórios que responderam a pesquisa: 03 Itens Avaliados: Relatório e Amostras Recebidas PERGUNTAS 1. Em sua opinião o Relatório do Programa é claro e objetivo? ÓTIMO BOM REGULAR INSATISFATÓRIO 100% - - - 67% 33% - - 67% 33% - - Comentários: 2. Os dados apresentados no Relatório serviram como ferramenta de melhoria na realização das análises? Comentários: 3. Sua avaliação geral do Programa? Comentários: SIM NÃO 4. O n° de parâmetros esta adequado para a necessidade de seu laboratório? 100% Comentários: O número de parâmetros para este ensaio está adequado, toda via, consideramos que seria pertinente enviar amostras com especificação EX: amostra X especificação: 0,5 EU/mL. Resposta: Agradecemos a sugestão. 5. Sugestões de novos parâmetros a serem ensaiados: - MICROCISTINA / COLIFORMES TOTAIS/ESCHERICHIA COLI/PSEUDOMONAS/ENTEROCOCUS/CLOSTRIDIUM. Resposta: Agradecemos a sugestão. Informamos que Coliformes totais e E. Coli estão disponível em nosso PEP em Análises Microbiológicas em Ágias. 6. Na sua opinião, o que poderia melhorar no Programa de Ensaios de Proficiência? 7. Comentários Gerais: - De maneira geral, o programa de EP está adequado, quando ligamos para tirar uma dúvida fomos bem atendidos. Resposta: Agradecemos o retorno. REDE METROLÓGICA RS © - MOD01- Relatório de EP de Ensaios - rev13 Página 12 de 12