Acessibilidade / Reportar erro

Validação do "STRONGkids": acurácia do instrumento Como citar este artigo: Maciel JR, Nakano EY, Carvalho KM, Dutra ES. STRONGkids validation: tool accuracy. J Pediatr (Rio J). 2020;96:371-8. ,☆☆ ☆☆ Estudo vinculado a Universidade de Brasília, Departamento de Nutrição, Programa de Pós-Graduação em Nutrição Humana, Brasília, DF, Brasil.

Resumo

Objetivo:

Validar a acurácia do instrumento de triagem nutricional Screening Tool for Risk on Nutritional status and Growth (STRONGkids) e estimar as prevalências de desnutrição e risco nutricional em crianças hospitalizadas.

Métodos:

Estudo transversal, em amostra representativa de crianças admitidas em 10 prontos-socorros infantis públicos. A amostra foi estimada aleatoriamente, por etapas, foram incluídas crianças com idade superior a 30 dias e inferior a 10 anos, de ambos os sexos, e excluídas as sindrômicas e impossibilitadas de aferição direta da antropometria. Foram aferidos peso, estatura e circunferência do braço, calculados os Z-scores dos índices antropométricos peso para idade, estatura para idade, peso para estatura, índice de massa corporal para idade e circunferência do braço para idade, classificados de acordo com as curvas de referência da Organização Mundial da Saúde. Após a aplicação do instrumento foram realizados os testes de acurácia do instrumento em comparação a antropometria, foram avaliados sensibilidade, especificidade e valores preditivos positivo e negativo.

Resultados:

Foram avaliadas 271 crianças, 56,46% meninos e 41,70% menores de dois anos. As prevalências de desnutrição, risco nutricional pela antropometria e pelo instrumento foram de 12,18%, 33,95% e 78,60%, respectivamente. A acurácia mostrou 84,8% de sensibilidade, 26,7% de especificidade, 49,8% de valor preditivo positivo e 67,2%, negativo, quando identificados os pacientes em risco nutricional pela antropometria.

Conclusão:

A validação da acurácia do STRONGkids foi feita com verificação de alta sensibilidade, permitiu a identificação precoce de risco nutricional em populações semelhantes.

PALAVRAS-CHAVE
Instrumento de triagem; Risco nutricional; Validação; Pediatria; Desnutrição hospitalar

Abstract

Objective:

Validate the accuracy of the Screening Tool for Risk on Nutritional status and Growth (STRONGkids) and estimate the prevalence of malnutrition and nutritional risk in hospitalized children.

Methods:

Cross-sectional study of a representative sample of children admitted to ten public pediatric emergency rooms. The sample was randomly estimated in stages, including children older than 30 days and younger than 10 years of age, of both sexes, excluding syndromic children and those in whom it was impossible to directly measure anthropometry. Weight, height, and arm circumference were measured, as well as the Z-scores of the anthropometric indices weight-for-age, height-for-age, weight-for-height, body mass index for age, and arm circumference for age, classified according to the reference curves of the World Health Organization. After the tool was applied, its accuracy tests were performed in comparison with the anthropometric data, with the evaluation of sensitivity, specificity, and positive and negative predictive values.

Results:

A total of 271 children were evaluated, 56.46% males and 41.70% younger than 2 years of age. The prevalence rates of malnutrition, nutritional risk assessed by anthropometric measurements, and nutritional risk assessed by the tool were 12.18%, 33.95%, and 78.60%, respectively. Accuracy showed sensitivity of 84.8%, specificity of 26.7%, positive predictive value of 49.8%, and negative predictive value of 67.2%, when the patients at nutritional risk were identified by anthropometry.

Conclusion:

Validation of the accuracy of STRONGkids was performed, showing high sensitivity, allowing the early identification of nutritional risk in similar populations.

KEYWORDS
Screening tool; Nutritional risk; Validation; Pediatrics; Hospital malnutrition

Introdução

A desnutrição hospitalar infantil, apesar de grandes variações em sua prevalência, destaca-se por sua importância clínica e precisa ser identificada o mais precocemente possível.11 Beser OF, Cokugras FC, Erkan T, Kutlu T, Yagci RV. TUHAMAR Study Group Evaluation of malnutrition development risk in hospitalized children. Nutrition. 2018;48:40-7. A antropometria, apesar de detectar a desnutrição, não diagnostica o risco nutricional, o qual recomenda-se que seja rastreado nas primeiras 48 h após a admissão hospitalar.22 Dornelles CT, Silveira C, Cruz LB, Refosco L, Simon M, Maraschin T. Protocolo de atendimento e acompanhamento nutricional pediátrico por níveis assistenciais. Rev HCPA. 2009;29:229-38. Ao se triar o risco nutricional é possível prever a probabilidade de melhor ou pior desfecho clínico do paciente devido aos fatores nutricionais e, ainda, avaliar a influência da intervenção nutricional nesse desfecho.33 Rasmussen HH, Holst M, Kondrup J. Measuring nutritional risk in hospitals. Clin Epidemiol. 2010;2:209-16.

Os principais protocolos para triagem nutricional em pediatria são: Simple Paediatric Nutritional Risk (PNRS),44 Sermet-Gaudelus I, Poisson-Salomon A, Colomb V, Brusset MC, Mosser F, Berrier F, et al. Simple pediatric nutritional risk score to identify children at risk of malnutrition. Am J Clin Nutr. 2000;72:64-70.Subjective Global Nutrition Assessment (SGAN)55 Secker DJ, Jeejeebhoy KN. Subjective Global Nutritional Assessment for children. Am J Clin Nutr. 2007;85:1083-9.; Screening Tool for Risk On Nutritional status and Growth (STRONGkids)66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11.; Paediatric Yorkhill Malnutrition Score (PYMS)77 Gerasimidis K, Macleod I, Maclean A, Buchanan E, Mcgrogan P, Swinbank I, et al. Perfomance of the novel Paediatric Yorkhill Malnutrition Score (PYMS) in hospital practice. Clin Nutr. 2011;30:430-5.; Screening Tool for the Assessment of Malnutrition in Paediatrics (STAMP)88 Moenni V, Day SA. Nutritional risk screening tool in hospitalized children. Int J Child Health Nutr. 2012;1:39-43. e o Pediatric Nutrition Screening Tool (PNST).99 White M, Lawson K, Ramsey R, Dennis N, Hutchinson Z, Soh XY, et al. A simple nutrition screening tool for pediatric inpatients. J Parenter Enteral Nutr. 2016;40:392-8. Tanto o STRONGkids66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11. quanto o SGAN55 Secker DJ, Jeejeebhoy KN. Subjective Global Nutritional Assessment for children. Am J Clin Nutr. 2007;85:1083-9. encontram-se traduzidos para a língua portuguesa. Na validação brasileira do SGAN,1010 Carniel MP, Santetti D, Andrade JS, Favero BP, Moschen T, Campos PA, et al. Validation of the Subjective Global Nutritional Assessment (SGNA) for children and adolescents. J Pediatr. 2015;91:596-602. o instrumento caracterizou-se mais como um processo de avaliação nutricional estruturada do que como um instrumento de triagem propriamente dito.1111 Wonoputri N, Djais JT, Rosalina I. Validity of nutritional screening tools for hospitalized children. J Nutr Metab. 2014;2014:143649.,1212 Joosten KF, Hulst JM. Malnutrition in pediatric hospital patients: current issues. Nutrition. 2011;27:133-7.

O instrumento STRONGkids66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11. caracteriza-se, comparativamente aos demais, como prático, fácil e reprodutível,1313 Joosten KF, Hulst JM. Nutritional screening tools for hospitalized children: methodological considerations. Clin Nutr. 2014;33:1-5. foi validado em outros países.1414 Spagnuolo MI, Liguoro I, Chiatto F, Mambretti D, Guarino A. Application of a score system to evaluate the risk of malnutrition in a multiple hospital setting. Ital J Pediatr. 2013;39:81.

15 Durakbaşa ÇU, Fettahoğlu S, Bayar A, Mutus M, Okur H. The prevalence of malnutrition and effectiveness of STRONGkids tool in the identification of malnutrition risks among pediatric surgical patients. Balkan Med J. 2014;31:313-21.
-1616 Mărginean O, Pitea AM, Voidăzan S, Mărginean C. Prevalence and assessment of malnutrition risk among hospitalized children in Romania. J Health Popul Nutr. 2014;32:97-102. No Brasil, Carvalho et al. (2013)1717 Carvalho FC, Lopes CR, Vilela LC, Vieira MA, Rinaldi AE, Crispim CA. Translation and cross-cultural adaptation of the STRONGkids tool for screening of malnutrition risk in hospitalized children. Rev Paul Pediatr. 2013;31:159-65. submeteram o instrumento às etapas de tradução para o português, síntese e retrotradução e Gouveia et al. (2018)1818 Gouveia MA, Tassitano RM, Silva GA. STRONGkids: predictive validation in Brazilian children. J Pediatr Gastroenterol Nutr. 2018. fizeram sua validação preditiva em estudo prospectivo.

Nesse contexto, os objetivos deste estudo foram validar, em amostra representativa de crianças hospitalizadas, a acurácia do instrumento STRONGkids e estimar as prevalências de desnutrição e risco nutricional nessa população.

Métodos

Estudo observacional, transversal e analítico, com amostra representativa das crianças hospitalizadas nos serviços de pronto-socorro das unidades hospitalares públicas do Distrito Federal (DF) do Brasil. Os dados foram coletados de crianças de ambos os sexos, com idade superior a 30 dias e inferior a 10 anos. Foram excluídos da amostra pacientes sindrômicos ou que necessitassem de curvas específicas para classificação antropométrica diferentes das da World Health Organization (WHO) de 20061919 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: length/height-for-age, weight-for-age, weight-for-length, weight-for-height and body mass index-for-age: methods and development. Geneva: World Health Organization; 2006. e 20072020 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: head circumference-for-age, arm circumference-for-age, triceps skinfold-for-age and subscapular skinfold-for-age: methods and development. Geneva: World Health Organization; 2007. e os impossibilitados de aferição direta da antropometria.

Para garantir a representatividade o plano amostral foi aleatório por etapas, a quantidade de leitos dos prontos-socorros da pediatria no DF foi a medida de ponderação. O cálculo amostral baseou-se na estimação da proporção de crianças em risco nutricional elevado atendidas (0,162121 Costa MV, Pastore CA. Nutritional screening tool versus anthropometric assessment in hospitalized children: which method is better associated to clinical outcomes?. Arch Latinoam Nutr. 2015;65:12-20.), fixou-se em 95% o grau de confiança da estimativa, com margem de erro de 5%. O tamanho amostral mínimo correspondeu a 207 pacientes, distribuídos entre os hospitais de acordo com o respectivo total de leitos. A coleta ocorreu durante três meses consecutivos, em blocos e com sorteio tanto da sequência dos hospitais quanto dos dias de coleta.

Das crianças foram coletados os dados sobre sexo, idade, causa da internação e doenças associadas. Sobre os responsáveis, coletou-se o grau de parentesco com a criança, idade e escolaridade.

Foram aferidos peso, altura e circunferência do braço das crianças, sempre pelo mesmo pesquisador. Nas crianças com idade inferior a dois anos o peso foi aferido com a criança deitada, despida, em balança digital Multilaser® e o comprimento com régua antropométrica Cardiomed®. Naquelas com idade superior a dois anos, foi usada balança digital Techline®, com a criança posicionada de pé, no centro da balança, com o mínimo de roupa e descalça; a estatura foi avaliada com o antropômetro vertical infantil portátil Cardiomed®. A circunferência do braço foi aferida em todas as crianças, com uso de fita métrica inextensível, foi classificada somente naquelas entre três meses e cinco anos.2020 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: head circumference-for-age, arm circumference-for-age, triceps skinfold-for-age and subscapular skinfold-for-age: methods and development. Geneva: World Health Organization; 2007.

Foram estimados os índices antropométricos peso para idade (P/I), estatura para idade (E/I), peso para estatura (P/E), índice de massa corporal para idade (IMC/I) e circunferência do braço para idade (CB/I). De acordo com as orientações para uso das curvas de referência da WHO,1919 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: length/height-for-age, weight-for-age, weight-for-length, weight-for-height and body mass index-for-age: methods and development. Geneva: World Health Organization; 2006.,2020 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: head circumference-for-age, arm circumference-for-age, triceps skinfold-for-age and subscapular skinfold-for-age: methods and development. Geneva: World Health Organization; 2007. para crianças menores de cinco anos foram calculados todos os índices e para aqueles entre cinco e 10 anos não foram calculados P/E e CB/I. O ponto de corte para desnutrição considerado de acordo com WHO1919 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: length/height-for-age, weight-for-age, weight-for-length, weight-for-height and body mass index-for-age: methods and development. Geneva: World Health Organization; 2006.,2020 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: head circumference-for-age, arm circumference-for-age, triceps skinfold-for-age and subscapular skinfold-for-age: methods and development. Geneva: World Health Organization; 2007. foi Z-score < -2. Classifica-se como aguda para P/I, P/E e/ou IMC/I; crônica para E/I e desnutrição para CB/I. Os dados antropométricos foram inseridos nos softwares WHO Anthro e WHO Anthro Plus, 2009 versão 1.0.3, da WHO,2222 de Onis M, Onyango AW, Borghi A, Siyam A, Nishida C, Siekmann J. Development of a WHO growth reference for school-aged children and adolescents. Bull Word Health Org. 2007;85:660-7. para cálculo do índice de massa corporal (IMC) e classificação dos índices antropométricos.

De acordo com o Sistema de Vigilância Alimentar e Nutrição (Sisvan),2323 Ministério da Saúde. Secretaria de Atenção à Saúde. Departamento de Atenção Básica. Orientações para a coleta e análise de dados antropométricos em serviços de saúde: Norma Técnica do Sistema de Vigilância Alimentar e Nutricional - SISVAN. Brasília: Ministério da Saúde; 2011. 76. o intervalo entre os Z-score -1 e -2 para o índice P/I é considerado faixa importante de vigilância para baixo peso, e não mais classificação de risco nutricional. Porém, nesse trabalho, foi considerado como tal. A faixa de vigilância nutricional para baixo peso, referente ao índice P/I, -2 ≤ Z-score < -1, que caracteriza o risco nutricional, foi extensiva a todos os índices antropométricos considerados.

O instrumento STRONGkids66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11.,1717 Carvalho FC, Lopes CR, Vilela LC, Vieira MA, Rinaldi AE, Crispim CA. Translation and cross-cultural adaptation of the STRONGkids tool for screening of malnutrition risk in hospitalized children. Rev Paul Pediatr. 2013;31:159-65. é composto por quatro perguntas pontuadas e que abordam doença de base, avaliação clínica subjetiva, alteração ponderal, ingestão alimentar e perdas. No fim faz-se o somatório total da pontuação, mínimo de 0 e máximo de 5 pontos e classifica-se o risco nutricional em “baixo” (0 ponto), “médio” (1 a 3 pontos) ou “alto” (4 ou 5 pontos).

O estudo foi aprovado pelos Comitês de Ética e Pesquisa da Faculdade de Ciências da Saúde da Universidade de Brasília e da Fundação de Ensino e Pesquisa em Ciências da Saúde da Secretaria de Saúde do DF.

Análise estatística

As variáveis quantitativas consideradas foram idade da criança, peso, estatura, IMC, CB, Z-score dos índices P/I, P/E, E/I, IMC/I e CB/I, pontuação do instrumento STRONGkids,66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11.,1717 Carvalho FC, Lopes CR, Vilela LC, Vieira MA, Rinaldi AE, Crispim CA. Translation and cross-cultural adaptation of the STRONGkids tool for screening of malnutrition risk in hospitalized children. Rev Paul Pediatr. 2013;31:159-65. idade do responsável e idade gestacional. Elas foram analisadas por meio das medidas de dispersão com análise de sua assimetria e representadas por meio de média com desvio-padrão e intervalo de confiança de 95%. Elas também foram categorizadas em faixas etárias, categorias de risco nutricional, categorias de escolaridade e classificação de desnutrição de acordo com cada índice antropométrico considerado.

As variáveis qualitativas do responsável pela criança incluídas foram grau de parentesco e escolaridade. Para a criança considerou-se sexo, diagnóstico clínico, faixa etária, tipo de parto, prematuridade, estado nutricional de acordo com cada índice antropométrico e categorias de risco nutricional do instrumento STRONGkids.66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11.,1717 Carvalho FC, Lopes CR, Vilela LC, Vieira MA, Rinaldi AE, Crispim CA. Translation and cross-cultural adaptation of the STRONGkids tool for screening of malnutrition risk in hospitalized children. Rev Paul Pediatr. 2013;31:159-65.

Os índices antropométricos foram categorizados em “desnutrido” e “adequado”, com pontos de corte Z-score < -2 e Z-score ≥ -2, respectivamente. Depois, uma segunda categorização com inclusão da variável “risco nutricional” com intervalo entre -2 ≤ Z-score < -1 e, consequentemente, adequado com Z-score ≥ -1.

De acordo com cada categorização, foram verificadas as frequências das variáveis quantitativas e qualitativas e aplicados testes específicos, qui-quadrado ou Anova, com nível de significância de 5%. Foram classificados como “desnutrido” os identificados como tal em qualquer um dos índices antropométricos considerados. As categorias do instrumento STRONGkids66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11.,1717 Carvalho FC, Lopes CR, Vilela LC, Vieira MA, Rinaldi AE, Crispim CA. Translation and cross-cultural adaptation of the STRONGkids tool for screening of malnutrition risk in hospitalized children. Rev Paul Pediatr. 2013;31:159-65. foram dicotomizadas em “com risco”, aquelas em alto e médio risco nutricional, e “sem risco”, as de baixo risco.

Foram feitas as associações entre o instrumento e os índices antropométricos, com aplicação do teste de McNemar, com um nível de significância de 5%. Em seguida, foram verificadas as correlações por meio dos testes de correlação de Pearson e kappa.

Para validar a acurácia do instrumento STRONGkids, esse foi comparado com a antropometria. Os procedimentos estatísticos para avaliar o seu desempenho foram as estimativas de sensibilidade, especificidade, valores preditivos positivos (VPP) e negativos (VPN). A avaliação foi feita em duas etapas, quais sejam, com e sem a categoria de risco nutricional identificadas na antropometria. Para comparar o desempenho do instrumento em relação à categorização anterior, os grupos de risco nutricional identificados foram recategorizados como “com risco” (os com alto risco) e “sem risco” (os de médio e baixo risco), com posterior avaliação do desempenho em cada ponto de corte do instrumento. As análises foram feitas com o auxílio do programa SPSS (IBM Corp. Statistics para Windows, Versão 22.0. Armonk, NY).

Resultados

A coleta de dados aconteceu nos 10 hospitais públicos do DF que dispõem de serviço de pronto-socorro pediátrico, totalizou 48 dias de coleta (fig. 1).

Figura 1
Fluxograma do resultado da coleta de dados dos pacientes admitidos nos 10 hospitais públicos do Distrito Federal que dispõem de serviço de pronto-socorro pediátrico, entre fevereiro e abril de 2017.

As características sociodemográficas, clínicas, parentais e antropométricas da amostra de acordo com as categorias do instrumento STRONGkids estão descritas na tabela 1.

Tabela 1
Perfil sociodemográfico, clínico, parental e antropométrico das crianças admitidas nos serviços de pronto-socorro infantil de acordo com as categorias de risco nutricional do instrumento STRONGkids. Distrito Federal - DF, 2017

No Material Suplementar são apresentadas as prevalências de desnutrição, de acordo com a antropometria, e de risco nutricional que, no total, corresponderam, respectivamente, a 12,18% e 33,95%.

Todas as crianças foram avaliadas pelo STRONGkids (n = 271), atingiram um escore médio de 1,51 ± 1,18 ponto (IC95% 1,37-1,65). O instrumento identificou 78,60% das crianças como em algum grau de risco nutricional: 75,28% em “médio” e 3,32% em “alto”.

Cada índice antropométrico foi comparado, separadamente, entre cada categoria de classificação do STRONGkids e verificou-se que as médias de Z-score foram significantemente diferentes para os índices P/E (p = 0,028) e IMC/I (p = 0,001). A primeira análise considerou a categorização dos índices antropométricos em “desnutrido” ou “adequado” e, posteriormente, em “com” ou “sem” risco nutricional. Comparando-se às categorias do STRONGkids, com risco (médio e alto risco) e sem risco (baixo risco), houve diferença significativa entre todos os índices antropométricos e as categorias consideradas (tabela 2).

Tabela 2
Associação entre a presença ou ausência de risco nutricional obtida com o instrumento STRONGkids e o estado e risco nutricional avaliado por índices antropométricos nas crianças admitidas nos serviços de pronto socorro infantil do Distrito Federal, 2017

Foram baixas as correlações entre a pontuação obtida no STRONGkids, categorizados em “com risco” e “sem risco”, e os índices antropométricos (-0,19 para P/E; 0,03, E/I; -0,16, P/I; -0,27, IMC/I; -0,20, CB/I e total de 1,00), assim como ao se comparar com as categorias “desnutridos” (0,00) e “com risco nutricional” (0,11). Esse resultado reforça o fato que o instrumento e os índices são diferentes.

O desempenho do teste para a avaliação da acurácia é apresentado na tabela 3. Observa-se que ele se mostrou sensível, pouco específico, porém com VPN elevado.

Tabela 3
Desempenho dos testes de acurácia do instrumento STRONGkids em relação aos índices antropométricos de crianças desnutridas e em risco nutricional admitidas no pronto-socorro infantil do Distrito Federal, 2017

Entre os desnutridos, o instrumento foi capaz de captar 78,8% (IC95%: 64,3-93,3%) com risco nutricional e entre os adequados, o instrumento detectou 87,9% (IC95%: 79,3-96,5%) como sem risco nutricional. Apesar de não detectar todas as crianças desnutridas com risco, aquelas detectadas sem risco têm alta probabilidade de não ser desnutridas. O VPP, apesar de baixo, mostrou que o número de falsos-positivos foi elevado, ou seja, crianças identificadas como adequadas pela antropometria poderiam apresentar risco nutricional pelo instrumento.

Ao incluir a categoria de risco nutricional da antropometria, houve ganho na sensibilidade e no VPP, mas perda no VPN, o que aumentou a probabilidade de identificação dos pacientes com risco entre os verdadeiros desnutridos. Entretanto, houve redução na certeza de identificação daqueles que estavam sem risco serem, verdadeiramente, sem risco.

O agrupamento da classificação de “com risco” do instrumento somente naqueles classificados como “alto risco” (3,32%), ou seja, com pontuação de 4 ou 5, determinou perda de sensibilidade (12,1%; IC95%: 0,5-23,7%) e aumento na especificidade (97,9%; IC95%: 96,1-99,7%). Houve manutenção do VPN alto, com mais de 85%, o que leva à maior probabilidade de descartar a incerteza do paciente adequado estar sem risco. O mesmo não foi observado com a inclusão da categoria de risco nutricional do índice antropométrico, na qual a sensibilidade foi reduzida, houve manutenção de alta especificidade, perda no VPN e redução da probabilidade de os adequados serem classificados como sem risco pelo instrumento.

Ao analisar-se o desempenho ponto a ponto (1 a 5 pontos), verificou-se que, a cada aumento do ponto de corte, o instrumento ficou menos sensível e mais específico, o ponto de corte “1” foi o de maior sensibilidade para ambas categorias analisadas da antropometria. Assim, se a criança não estivesse desnutrida, teria alta probabilidade do resultado da avaliação pelo instrumento identificá-la como sem risco nutricional. A inclusão da faixa de risco nutricional pela antropometria identificou uma redução ainda maior na sensibilidade, porém a probabilidade de descartar risco nutricional entre os adequados permaneceu devido à permanência alta da especificidade.

Discussão

Este estudo foi o primeiro no Brasil a validar a acurácia do instrumento STRONGkids em amostra representativa de crianças em ambiente hospitalar. O primeiro estudo de validação preditiva do STRONGkids na América Latina, feito no Brasil,1818 Gouveia MA, Tassitano RM, Silva GA. STRONGkids: predictive validation in Brazilian children. J Pediatr Gastroenterol Nutr. 2018. verificou a capacidade do instrumento em predizer a perda ponderal e o tempo de internação. Foi um estudo prospectivo com amostra de conveniência e, apesar de ter mostrado baixa sensibilidade e alto VPN, foi capaz de detectar as crianças com previsão de longo tempo de internação, sugeriu seu uso como avaliação preliminar na internação.

A fraca correlação encontrada entre os resultados obtidos pelo instrumento de triagem nutricional e a antropometria em nosso estudo também foi vista em outros trabalhos.1414 Spagnuolo MI, Liguoro I, Chiatto F, Mambretti D, Guarino A. Application of a score system to evaluate the risk of malnutrition in a multiple hospital setting. Ital J Pediatr. 2013;39:81.,2424 Huysentrut K, Alliet P, Muyshont L, Rossignol R, Devreker T, Bontems P, et al. The STRONGkids nutritional screening tool in hospitalized children: a validation study. Nutrition. 2013;29:1356-61.,2525 Moenni V, Walls T, Day AS. Nutritional status and nutrition risk screening in hospitalized children in New Zealand. Acta Paediatr. 2013;102:e419-23. Spagnuolo et al. (2013)1414 Spagnuolo MI, Liguoro I, Chiatto F, Mambretti D, Guarino A. Application of a score system to evaluate the risk of malnutrition in a multiple hospital setting. Ital J Pediatr. 2013;39:81. identificaram 70% das crianças avaliadas em risco nutricional pelo instrumento e 20% pela antropometria. A presença de correlação significativa somente no alto risco gerou a discussão acerca de um instrumento de triagem nutricional se comparado a um procedimento para diagnóstico do estado nutricional, ou seja, a antropometria. Huysentrut et al. (2013),2424 Huysentrut K, Alliet P, Muyshont L, Rossignol R, Devreker T, Bontems P, et al. The STRONGkids nutritional screening tool in hospitalized children: a validation study. Nutrition. 2013;29:1356-61. em estudo multicêntrico, encontraram boa correlação com P/E e fraca com E/I. Ressaltaram a importância maior dada ao diagnóstico nutricional do que à identificação da triagem, que deveria prevalecer, pois a especificidade é menos importante no rastreio da desnutrição e resultados falso-negativos permitem casos de desnutrição sem prévia identificação. Moenni et al. (2013)2525 Moenni V, Walls T, Day AS. Nutritional status and nutrition risk screening in hospitalized children in New Zealand. Acta Paediatr. 2013;102:e419-23. encontraram relação inversa entre o instrumento e os índices antropométricos P/E e IMC/I Z-score e, ao comparar o STRONGkids com outros instrumentos de triagem nutricional, concluíram que ele foi o mais confiável.

Não houve associação significativa em dois estudos transversais, um brasileiro2626 Oliveira TC, Albuquerque IZ, Stringhini ML, Mortoza AS, Morais BA. Estado nutricional de crianças e adolescentes hospitalizados: comparação entre duas ferramentas e avaliação nutricional com parâmetros antropométricos. Rev Paul Pediatr. 2017;35:273-80. e outro na Turquia.1515 Durakbaşa ÇU, Fettahoğlu S, Bayar A, Mutus M, Okur H. The prevalence of malnutrition and effectiveness of STRONGkids tool in the identification of malnutrition risks among pediatric surgical patients. Balkan Med J. 2014;31:313-21. Ambos encontraram dados que parecem ser consistentes com o fato de o instrumento prover mais dados de risco futuro do que acerca do estado nutricional atual, como se espera de uma ferramenta para triagem de risco nutricional.

Mărginean et al. (2014),1616 Mărginean O, Pitea AM, Voidăzan S, Mărginean C. Prevalence and assessment of malnutrition risk among hospitalized children in Romania. J Health Popul Nutr. 2014;32:97-102. em estudo de validação do STRONGkids, encontraram boa correlação com a antropometria e sugeriram a inclusão de dados bioquímicos para aprimorar a identificação do risco nutricional.

O desempenho do teste de sensibilidade (78,8%) foi semelhante ao encontrado em outros estudos de validação. Ao comparar com os pacientes desnutridos, crônicos ou agudos, Spagnuolo et al. (2013)1414 Spagnuolo MI, Liguoro I, Chiatto F, Mambretti D, Guarino A. Application of a score system to evaluate the risk of malnutrition in a multiple hospital setting. Ital J Pediatr. 2013;39:81. verificaram 71% sensibilidade; 53% especificidade, VPP 21% e VPN 85%. De acordo com esse resultado, sugeriram que STRONGkids deve ser considerado junto com antropometria, como uma fácil avaliação preliminar e com direcionamento para os fatores de risco. Huysentrut et al. (2013)2424 Huysentrut K, Alliet P, Muyshont L, Rossignol R, Devreker T, Bontems P, et al. The STRONGkids nutritional screening tool in hospitalized children: a validation study. Nutrition. 2013;29:1356-61. avaliaram isoladamente dois índices, P/E e E/I, e encontraram boa sensibilidade, VPN de 94,8% e VPP de 11,9%, respectivamente. Beser et al. (2018)11 Beser OF, Cokugras FC, Erkan T, Kutlu T, Yagci RV. TUHAMAR Study Group Evaluation of malnutrition development risk in hospitalized children. Nutrition. 2018;48:40-7. encontraram em pacientes de um a cinco meses com análise de P/E, 72,2% de sensibilidade e 93% de especificidade; entre cinco e 18 anos pelo IMC/I, 72,3% e 94,8%; entre um mês e 10 anos pelo P/I, 70,3% e 90,3%, respectivamente. Esses trabalhos destacam a complementaridade entre o instrumento e antropometria de forma a minimizar o risco de negligência na identificação de pacientes em risco nutricional, principalmente entre aqueles com doença de base crônica.

O ponto de corte do instrumento que apresentou sensibilidade mais elevada foi o “1” e, com isso, o mais adequado dentro das especificações exigidas para uma triagem, a qual deve ser rápida, de fácil aplicação e sensível,1313 Joosten KF, Hulst JM. Nutritional screening tools for hospitalized children: methodological considerations. Clin Nutr. 2014;33:1-5. porém não substituindo a antropometria. A inclusão da classificação da faixa de risco nutricional, com Z-score entre -2 e -1 das curvas de referência,1919 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: length/height-for-age, weight-for-age, weight-for-length, weight-for-height and body mass index-for-age: methods and development. Geneva: World Health Organization; 2006.,2020 World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: head circumference-for-age, arm circumference-for-age, triceps skinfold-for-age and subscapular skinfold-for-age: methods and development. Geneva: World Health Organization; 2007.,2323 Ministério da Saúde. Secretaria de Atenção à Saúde. Departamento de Atenção Básica. Orientações para a coleta e análise de dados antropométricos em serviços de saúde: Norma Técnica do Sistema de Vigilância Alimentar e Nutricional - SISVAN. Brasília: Ministério da Saúde; 2011. 76. permitiu verificar que a sensibilidade do instrumento melhora. Dessa forma ele identifica mais facilmente quem é desnutrido e o instrumento acompanha, afirma o risco nutricional, com consequente aumento do VPP, favorece resultados mais satisfatórios no ambiente hospitalar.

Elevada prevalência de risco nutricional, médio ou alto, também foi encontrada em trabalhos semelhantes ao nosso,2525 Moenni V, Walls T, Day AS. Nutritional status and nutrition risk screening in hospitalized children in New Zealand. Acta Paediatr. 2013;102:e419-23.

26 Oliveira TC, Albuquerque IZ, Stringhini ML, Mortoza AS, Morais BA. Estado nutricional de crianças e adolescentes hospitalizados: comparação entre duas ferramentas e avaliação nutricional com parâmetros antropométricos. Rev Paul Pediatr. 2017;35:273-80.

27 Andrade MZ, Oliveira CA, dos Santos DB, Costa PR. Riesgo nutricional y factores asociados en pacientes pediátricos hospitalizados através de STRONGkids. Nutr Clin Diet Hosp. 2016;36:158-67.
-2828 Cao J, Peng L, Li R, Chen Y, Li X, Mo B, et al. Nutritional risk screening and its clinical significance in hospitalized children. Clin Nutr. 2014;33:432-6. porém o baixo risco foi verificado por Durakbasa et al. (2014)1515 Durakbaşa ÇU, Fettahoğlu S, Bayar A, Mutus M, Okur H. The prevalence of malnutrition and effectiveness of STRONGkids tool in the identification of malnutrition risks among pediatric surgical patients. Balkan Med J. 2014;31:313-21. e Mărginean et al. (2014).1616 Mărginean O, Pitea AM, Voidăzan S, Mărginean C. Prevalence and assessment of malnutrition risk among hospitalized children in Romania. J Health Popul Nutr. 2014;32:97-102. Menores prevalências de risco nutricional foram atribuídas aos critérios de seleção da amostra nos quais crianças em situação de maior risco nutricional, como doença ativa maligna1616 Mărginean O, Pitea AM, Voidăzan S, Mărginean C. Prevalence and assessment of malnutrition risk among hospitalized children in Romania. J Health Popul Nutr. 2014;32:97-102. ou alguns casos cirúrgicos,1515 Durakbaşa ÇU, Fettahoğlu S, Bayar A, Mutus M, Okur H. The prevalence of malnutrition and effectiveness of STRONGkids tool in the identification of malnutrition risks among pediatric surgical patients. Balkan Med J. 2014;31:313-21. foram excluídas. Costa e Pastore (2015),2121 Costa MV, Pastore CA. Nutritional screening tool versus anthropometric assessment in hospitalized children: which method is better associated to clinical outcomes?. Arch Latinoam Nutr. 2015;65:12-20. no Rio Grande do Sul, identificaram 16% de alto risco nutricional em crianças que permaneceram por mais de 24 h no serviço, aspecto que pode ter valorizado as mais graves clinicamente e, provavelmente, com maior risco nutricional. Estudo multicêntrico europeu encontrou risco nutricional com variação entre 5 e 30%,2929 Chourdakis M, Hecht C, Gerasimidis K, Joosten KF, Karagiozoglou-Lampoudi T, Koetse HA, et al. Malnutrition risk in hospitalized children: use of 3 screening tools in a large European population. Am J Clin Nutr. 2016;103:1301-10. atribuiu-se essa ampla variação à grande diversidade entre os países e às características dos respectivos serviços de saúde.

Em nosso trabalho verificamos uma prevalência de desnutridos de 12,18%, o que não difere muito de outros trabalhos, nos quais se verifica variação ampla desses valores em função, principalmente, de aspectos metodológicos. O estudo transversal de Oliveira et al. (2017),2626 Oliveira TC, Albuquerque IZ, Stringhini ML, Mortoza AS, Morais BA. Estado nutricional de crianças e adolescentes hospitalizados: comparação entre duas ferramentas e avaliação nutricional com parâmetros antropométricos. Rev Paul Pediatr. 2017;35:273-80. feito em Goiânia, identificou prevalência de desnutrição abaixo de 10% para todos os índices (9,6% P/I, 9,7% P/E, 7% IMC/I), exceto para E/I (16,9%) e CB/I (32,4%). Prevalências semelhantes foram verificadas por Huysentrut et al. (2013)2424 Huysentrut K, Alliet P, Muyshont L, Rossignol R, Devreker T, Bontems P, et al. The STRONGkids nutritional screening tool in hospitalized children: a validation study. Nutrition. 2013;29:1356-61. em crianças e adolescentes belgas. Em coorte prospectiva multicêntrica de crianças e adolescentes, clínicos e cirúrgicos, de 12 países europeus, foi verificada prevalência de desnutrição de 7% pelo IMC (aguda) e 7,9% pelo E/I (crônica).2929 Chourdakis M, Hecht C, Gerasimidis K, Joosten KF, Karagiozoglou-Lampoudi T, Koetse HA, et al. Malnutrition risk in hospitalized children: use of 3 screening tools in a large European population. Am J Clin Nutr. 2016;103:1301-10. O mesmo não foi visto no estudo de Cao et al. (2014),2828 Cao J, Peng L, Li R, Chen Y, Li X, Mo B, et al. Nutritional risk screening and its clinical significance in hospitalized children. Clin Nutr. 2014;33:432-6. exceto E/I (7,2%), os demais índices apresentaram prevalência maior do que 10%. Andrade et al. (2016),2727 Andrade MZ, Oliveira CA, dos Santos DB, Costa PR. Riesgo nutricional y factores asociados en pacientes pediátricos hospitalizados através de STRONGkids. Nutr Clin Diet Hosp. 2016;36:158-67. em estudo feito na Bahia, em hospital de referência, mesmo com inclusão de adolescentes na amostra, encontrou 13,9% de desnutrição com pelo menos um índice abaixo do Z-score, valor semelhante ao encontrado por Durakbasa et al. (2014)1515 Durakbaşa ÇU, Fettahoğlu S, Bayar A, Mutus M, Okur H. The prevalence of malnutrition and effectiveness of STRONGkids tool in the identification of malnutrition risks among pediatric surgical patients. Balkan Med J. 2014;31:313-21. com 13,4%. Costa e Pastore (2015),2121 Costa MV, Pastore CA. Nutritional screening tool versus anthropometric assessment in hospitalized children: which method is better associated to clinical outcomes?. Arch Latinoam Nutr. 2015;65:12-20. em estudo longitudinal feito no sul do Brasil, identificou alta prevalência de desnutrição, com 20,8% desnutrido pelo P/E em menores de um ano e 22,1% de E/I.

Destaca-se que valores preditivos dependem da prevalência do seu desfecho, ou seja, o VPP aumenta com a prevalência e o VPN diminui. Observou-se baixa prevalência de desnutridos, resultou em baixo VPP. Isso ocorre devido ao fato de a maior parte dos resultados positivos pertencer a crianças não desnutridas, representa falso-positivos. Em contrapartida, o VPN é alto nesses casos, favoreceo uma boa identificação daquelas crianças que não estão desnutridas.

A implantação do STRONGkids66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11. na rotina de internação em pediatria no país padronizaria as triagens nutricionais, favorece comparações temporais e entre estudos na área. O fato de ser um protocolo simples, de fácil execução, não invasivo, permite sua aplicação mesmo em condições de estrutura precária.

No Brasil, o Ministério da Saúde, a partir de 2006, deixou de recomendar a faixa de Z-score entre -1 e -2 como indicador de risco nutricional.2323 Ministério da Saúde. Secretaria de Atenção à Saúde. Departamento de Atenção Básica. Orientações para a coleta e análise de dados antropométricos em serviços de saúde: Norma Técnica do Sistema de Vigilância Alimentar e Nutricional - SISVAN. Brasília: Ministério da Saúde; 2011. 76. Os resultados do presente estudo apontam para o fato de que a adoção dessa faixa aumenta o VPP do STRONGkids,66 Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11. favorece a identificação precoce de risco nutricional em crianças hospitalizadas, complementa o uso da ferramenta de triagem.

Pontos fortes identificados no estudo foram relativos à amostra representativa e possibilitam sua aplicação em outras regiões brasileiras, a logística da coleta de dados, com possibilidade de reposição e feita sempre pelo mesmo pesquisador, e a inclusão da categoria de risco nutricional por critério antropométrico. Porém, novos estudos são necessários para investigar associações dessa ferramenta com diferentes desfechos clínico-nutricionais. Uma fragilidade do estudo foi a impossibilidade de coletar todos os dados antropométricos na totalidade das crianças, principalmente por recusa dos responsáveis.

Esse estudo forneceu novos dados sobre a prevalência de desnutrição e risco nutricional em crianças admitidas nos serviços de pronto-socorro infantil do DF. A validação de acurácia foi feita, com verificação de alta sensibilidade do instrumento, permitiu a identificação precoce de risco nutricional em populações semelhantes. Portanto, sugere-se sua implantação nas triagens pediátricas, no contexto das rotinas hospitalares. Entretanto, apesar de ser um procedimento simples e rápido, ele não substitui a antropometria, mas a complementa. Particularmente quando se verifica que a inclusão da classificação de risco nutricional pela antropometria ressaltou a importância desse dado dentro do ambiente hospitalar.

  • Como citar este artigo: Maciel JR, Nakano EY, Carvalho KM, Dutra ES. STRONGkids validation: tool accuracy. J Pediatr (Rio J). 2020;96:371-8.
  • ☆☆
    Estudo vinculado a Universidade de Brasília, Departamento de Nutrição, Programa de Pós-Graduação em Nutrição Humana, Brasília, DF, Brasil.

Apêndice A Material adicional

Pode-se consultar o material adicional para este artigo na sua versão eletrônica disponível em doi: 10.1016/j.jpedp.2019.05.006.

References

  • 1
    Beser OF, Cokugras FC, Erkan T, Kutlu T, Yagci RV. TUHAMAR Study Group Evaluation of malnutrition development risk in hospitalized children. Nutrition. 2018;48:40-7.
  • 2
    Dornelles CT, Silveira C, Cruz LB, Refosco L, Simon M, Maraschin T. Protocolo de atendimento e acompanhamento nutricional pediátrico por níveis assistenciais. Rev HCPA. 2009;29:229-38.
  • 3
    Rasmussen HH, Holst M, Kondrup J. Measuring nutritional risk in hospitals. Clin Epidemiol. 2010;2:209-16.
  • 4
    Sermet-Gaudelus I, Poisson-Salomon A, Colomb V, Brusset MC, Mosser F, Berrier F, et al. Simple pediatric nutritional risk score to identify children at risk of malnutrition. Am J Clin Nutr. 2000;72:64-70.
  • 5
    Secker DJ, Jeejeebhoy KN. Subjective Global Nutritional Assessment for children. Am J Clin Nutr. 2007;85:1083-9.
  • 6
    Hulst JM, Zwart H, Hop WC, Joosten KF. Dutch national survey to test the STRONGkids nutritional risk screening tool in hospitalized children. Clin Nutr. 2010;29:106-11.
  • 7
    Gerasimidis K, Macleod I, Maclean A, Buchanan E, Mcgrogan P, Swinbank I, et al. Perfomance of the novel Paediatric Yorkhill Malnutrition Score (PYMS) in hospital practice. Clin Nutr. 2011;30:430-5.
  • 8
    Moenni V, Day SA. Nutritional risk screening tool in hospitalized children. Int J Child Health Nutr. 2012;1:39-43.
  • 9
    White M, Lawson K, Ramsey R, Dennis N, Hutchinson Z, Soh XY, et al. A simple nutrition screening tool for pediatric inpatients. J Parenter Enteral Nutr. 2016;40:392-8.
  • 10
    Carniel MP, Santetti D, Andrade JS, Favero BP, Moschen T, Campos PA, et al. Validation of the Subjective Global Nutritional Assessment (SGNA) for children and adolescents. J Pediatr. 2015;91:596-602.
  • 11
    Wonoputri N, Djais JT, Rosalina I. Validity of nutritional screening tools for hospitalized children. J Nutr Metab. 2014;2014:143649.
  • 12
    Joosten KF, Hulst JM. Malnutrition in pediatric hospital patients: current issues. Nutrition. 2011;27:133-7.
  • 13
    Joosten KF, Hulst JM. Nutritional screening tools for hospitalized children: methodological considerations. Clin Nutr. 2014;33:1-5.
  • 14
    Spagnuolo MI, Liguoro I, Chiatto F, Mambretti D, Guarino A. Application of a score system to evaluate the risk of malnutrition in a multiple hospital setting. Ital J Pediatr. 2013;39:81.
  • 15
    Durakbaşa ÇU, Fettahoğlu S, Bayar A, Mutus M, Okur H. The prevalence of malnutrition and effectiveness of STRONGkids tool in the identification of malnutrition risks among pediatric surgical patients. Balkan Med J. 2014;31:313-21.
  • 16
    Mărginean O, Pitea AM, Voidăzan S, Mărginean C. Prevalence and assessment of malnutrition risk among hospitalized children in Romania. J Health Popul Nutr. 2014;32:97-102.
  • 17
    Carvalho FC, Lopes CR, Vilela LC, Vieira MA, Rinaldi AE, Crispim CA. Translation and cross-cultural adaptation of the STRONGkids tool for screening of malnutrition risk in hospitalized children. Rev Paul Pediatr. 2013;31:159-65.
  • 18
    Gouveia MA, Tassitano RM, Silva GA. STRONGkids: predictive validation in Brazilian children. J Pediatr Gastroenterol Nutr. 2018.
  • 19
    World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: length/height-for-age, weight-for-age, weight-for-length, weight-for-height and body mass index-for-age: methods and development. Geneva: World Health Organization; 2006.
  • 20
    World Health Organization, Multicentre Growth Reference Study Group. WHO Child Growth Standards: head circumference-for-age, arm circumference-for-age, triceps skinfold-for-age and subscapular skinfold-for-age: methods and development. Geneva: World Health Organization; 2007.
  • 21
    Costa MV, Pastore CA. Nutritional screening tool versus anthropometric assessment in hospitalized children: which method is better associated to clinical outcomes?. Arch Latinoam Nutr. 2015;65:12-20.
  • 22
    de Onis M, Onyango AW, Borghi A, Siyam A, Nishida C, Siekmann J. Development of a WHO growth reference for school-aged children and adolescents. Bull Word Health Org. 2007;85:660-7.
  • 23
    Ministério da Saúde. Secretaria de Atenção à Saúde. Departamento de Atenção Básica. Orientações para a coleta e análise de dados antropométricos em serviços de saúde: Norma Técnica do Sistema de Vigilância Alimentar e Nutricional - SISVAN. Brasília: Ministério da Saúde; 2011. 76.
  • 24
    Huysentrut K, Alliet P, Muyshont L, Rossignol R, Devreker T, Bontems P, et al. The STRONGkids nutritional screening tool in hospitalized children: a validation study. Nutrition. 2013;29:1356-61.
  • 25
    Moenni V, Walls T, Day AS. Nutritional status and nutrition risk screening in hospitalized children in New Zealand. Acta Paediatr. 2013;102:e419-23.
  • 26
    Oliveira TC, Albuquerque IZ, Stringhini ML, Mortoza AS, Morais BA. Estado nutricional de crianças e adolescentes hospitalizados: comparação entre duas ferramentas e avaliação nutricional com parâmetros antropométricos. Rev Paul Pediatr. 2017;35:273-80.
  • 27
    Andrade MZ, Oliveira CA, dos Santos DB, Costa PR. Riesgo nutricional y factores asociados en pacientes pediátricos hospitalizados através de STRONGkids. Nutr Clin Diet Hosp. 2016;36:158-67.
  • 28
    Cao J, Peng L, Li R, Chen Y, Li X, Mo B, et al. Nutritional risk screening and its clinical significance in hospitalized children. Clin Nutr. 2014;33:432-6.
  • 29
    Chourdakis M, Hecht C, Gerasimidis K, Joosten KF, Karagiozoglou-Lampoudi T, Koetse HA, et al. Malnutrition risk in hospitalized children: use of 3 screening tools in a large European population. Am J Clin Nutr. 2016;103:1301-10.

Datas de Publicação

  • Publicação nesta coleção
    29 Jun 2020
  • Data do Fascículo
    May-Jun 2020

Histórico

  • Recebido
    16 Set 2018
  • Aceito
    28 Nov 2018
  • Publicado
    24 Abr 2019
Sociedade Brasileira de Pediatria Av. Carlos Gomes, 328 cj. 304, 90480-000 Porto Alegre RS Brazil, Tel.: +55 51 3328-9520 - Porto Alegre - RS - Brazil
E-mail: jped@jped.com.br