Resumo Estudar a validade de critério do Mini-Cog em idosos com baixo nível educacional. Desenho: transversal e de validação. Cenário: Policlínica Piquet Carneiro, uma unidade ambulatorial do Hospital da Universidade do Estado do Rio de Janeiro, no Brasil. Participantes: Uma amostra de conveniência constituída de 306 indivíduos, 65 anos ou mais, selecionados entre 8 de abril e 15 de julho de 2002. Métodos: Todos foram submetidos a uma avaliação geriátrica abrangente, que incluiu o Mini-Exame do Estado Mental (MEEM) e a parte cognitiva do Cambridge Examination for Mental Disorders of the Elderly - Revised (CAMCOG-R), e foram classificados segundo sua condição de ser ou não portador de demência (DSM-IV). Foi feita uma análise post-hoc dos dados do teste de evocação de três palavras, incluído no MEEM, e do Teste do Desenho do Relógio, incluído no CAMCOG-R. Os resultados de cada teste foram agrupados e interpretados de acordo com o protocolo do Mini-Cog. Resultados: 293 indivíduos completaram todas as etapas do estudo, e 211 tinham quatro ou menos anos de escolaridade e tiveram seus dados analisados; 32% tinham demência. A sensibilidade e a especificidade do Mini-Cog foram consistentemente baixas, independente do ponto de corte considerado. O melhor desempenho, no ponto de corte 2/3, registrou sensibilidade e especificidade de 60% e 65%, respectivamente. Conclusão: O Mini-Cog não é uma boa ferramenta para triagem cognitiva de indivíduos com menos de cinco anos de educação formal.

Abstract Objectives: To study the criterion validity of the Mini-Cog in low educational level elderly. Design: Cross-sectional and validation design. Setting: Policlínica Piquet Carneiro, an outpatient unit of Rio de Janeiro State University Hospital, in Brazil. Participants: A convenient sample consisting of 306 individuals, 65 yrs or older, selected from April 8th to July 15th, 2002. Methods: All participants underwent comprehensive geriatric evaluations which included the Mini-Mental State Examination (MMSE) and the cognitive part of the Cambridge Examination for Mental Disorders of the Elderly - Revised (CAMCOG-R). They were classified as demented or non-demented (DSM-IV). A post-hoc analysis was performed on the data from the 3 word recall test of the MMSE, and the Clock Drawing Test from the CAMCOG-R, and respective scores were added and interpreted in accordance with the Mini-Cog protocol. Results: 293 individuals completed all the study steps; 211 had 4 or less years of schooling and were included in the data analysis. 32% had dementia. Mini-Cog sensitivity and specificity was consistently low independently of the different cut-off points considered. The best performance was found at the cut-off point of 2/3 which yielded sensitivity and specificity of 60% and 65%, respectively. Conclusion: The Mini-Cog is not a good cognitive screening tool for individuals with less than five years of formal education.

OBJETIVO: Comparar a acurácia de quatro escalas de avaliação e determinar a confiabilidade inter-aferidor e a influência da escolaridade, no desempenho do Teste do Desenho do Relógio para detecção de demência em idosos com baixo nível educacional. MÉTODO: Delineamento de estudo: Validação de critério, tipo concorrente. Local de estudo: Ambulatório do Hospital da Universidade do Estado do Rio de Janeiro, Brasil. Participantes: 306 indivíduos (> 65 anos) submetidos à avaliação funcional e cognitiva por um geriatra e um neuropsicólogo; uma reunião de consenso entre estes profissionais avaliou a presença de demência. Quatro pesquisadores, que desconheciam o status cognitivo dos indivíduos, pontuaram o Teste do Desenho do Relógio - métodos de Shulman, Sunderland, Manos e Wolf-Klein, e um quinto pesquisador repetiu o método de Manos para o estudo de confiabilidade inter-aferidor. RESULTADOS: 211 indivíduos (≤ 4 anos de escolaridade) tiveram seus dados analisados. A sensibilidade e a especificidade dos quatro métodos foram similares e variaram em torno de 65%. A confiabilidade inter-avaliador foi excelente (ICC = 0,944). As áreas sob as curvas ROC foram pequenas (0,657 a 0,684) e as diferenças entre elas não foram estatisticamente significativas. CONCLUSÕES: O Teste do Desenho do Relógio é um instrumento confiável, mas não é válido para o rastreio de demência em pacientes idosos com quatro anos ou menos de escolaridade.

OBJECTIVE: To compare the accuracy of four scales, and to determine the inter-rater reliability and the influence of schooling on Clock Drawing Test performance in screening for dementia in elderly with low educational level. METHOD: Design: Criterion validation, concurrent type. Setting: Outpatient unit of Universidade do Estado do Rio de Janeiro Hospital, Brazil. Participants: A total of 306 individuals (> 65 years) were assessed by a geriatrician and a neuropsychologist using functional and cognitive instruments. The diagnosis of dementia was established by consensus in a meeting between these professionals. Four different researchers blinded as to the cognitive status of the patients scored the Clock Drawing Test using Shulman's, Sunderland's, Manos', and Wolf-Klein's methods; and a fifth researcher assessed Manos' method for an inter-rater reliability study. RESULTS: The data of 211 individuals (≤ 4 years of schooling) were analyzed. The sensitivity and specificity of the four methods were similar (about 65%). The inter-rater reliability of Manos' method was excellent (ICC = 0.944). The areas under the ROC curves were small (0.657 to 0.681), and the differences between them were not statistically significant. CONCLUSIONS: The Clock Drawing Test is a reliable but not valid test to screen for dementia in older outpatients with 4 or less years of formal schooling.

Desenvolvimento e análise do desempenho de uma adaptação transcultural para o português da Escala de Katz de independência em atividades da vida diária. Duas traduções e duas retrotraduções analisaram as equivalências conceitual, de itens e semântica para a escolha da versão final. A equivalência operacional foi avaliada em um estudo piloto, testando-se a confiabilidade e a consistência interna da versão adaptada por meio de reteste no mesmo dia em 156 pacientes ou após sete dias da primeira entrevista. A resolução de diferenças sutis em alguns itens levou à equivalência cultural. A versão final foi considerada fácil de se entender e de aplicar. A concordância corrigida para o acaso (kappa ponderado) foi de 0,91. O alfa de Chronbach variou de 0,80 a 0,92. A versão em português da Escala de Katz de independência em atividades da vida diária, completamente desenvolvida e testada, provou ser equivalente à original em inglês. Os itens apresentaram consistência interna e as taxa foram confiáveis.

This study involved the development and performance assessment of a cultural adaptation of the Katz scale of independence in activities of daily living, translated into Portuguese in Brazil. Two translations and two back-translations of the items were analyzed by experts in order to decide on the final version. Operational equivalence was assessed in a pilot study. The reliability and internal consistency of the adapted version were assessed by retesting 156 patients on the same day or 7 days after the first interview. Cultural equivalence was achieved after resolving subtle differences in some items. The final version was considered easy to understand and use. Chance-corrected agreement (weighted kappa) was 0.91. Cronbach's alpha ranged from 0.80 to 0.92. CONCLUSIONS: a Portuguese version of the Katz scale of independence in activities of daily living, thoroughly developed and tested, proved equivalent to the original version in English. The items were internally consistent and the rates were reliable.

Desenvolvimento e análise do desempenho de uma adaptação transcultural para o português da Escala de Katz de independência em atividades da vida diária. Duas traduções e duas retrotraduções analisaram as equivalências conceitual, de itens e semântica para a escolha da versão final. A equivalência operacional foi avaliada em um estudo piloto, testando-se a confiabilidade e a consistência interna da versão adaptada por meio de reteste no mesmo dia em 156 pacientes ou após sete dias da primeira entrevista. A resolução de diferenças sutis em alguns itens levou à equivalência cultural. A versão final foi considerada fácil de se entender e de aplicar. A concordância corrigida para o acaso (kappa ponderado) foi de 0,91. O alfa de Chronbach variou de 0,80 a 0,92. A versão em português da Escala de Katz de independência em atividades da vida diária, completamente desenvolvida e testada, provou ser equivalente à original em inglês. Os itens apresentaram consistência interna e as taxa foram confiáveis.

This study involved the development and performance assessment of a cultural adaptation of the Katz scale of independence in activities of daily living, translated into Portuguese in Brazil. Two translations and two back-translations of the items were analyzed by experts in order to decide on the final version. Operational equivalence was assessed in a pilot study. The reliability and internal consistency of the adapted version were assessed by retesting 156 patients on the same day or 7 days after the first interview. Cultural equivalence was achieved after resolving subtle differences in some items. The final version was considered easy to understand and use. Chance-corrected agreement (weighted kappa) was 0.91. Cronbach's alpha ranged from 0.80 to 0.92. CONCLUSIONS: a Portuguese version of the Katz scale of independence in activities of daily living, thoroughly developed and tested, proved equivalent to the original version in English. The items were internally consistent and the rates were reliable.