O artigo mostra as experiências de avaliação em promoção da saúde do idoso a partir da revisão de programas na área. Fez-se busca bibliográfica em bases de dados, sites e periódicos especializados, no período 1990-2002. O critério de inclusão foi ser programa com foco multitemático com atividades educativas e/ou preventivas. Os estudos revisados revelam um campo multifacetado quanto às tendências teórico-metodológicas e às estratégias de pesquisa. Na experiência internacional predomina o estudo quase-experimental, enquanto no Brasil são comuns os relatos de experiências. As principais dimensões avaliadas nos estudos são a receptividade dos idosos, a melhoria de indicadores psicossociais, a aderência a recomendações comportamentais e o processo educativo. Nos resultados destacam-se a boa receptividade dos idosos e certa discrepância de efeitos na aferição quantitativa de indicadores. Os estudos qualitativos apontam caminhos para apreensão dos processos. Conclui-se que a avaliação em promoção da saúde do idoso é pouco desenvolvida no Brasil e a pesquisa de síntese dos programas pode ser parâmetro para o desenvolvimento das experiências em nosso contexto.

This article presents a panel about the experiences on evaluation of health promotion programs for the elderly starting from a systematic literature review. A bibliography search was performed on databases, on websites and specialized journals published between 1990 and 2002. Only programs with multi-theme focus that contemplated educative and/or preventive activities were considered. The data revealed a multidimensional field regarding theoretical and methodological trends and research strategies. In international cases, a study design prevails that is quasi-experimental. In Brazil, reports of experiences are more common. The most important dimensions evaluated on these works are the receptivity among the elderly, the improvement of psycological and social indicators, the adherence to behavioral recommendations and the educative process. The results indicate good adhesion among the elderly and discrepancy of effects on the quantitative measurement of indicators. The qualitative results point to ways of understanding these processes. One can conclude that the evaluation on health promotion programs for the elderly is still weakly developed in Brazil and that the research of the synthesis of the evaluated programs can be a parameter for the development of experiences in our context.

O artigo mostra as experiências de avaliação em promoção da saúde do idoso a partir da revisão de programas na área. Fez-se busca bibliográfica em bases de dados, sites e periódicos especializados, no período 1990-2002. O critério de inclusão foi ser programa com foco multitemático com atividades educativas e/ou preventivas. Os estudos revisados revelam um campo multifacetado quanto às tendências teórico-metodológicas e às estratégias de pesquisa. Na experiência internacional predomina o estudo quase-experimental, enquanto no Brasil são comuns os relatos de experiências. As principais dimensões avaliadas nos estudos são a receptividade dos idosos, a melhoria de indicadores psicossociais, a aderência a recomendações comportamentais e o processo educativo. Nos resultados destacam-se a boa receptividade dos idosos e certa discrepância de efeitos na aferição quantitativa de indicadores. Os estudos qualitativos apontam caminhos para apreensão dos processos. Conclui-se que a avaliação em promoção da saúde do idoso é pouco desenvolvida no Brasil e a pesquisa de síntese dos programas pode ser parâmetro para o desenvolvimento das experiências em nosso contexto.

This article presents a panel about the experiences on evaluation of health promotion programs for the elderly starting from a systematic literature review. A bibliography search was performed on databases, on websites and specialized journals published between 1990 and 2002. Only programs with multi-theme focus that contemplated educative and/or preventive activities were considered. The data revealed a multidimensional field regarding theoretical and methodological trends and research strategies. In international cases, a study design prevails that is quasi-experimental. In Brazil, reports of experiences are more common. The most important dimensions evaluated on these works are the receptivity among the elderly, the improvement of psycological and social indicators, the adherence to behavioral recommendations and the educative process. The results indicate good adhesion among the elderly and discrepancy of effects on the quantitative measurement of indicators. The qualitative results point to ways of understanding these processes. One can conclude that the evaluation on health promotion programs for the elderly is still weakly developed in Brazil and that the research of the synthesis of the evaluated programs can be a parameter for the development of experiences in our context.

Neste trabalho apresentamos o processo de validação de um instrumento para avaliar a assistência farmacêutica, por meio da análise de implantação de um programa de distribuição de medicamentos do Governo Federal. Este processo se iniciou com a elaboração de um modelo teórico, baseado na revisão da literatura, que permitiu selecionar as dimensões conceituais e os respectivos critérios que melhor representassem estes constructos. Na segunda fase procedeu-se à ponderação dos indicadores para construção dos escores de qualidade. Foram testados três modelos para a classificação do grau de implantação e sete para a determinação do escore mais adequado com duas matrizes diferentes de indicadores. O objetivo era eleger a que apresentasse a maior coerência e consistência entre o grau de implantação do programa e os efeitos estimados, aprimorando a validade concorrente dos critérios utilizados. Os diversos modelos testados e os resultados obtidos, mostram que é possível se aumentar a validade do estudo, sem alterar os dados coletados, e o esforço se justificando por uma melhor compreensão do alcance e limites das medidas e das escolhas de suas ponderações e interpretações.

This paper presents the validation process for a tool assessing basic pharmaceutical services through an analysis of the implementation of a Basic Pharmaceuticals Distribution Program by the Brazilian Federal government. The process began with the drafting of a theoretical model, based on a state-of-the-art review and allowing the selection of various conceptual dimensions and respective criteria that best represented the construct. The second step involved weighting indicators for the construction of quality scores. Three models were tested for ranking implementation levels, and seven simulations were conducted, determining the score most closely reflecting the selected indicators in two different matrices. The objective was to select the most coherent and consistent version between implementation levels and expected outcomes, while simultaneously enhancing validity of chosen criteria. Testing of the various models and the results obtained showed that augmenting the validity of the study was possible without altering data. This endeavor is justified in understanding the scope and limitations of these measurements and of the choices involved in issues concerning their weighting and interpretation.

Neste trabalho apresentamos o processo de validação de um instrumento para avaliar a assistência farmacêutica, por meio da análise de implantação de um programa de distribuição de medicamentos do Governo Federal. Este processo se iniciou com a elaboração de um modelo teórico, baseado na revisão da literatura, que permitiu selecionar as dimensões conceituais e os respectivos critérios que melhor representassem estes constructos. Na segunda fase procedeu-se à ponderação dos indicadores para construção dos escores de qualidade. Foram testados três modelos para a classificação do grau de implantação e sete para a determinação do escore mais adequado com duas matrizes diferentes de indicadores. O objetivo era eleger a que apresentasse a maior coerência e consistência entre o grau de implantação do programa e os efeitos estimados, aprimorando a validade concorrente dos critérios utilizados. Os diversos modelos testados e os resultados obtidos, mostram que é possível se aumentar a validade do estudo, sem alterar os dados coletados, e o esforço se justificando por uma melhor compreensão do alcance e limites das medidas e das escolhas de suas ponderações e interpretações.

This paper presents the validation process for a tool assessing basic pharmaceutical services through an analysis of the implementation of a Basic Pharmaceuticals Distribution Program by the Brazilian Federal government. The process began with the drafting of a theoretical model, based on a state-of-the-art review and allowing the selection of various conceptual dimensions and respective criteria that best represented the construct. The second step involved weighting indicators for the construction of quality scores. Three models were tested for ranking implementation levels, and seven simulations were conducted, determining the score most closely reflecting the selected indicators in two different matrices. The objective was to select the most coherent and consistent version between implementation levels and expected outcomes, while simultaneously enhancing validity of chosen criteria. Testing of the various models and the results obtained showed that augmenting the validity of the study was possible without altering data. This endeavor is justified in understanding the scope and limitations of these measurements and of the choices involved in issues concerning their weighting and interpretation.

Este texto tem o propósito de descrever alguns marcos cronológicos de institucionalização da avaliação de programas/políticas públicas da França, na perspectiva governamental e no setor saúde, contextualizando-os no âmbito internacional. O caráter institucional da avaliação supõe integrá-la em um modelo orientado para ação, ligando atividades analíticas às de gestão, constituindo assim uma formulação da política de avaliação para avaliação de políticas. São focalizadas questões relacionadas à estrutura, à prática e à utilização dos resultados da avaliação, bem como outras características que conferem ao modelo francês uma certa resistência ao "fast food" ou "prêt-à-porter" das abordagens metodológicas tradicionais. A avaliação setorial se revela mais promissora em sua instucionalização do que o dispositivo centralizado do governo, apesar do trabalho desenvolvido por um Conselho Científico de Avaliação, sugerindo pistas de reflexão e debate na perspectiva do SUS.

The purpose of this article is to describe several chronological milestones in institutionalizing the evaluation of public programs and policies in France from a governmental perspective and in the health sector, situating such references in the international context. The institutional nature of evaluation implies integrating it into an action-oriented model, linking analytical activities to management, thus constituting the formulation of an evaluation policy for policy evaluation. The study focuses on issues related to the structure, practice, and utilization of evaluation results as well as other characteristics providing the French model with a certain resistance to traditional "fast-food" or "ready-made" methodological approaches. The institutionalization of sectorial evaluation appears more promising than that of the government's centralized channel, despite the work developed by a Scientific Evaluation Council, and suggests avenues for reflection and debate pertaining to the Brazilian Unified Health System.

Este texto tem o propósito de descrever alguns marcos cronológicos de institucionalização da avaliação de programas/políticas públicas da França, na perspectiva governamental e no setor saúde, contextualizando-os no âmbito internacional. O caráter institucional da avaliação supõe integrá-la em um modelo orientado para ação, ligando atividades analíticas às de gestão, constituindo assim uma formulação da política de avaliação para avaliação de políticas. São focalizadas questões relacionadas à estrutura, à prática e à utilização dos resultados da avaliação, bem como outras características que conferem ao modelo francês uma certa resistência ao "fast food" ou "prêt-à-porter" das abordagens metodológicas tradicionais. A avaliação setorial se revela mais promissora em sua instucionalização do que o dispositivo centralizado do governo, apesar do trabalho desenvolvido por um Conselho Científico de Avaliação, sugerindo pistas de reflexão e debate na perspectiva do SUS.

The purpose of this article is to describe several chronological milestones in institutionalizing the evaluation of public programs and policies in France from a governmental perspective and in the health sector, situating such references in the international context. The institutional nature of evaluation implies integrating it into an action-oriented model, linking analytical activities to management, thus constituting the formulation of an evaluation policy for policy evaluation. The study focuses on issues related to the structure, practice, and utilization of evaluation results as well as other characteristics providing the French model with a certain resistance to traditional "fast-food" or "ready-made" methodological approaches. The institutionalization of sectorial evaluation appears more promising than that of the government's centralized channel, despite the work developed by a Scientific Evaluation Council, and suggests avenues for reflection and debate pertaining to the Brazilian Unified Health System.