RESUMO Este estudo tem o objetivo de apresentar a avaliação de um projeto de capacitação em serviço para profissionais de saúde nas ações de prevenção e controle da hanseníase, problematizando o modelo de avaliação adotado, com foco na utilização para a gestão em saúde. Foi realizada uma avaliação ex-post em 18 municípios prioritários brasileiros participantes das capacitações. Empregou-se a estratégia Rapid Evaluation Methods (REM), priorizando: a) abordagem colaborativa; b) técnicas qualitativas; e c) enfoque conceitual da translação do conhecimento. Foram realizadas 24 entrevistas grupais, envolvendo 278 participantes. A abordagem de ensino em serviço foi importante para revalorização das ações de prevenção e controle da hanseníase e para conferir um lugar privilegiado de discussão técnica, de reflexão e de mudanças na atenção primária e em sua relação com a especializada. Conclui-se que o modelo de avaliação possibilitou que as controvérsias e convergências surgissem, assim como as recomendações para ajustes da intervenção junto à gestão em tempo oportuno.

ABSTRACT This study aims to present the evaluation of an in-service training project for health professionals in leprosy prevention and control actions, questioning the adopted evaluation model, focusing on its use for health management. An ex-post evaluation was carried out in 18 priority Brazilian municipalities participating in the training project. Rapid Evaluation Methods (REM) strategy was employed, prioritizing: a) a collaborative approach; b) qualitative techniques; and c) a conceptual approach to knowledge translation. Twenty-four group interviews were carried out, involving 278 participants. The in-service teaching approach was important for revaluing leprosy prevention and control actions and to provide a privileged place for technical discussion, reflection and changes in primary health care and in its relationship with specialized care. It can be concluded that the evaluation model enabled controversies and convergences to emerge, as well as recommendations for managers to adjust the intervention timely.

ABSTRACT This study aims to present the evaluation of an in-service training project for health professionals in leprosy prevention and control actions, questioning the adopted evaluation model, focusing on its use for health management. An ex-post evaluation was carried out in 18 priority Brazilian municipalities participating in the training project. Rapid Evaluation Methods (REM) strategy was employed, prioritizing: a) a collaborative approach; b) qualitative techniques; and c) a conceptual approach to knowledge translation. Twenty-four group interviews were carried out, involving 278 participants. The in-service teaching approach was important for revaluing leprosy prevention and control actions and to provide a privileged place for technical discussion, reflection and changes in primary health care and in its relationship with specialized care. It can be concluded that the evaluation model enabled controversies and convergences to emerge, as well as recommendations for managers to adjust the intervention timely.

RESUMO Este estudo tem o objetivo de apresentar a avaliação de um projeto de capacitação em serviço para profissionais de saúde nas ações de prevenção e controle da hanseníase, problematizando o modelo de avaliação adotado, com foco na utilização para a gestão em saúde. Foi realizada uma avaliação ex-post em 18 municípios prioritários brasileiros participantes das capacitações. Empregou-se a estratégia Rapid Evaluation Methods (REM), priorizando: a) abordagem colaborativa; b) técnicas qualitativas; e c) enfoque conceitual da translação do conhecimento. Foram realizadas 24 entrevistas grupais, envolvendo 278 participantes. A abordagem de ensino em serviço foi importante para revalorização das ações de prevenção e controle da hanseníase e para conferir um lugar privilegiado de discussão técnica, de reflexão e de mudanças na atenção primária e em sua relação com a especializada. Conclui-se que o modelo de avaliação possibilitou que as controvérsias e convergências surgissem, assim como as recomendações para ajustes da intervenção junto à gestão em tempo oportuno.

Resumo As ferramentas de gestão de dados, denominadas Business Intelligence (BI), podem ser importantes para fornecer informações completas e personalizáveis para as demandas da gestão em saúde. O objetivo é apresentar a avaliação da aplicabilidade e potencialidade do uso de uma ferramenta de BI no planejamento das ações de gestão da Atenção Primária em Saúde. Estudo exploratório, de abordagem quantitativa, tendo as dimensões de eficiência e otimização como atributos da qualidade. Seleção de uma Clínica da Família, da cidade do Rio de Janeiro, sendo inseridos no BI dados do território, do cadastro do Programa Bolsa Família e de linhas de cuidado, para explorar as possibilidades de combinação e de geração de indicadores. Neste artigo, apresentamos a Ficha A e a Linha de cuidado da gestante. Como resultados a ampliação de indicadores detalhados em relação à um tabulador comum e otimização na obtenção de listas e do monitoramento por parte das equipes e do gestor. Quanto à eficiência, seu baixo custo e fácil manuseio reduz custos de criação e de profissionais necessários. Conclui-se que a ferramenta viabiliza uma maior organização e planejamento, facilitando a gestão da Clínica da Família, sobretudo no monitoramento dos indicadores e processos avaliativos.

Abstract Data management tools, called Business Intelligence (BI), can be important to provide complete and customizable information for the demands of health management. The objective of the article is to present the evaluation of the applicability and potential of a BI tool in the planning of management actions of Primary Health Care. Exploratory study, with a quantitative approach, using the dimensions of efficiency and optimization as attributes of quality. A Family Clinic was selected in the city of Rio de Janeiro. Data from the territory, from the Bolsa Família Program register and some “Care Lines” were inserted in the BI, in order to explore the possibilities of combining and generating indicators. In this article, we present the use of Form A and the pregnant woman’s Care Line. As a result, greater range of detailed indicators compared to a common tab, and optimization in obtaining lists and perform monitoring tasks by the teams and the manager. Regarding efficiency, its low cost and easy handling reduces the costs of creation and necessary professionals. As a conclusion, the BI tool enables greater organization and planning, facilitating the Family Health Clinic management, mainly for the monitoring of indicators and evaluation processes.

Resumo As ferramentas de gestão de dados, denominadas Business Intelligence (BI), podem ser importantes para fornecer informações completas e personalizáveis para as demandas da gestão em saúde. O objetivo é apresentar a avaliação da aplicabilidade e potencialidade do uso de uma ferramenta de BI no planejamento das ações de gestão da Atenção Primária em Saúde. Estudo exploratório, de abordagem quantitativa, tendo as dimensões de eficiência e otimização como atributos da qualidade. Seleção de uma Clínica da Família, da cidade do Rio de Janeiro, sendo inseridos no BI dados do território, do cadastro do Programa Bolsa Família e de linhas de cuidado, para explorar as possibilidades de combinação e de geração de indicadores. Neste artigo, apresentamos a Ficha A e a Linha de cuidado da gestante. Como resultados a ampliação de indicadores detalhados em relação à um tabulador comum e otimização na obtenção de listas e do monitoramento por parte das equipes e do gestor. Quanto à eficiência, seu baixo custo e fácil manuseio reduz custos de criação e de profissionais necessários. Conclui-se que a ferramenta viabiliza uma maior organização e planejamento, facilitando a gestão da Clínica da Família, sobretudo no monitoramento dos indicadores e processos avaliativos.

Abstract Data management tools, called Business Intelligence (BI), can be important to provide complete and customizable information for the demands of health management. The objective of the article is to present the evaluation of the applicability and potential of a BI tool in the planning of management actions of Primary Health Care. Exploratory study, with a quantitative approach, using the dimensions of efficiency and optimization as attributes of quality. A Family Clinic was selected in the city of Rio de Janeiro. Data from the territory, from the Bolsa Família Program register and some “Care Lines” were inserted in the BI, in order to explore the possibilities of combining and generating indicators. In this article, we present the use of Form A and the pregnant woman’s Care Line. As a result, greater range of detailed indicators compared to a common tab, and optimization in obtaining lists and perform monitoring tasks by the teams and the manager. Regarding efficiency, its low cost and easy handling reduces the costs of creation and necessary professionals. As a conclusion, the BI tool enables greater organization and planning, facilitating the Family Health Clinic management, mainly for the monitoring of indicators and evaluation processes.

RESUMO A incorporação dos diferentes interessados ao processo avaliativo é estratégica para facilitar a compreensão da avaliação e a apropriação de seus resultados. Este artigo se propõe a descrever e analisar criticamente a participação dos atores (stakeholders) no processo de avaliação, utilizando a pesquisa avaliativa do Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). Para isto, foram tomadas como base as memórias das reuniões de trabalho, das oficinas de alinhamento conceitual e de validação dos Modelos Lógicos dos seminários realizados, assim como dos relatórios elaborados no período de agosto de 2012 a dezembro de 2015. A abordagem colaborativa envolveu inúmeros desafios, englobando 15 projetos, com distintos níveis de abrangência e complexidade, e com diversos stakeholders, com diferentes tipos e níveis de colaboração, o que condicionou os limites e as possibilidades de participação. Esta experiência gerou a adaptação do Modelo de Avaliação Colaborativa de Rodriguez-Campos e Rincones-Gomez (2013). A abordagem colaborativa exige por parte dos avaliadores um exercício de flexibilização e de ajuste às distintas particularidades e aos contextos locais, sem perder de vista o alinhamento às teorias da intervenção e ao modelo teórico da avaliação.

ABSTRACT Stakeholder approaches to evaluation imply the incorporation of different stakeholders in the evaluation process as to facilitate its comprehension and the appropriation of its results. This article aims to describe and critically analyze the participation of the stakeholders in the evaluation process taking into account the evaluation study Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). For this purpose, we analyzed the reports regarding work meetings, workshops for conceptual alignment and validation of the projects Logical Models, seminars, as well as partial and final reports, during the period of August 2012 to December 2015. The collaborative approach involved numerous challenges encompassing 15 projects, with different levels of complexity, and with a diverse number and variety of stakeholders, which brought us to the limits and possibilities of participation of the different actors. We adapted the Collaborative Evaluation Model, from Rodriguez-Campos and Rincones-Gomez (2013). This type of approach requires the evaluators to exercise flexibility and adjustment to different local contexts and particularities, without losing sight of conformity to the theory of intervention and to the evaluation theoretical model.

RESUMO A incorporação dos diferentes interessados ao processo avaliativo é estratégica para facilitar a compreensão da avaliação e a apropriação de seus resultados. Este artigo se propõe a descrever e analisar criticamente a participação dos atores (stakeholders) no processo de avaliação, utilizando a pesquisa avaliativa do Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). Para isto, foram tomadas como base as memórias das reuniões de trabalho, das oficinas de alinhamento conceitual e de validação dos Modelos Lógicos dos seminários realizados, assim como dos relatórios elaborados no período de agosto de 2012 a dezembro de 2015. A abordagem colaborativa envolveu inúmeros desafios, englobando 15 projetos, com distintos níveis de abrangência e complexidade, e com diversos stakeholders, com diferentes tipos e níveis de colaboração, o que condicionou os limites e as possibilidades de participação. Esta experiência gerou a adaptação do Modelo de Avaliação Colaborativa de Rodriguez-Campos e Rincones-Gomez (2013). A abordagem colaborativa exige por parte dos avaliadores um exercício de flexibilização e de ajuste às distintas particularidades e aos contextos locais, sem perder de vista o alinhamento às teorias da intervenção e ao modelo teórico da avaliação.

ABSTRACT Stakeholder approaches to evaluation imply the incorporation of different stakeholders in the evaluation process as to facilitate its comprehension and the appropriation of its results. This article aims to describe and critically analyze the participation of the stakeholders in the evaluation process taking into account the evaluation study Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). For this purpose, we analyzed the reports regarding work meetings, workshops for conceptual alignment and validation of the projects Logical Models, seminars, as well as partial and final reports, during the period of August 2012 to December 2015. The collaborative approach involved numerous challenges encompassing 15 projects, with different levels of complexity, and with a diverse number and variety of stakeholders, which brought us to the limits and possibilities of participation of the different actors. We adapted the Collaborative Evaluation Model, from Rodriguez-Campos and Rincones-Gomez (2013). This type of approach requires the evaluators to exercise flexibility and adjustment to different local contexts and particularities, without losing sight of conformity to the theory of intervention and to the evaluation theoretical model.

RESUMO Trata-se de relato de experiência sobre a disciplina Introdução à Avaliação em Saúde para graduandos de saúde coletiva sob as perspectivas docente e discente. A experiência docente considerou o exercício pedagógico, quando se deu a aquisição de competências - saber, saber fazer e ser em interação -, analisado por critérios e parâmetros pactuados. A experiência discente foi obtida por meio do instrumento de avaliação aplicado aos discentes, incluindo os itens: apreciação geral, conteúdo programático, expectativas, mesa redonda, seminário, pontos positivos e problemas. Os achados revelam as dificuldades de integração com outras disciplinas e os aspectos participativos da abordagem por problematização.

ABSTRACT This paper presents an experience report on the discipline Introduction to Health Evaluation for undergraduate students also as under the teacher as the student perspectives. The teaching perspective considered the students' response to a simulation exercise whose outcome success was the acquisition of competencies (knowledge, know-how and be in interaction), being analyzed by criteria and agreed parameters. The students' experience was captured by questionnaire, including: general assessment, curriculum, expectations, round table, seminars, strengths and problems. The findings reveal integration difficulties with other disciplines and participatory aspects of this questioning approach.

RESUMO Este artigo reflete sobre o apoiador institucional do Ministério da Saúde a partir da avaliação de implementação do Projeto QualiSUS-Rede. Utiliza-se o referencial de atores intermediários, inspirado na Teoria Ator-Rede, adaptada ao objeto do estudo. Entrevistaram-se treze apoiadores, explorando-se as operações de translação e os domínios de mediação cognitivos, estratégicos e logísticos. Os resultados indicam a legitimação da função apoio como unidade organizacional, embora com pouca autonomia gerencial e financeira, diluindo a possibilidade desses atores de produzir e gerenciar conexões inovadoras para a construção de alianças, encaminhamentos e superação de conflitos e controvérsias.

ABSTRACT This paper reflects on the Ministry of Health 'institutional supporter', based on the implementation evaluation of QualiSUS-Network Project. We employed the intermediate actors theory, inspired by the Actor-Network Theory, and adapted to the study's object. Thirteen 'supporters' were interviewed to explore the relationship between the translation operations and mediation process (cognitive, strategic and logistic). The results indicate the 'supporter' as an organizational unit with a legitimate function, but with limited managerial and financial autonomy, which dilutes these actors possibility to produce and manage innovative connections to build alliances and overcome conflicts and controversies.

RESUMO Trata-se de relato de experiência sobre a disciplina Introdução à Avaliação em Saúde para graduandos de saúde coletiva sob as perspectivas docente e discente. A experiência docente considerou o exercício pedagógico, quando se deu a aquisição de competências - saber, saber fazer e ser em interação -, analisado por critérios e parâmetros pactuados. A experiência discente foi obtida por meio do instrumento de avaliação aplicado aos discentes, incluindo os itens: apreciação geral, conteúdo programático, expectativas, mesa redonda, seminário, pontos positivos e problemas. Os achados revelam as dificuldades de integração com outras disciplinas e os aspectos participativos da abordagem por problematização.

ABSTRACT This paper presents an experience report on the discipline Introduction to Health Evaluation for undergraduate students also as under the teacher as the student perspectives. The teaching perspective considered the students' response to a simulation exercise whose outcome success was the acquisition of competencies (knowledge, know-how and be in interaction), being analyzed by criteria and agreed parameters. The students' experience was captured by questionnaire, including: general assessment, curriculum, expectations, round table, seminars, strengths and problems. The findings reveal integration difficulties with other disciplines and participatory aspects of this questioning approach.

RESUMO Este artigo reflete sobre o apoiador institucional do Ministério da Saúde a partir da avaliação de implementação do Projeto QualiSUS-Rede. Utiliza-se o referencial de atores intermediários, inspirado na Teoria Ator-Rede, adaptada ao objeto do estudo. Entrevistaram-se treze apoiadores, explorando-se as operações de translação e os domínios de mediação cognitivos, estratégicos e logísticos. Os resultados indicam a legitimação da função apoio como unidade organizacional, embora com pouca autonomia gerencial e financeira, diluindo a possibilidade desses atores de produzir e gerenciar conexões inovadoras para a construção de alianças, encaminhamentos e superação de conflitos e controvérsias.

ABSTRACT This paper reflects on the Ministry of Health 'institutional supporter', based on the implementation evaluation of QualiSUS-Network Project. We employed the intermediate actors theory, inspired by the Actor-Network Theory, and adapted to the study's object. Thirteen 'supporters' were interviewed to explore the relationship between the translation operations and mediation process (cognitive, strategic and logistic). The results indicate the 'supporter' as an organizational unit with a legitimate function, but with limited managerial and financial autonomy, which dilutes these actors possibility to produce and manage innovative connections to build alliances and overcome conflicts and controversies.

Resumo: O consumo de tabaco é um dos principais responsáveis por diferentes tipos de câncer e outras enfermidades relacionadas a esse uso. Em 2003, a Assembleia Mundial de Saúde adotou a Convenção-Quadro para o Controle do Tabaco da Organização Mundial da Saúde (CQCT-OMS), a qual visa a proteger os cidadãos das consequências sanitárias, sociais, ambientais e econômicas geradas pelo consumo e pela exposição à fumaça do tabaco. A Convenção deveria ser ratificada pelos países membros da OMS e, no caso brasileiro, sua ratificação envolveu o Congresso Nacional, que realizou audiências públicas nas principais cidades produtoras da erva. Neste trabalho, analisa-se esse processo decisório à luz dos diferentes interesses, posições e atores sociais envolvidos. Em termos metodológicos, trata-se de um estudo qualitativo fundamentado em pesquisa documental baseada, sobretudo, nas notas taquigráficas das audiências públicas. São analisados os interesses e os argumentos apresentados favoráveis e contrários à ratificação. O artigo demonstra que, apesar de precedida por intensos debates, a decisão final favorável à ratificação foi tomada por um grupo restrito de agentes públicos, caracterizando um processo decisório que se assemelha a um funil.

Abstract: Tobacco consumption is a leading cause of various types of cancer and other tobacco-related diseases. In 2003, the World Health Assembly adopted the World Health Organization Framework Convention on Tobacco Control (WHO-FCTC), which aims to protect citizens from the health, social, environmental, and economic consequences of tobacco consumption and exposure to tobacco smoke. The Convention was to be ratified by the Member States of the WHO; in Brazil’s case, ratification involved the National Congress, which held public hearings in the country’s leading tobacco growing communities (municipalities). The current study analyzes this decision-making process according to the different interests, positions, and stakeholders. In methodological terms, this is a qualitative study based on document research, drawing primarily on the shorthand notes from the public hearings. We analyze the interests and arguments for and against ratification. The article shows that although preceded by intense debates, the final decision in favor of ratification was made by a limited group of government stakeholders, characterizing a decision-making process similar to a funnel.

Resumen: El consumo de tabaco es uno de los principales responsables de los diferentes tipos de cáncer y otras enfermedades relacionadas con su consumo. En 2003, la Asamblea Mundial de la Salud adoptó el Convenio Marco para el Control del Tabaco de la Organización Mundial de la Salud (CQCT-OMS), que tiene como objetivo proteger a los ciudadanos de las consecuencias sanitarias, sociales, ambientales y económicas generadas por el consumo y por la exposición al humo del tabaco. El convenio debería ser ratificado por los países miembros de la OMS y, en el caso brasileño, su ratificación involucró al Congreso Nacional, que realizó audiencias públicas en las principales ciudades productoras de esta planta. En este trabajo, se analiza ese proceso decisorio a la luz de los diferentes intereses, posiciones y actores sociales involucrados. En términos metodológicos, se trata de un estudio cualitativo, fundamentado en una investigación documental basada, sobre todo, en las notas taquigráficas de las audiencias públicas. Se analizan los intereses y los argumentos presentados favorables y contrarios a la ratificación. El artículo demuestra que, a pesar de estar precedida por intensos debates, la decisión final favorable a la ratificación se tomó por parte de un grupo restringido de agentes públicos, caracterizando un proceso decisorio semejante por su dinámica al de un embudo.

Resumo: O consumo de tabaco é um dos principais responsáveis por diferentes tipos de câncer e outras enfermidades relacionadas a esse uso. Em 2003, a Assembleia Mundial de Saúde adotou a Convenção-Quadro para o Controle do Tabaco da Organização Mundial da Saúde (CQCT-OMS), a qual visa a proteger os cidadãos das consequências sanitárias, sociais, ambientais e econômicas geradas pelo consumo e pela exposição à fumaça do tabaco. A Convenção deveria ser ratificada pelos países membros da OMS e, no caso brasileiro, sua ratificação envolveu o Congresso Nacional, que realizou audiências públicas nas principais cidades produtoras da erva. Neste trabalho, analisa-se esse processo decisório à luz dos diferentes interesses, posições e atores sociais envolvidos. Em termos metodológicos, trata-se de um estudo qualitativo fundamentado em pesquisa documental baseada, sobretudo, nas notas taquigráficas das audiências públicas. São analisados os interesses e os argumentos apresentados favoráveis e contrários à ratificação. O artigo demonstra que, apesar de precedida por intensos debates, a decisão final favorável à ratificação foi tomada por um grupo restrito de agentes públicos, caracterizando um processo decisório que se assemelha a um funil.

Abstract: Tobacco consumption is a leading cause of various types of cancer and other tobacco-related diseases. In 2003, the World Health Assembly adopted the World Health Organization Framework Convention on Tobacco Control (WHO-FCTC), which aims to protect citizens from the health, social, environmental, and economic consequences of tobacco consumption and exposure to tobacco smoke. The Convention was to be ratified by the Member States of the WHO; in Brazil’s case, ratification involved the National Congress, which held public hearings in the country’s leading tobacco growing communities (municipalities). The current study analyzes this decision-making process according to the different interests, positions, and stakeholders. In methodological terms, this is a qualitative study based on document research, drawing primarily on the shorthand notes from the public hearings. We analyze the interests and arguments for and against ratification. The article shows that although preceded by intense debates, the final decision in favor of ratification was made by a limited group of government stakeholders, characterizing a decision-making process similar to a funnel.

Resumen: El consumo de tabaco es uno de los principales responsables de los diferentes tipos de cáncer y otras enfermedades relacionadas con su consumo. En 2003, la Asamblea Mundial de la Salud adoptó el Convenio Marco para el Control del Tabaco de la Organización Mundial de la Salud (CQCT-OMS), que tiene como objetivo proteger a los ciudadanos de las consecuencias sanitarias, sociales, ambientales y económicas generadas por el consumo y por la exposición al humo del tabaco. El convenio debería ser ratificado por los países miembros de la OMS y, en el caso brasileño, su ratificación involucró al Congreso Nacional, que realizó audiencias públicas en las principales ciudades productoras de esta planta. En este trabajo, se analiza ese proceso decisorio a la luz de los diferentes intereses, posiciones y actores sociales involucrados. En términos metodológicos, se trata de un estudio cualitativo, fundamentado en una investigación documental basada, sobre todo, en las notas taquigráficas de las audiencias públicas. Se analizan los intereses y los argumentos presentados favorables y contrarios a la ratificación. El artículo demuestra que, a pesar de estar precedida por intensos debates, la decisión final favorable a la ratificación se tomó por parte de un grupo restringido de agentes públicos, caracterizando un proceso decisorio semejante por su dinámica al de un embudo.

O objetivo deste artigo é o de analisar os níveis de ambiguidade e conflito em relação aos objetivos e recursos (meios) necessários à implementação da Assistência Farmacêutica no município de João Pessoa (PB). Os dados foram coletados por meio de entrevistas semiestruturadas e sistematizados por meio de análise de conteúdo. Para análise dos resultados, utilizou-se como ferramenta o modelo de ambiguidade-conflito de Richard Matland. Os resultados indicam baixos níveis de ambiguidade sobre os objetivos da política, porém considerável nível de conflito em relação aos meios. Os achados permitiram detectar características de 'Implementação Administrativa', com atributos da tipologia 'Política'.

This paper aims to analyze the levels of ambiguity and conflict related to objectives and resources (means) required for the implementation of Pharmaceutical Services in the city of João Pessoa-PB, Brazil. Data were collected by means of semi-structured interviews and systematized as for content analysis. Data analysis followed the ambiguity-conflict model of Richard Matland. A low ambiguity level was found regarding pharmaceutical policy objectives, but showing a considerable level of conflict in relation to the means. The findings contained some characteristics of 'administrative implementation' and attributes of 'Politics' type.