Este estudo tem como objetivo analisar as oportunidades de pesquisa referentes à avaliação de desempenho de cursos de graduação ofertados na modalidade de educação a distância, por meio das publicações que compõem o portfólio bibliográfico de artigos mais citados pela comunidade científica. O instrumento selecionado para o alcance desse objetivo foi o Knowledge Development Process-Constructivist (ProKnow-C), por apresentar um processo estruturado e completo para a seleção e análise da literatura. Foram identificadas na literatura, no período de 2000 a 2017, 21 publicações que representam o fragmento da literatura de interesse, o que possibilitou a realização de uma análise sistêmica. Além de constatar que essa área do conhecimento se configura como um campo a ser explorado, foi possível registrar proposições para futuras investigações. Pesquisadores e gestores devem participar das etapas de desenvolvimento dos modelos de avaliação de desempenho, como na definição dos objetivos a serem mensurados, na hierarquização dos indicadores de avaliação e na aplicação de ações de aperfeiçoamento do contexto sob análise.

This study aims to analyze how research opportunities related to the Evaluation of Performance of Undergraduate Courses Offered in the Distance Education, through the publications that make up the bibliographic catalog of articles more cited by the scientific community. The Process Knowledge Development-Constructivist (ProKnow-C), for presenting a structured and complete process for the selection and analysis of the literature. Twenty one publications representing the fragment of the literature of interest were identified in the literature, from 2000 to 2017, which enabled a systemic analysis. In addition to finding that the knowledge area configured as a field to be explored, it was possible to register propositions for future investigations. Researchers and managers should be involved in the development stages of performance evaluation models, as the definition of objectives to be measured, the hierarchy of evaluation indicators and the application of actions to improve the context.

Resumo O objetivo do estudo foi validar um instrumento de avaliação de efetividade da formação profissional, ofertada em cursos na modalidade de educação a distância (EaD), no que se refere aos procedimentos teóricos. Para tanto, optou-se pela utilização da técnica Delphi, com vistas à obtenção de consenso da opinião de especialistas, acerca do construto, por meio de uma série de questionários estruturados. Após duas rodadas de consulta aos especialistas, sendo 13 participantes na primeira rodada e nove na segunda rodada de aplicação da técnica Delphi, 17 itens, referentes ao desenvolvimento de habilidades, atitudes e motivação, em decorrência do curso de formação profissional ofertado na modalidade EaD, foram considerados válidos para avaliar a efetividade da formação profissional. A apresentação de evidências teóricas, acerca da validade da medida de efetividade da formação profissional ofertada no contexto da modalidade EaD, é relevante, pois poderá fomentar a discussão, reflexão e o avanço no conhecimento científico, relacionado à temática, bem como fornecer indicativos para a melhoria das políticas de oferta de cursos de formação profissional.

Abstract The aim of this study was to validate an instrument for evaluating the effectiveness of professional training offered in distance education courses in terms of theoretical procedures. In order to achieve this, the Delphi technique was used for obtaining a consensus of the experts’ opinion about the construct through a series of structured questionnaires. It took two rounds of query to the specialists; 13 experts participated in the first round and nine in the second round of the application of the Delphi technique. After that, 17 items related to the development of skills, attitudes and motivation as a result of the professional training course offered in distance education, were considered valid to evaluate the effectiveness of professional training. The presentation of theoretical evidences about the validity of the measure of effectiveness of the professional training offered in the context of the distance education modality is relevant, because it can foment discussion, reflection and advance in the scientific knowledge related to the thematic, as well as provide indicatives for the improvement of the policies of provision of professional training courses.

Resumen El objetivo del estudio fue validar un instrumento para evaluar la efectividad de la formación profesional ofrecida en cursos en la modalidad de educación a distancia (EAD), en lo que se refiere a los procedimientos teóricos. Para ello, se optó por la utilización de la técnica Delphi, con el fin de obtener de consenso de la opinión de especialistas acerca del constructo, a través de una serie de cuestionarios estructurados. Después de dos rondas de consulta a los especialistas, siendo 13 participantes en la primera ronda y nueve en la segunda ronda de aplicación de la técnica Delphi, 17 ítems referentes al desarrollo de habilidades, actitudes y motivación como consecuencia del curso de formación profesional ofrecido en la modalidad de educación a distancia fueron considerados válidos para evaluar la efectividad de la formación profesional. La presentación de evidencias teóricas acerca de la validez de la medida de efectividad de la formación profesional ofrecida en el contexto de la modalidad EAD es relevante, ya que puede propiciar el debate, la reflexión y los avances en el conocimiento científico relacionado con el tema, así como proporcionar indicativos para la mejora de las políticas de oferta de cursos de formación profesional.

O processo de autoavaliação de cursos de educação superior, quando garante clareza dos aspectos avaliados e contínua reflexão, propicia o reconhecimento das especificidades e necessidades desses cursos, e a indicação de possíveis aprimoramentos. O objetivo deste artigo é apresentar um sistema de autoavaliação de cursos de licenciaturas ofertados na modalidade de educação a distância, construído a partir de uma experiência desenvolvida no Núcleo de Avaliação do Laboratório de Novas Tecnologias - UFSC. O sistema de autoavaliação é composto por um conjunto de categorias de análises agrupadas pelos critérios de particularidade e especificidade crescentes, com o objetivo de facilitar a coleta de dados sobre a realidade com lentes cada vez mais próximas da ação educativa. As categorias de análise são dimensões, subdimensões, elementos de análise e indicadores. As dimensões do sistema, que orientam as demais categorias, são: Corpo Social, Infraestrutura, Pedagógica e Resultados. O sistema proposto é flexível, no sentido de que seus componentes podem ser adaptados de acordo com a configuração do curso de licenciatura EaD a ser avaliado e com as especificidades da realidade educacional implicada neste processo.

When self-evaluation of higher education courses guarantees clarity to the issues evaluated and continuing reflection, it helps recognize the specificities and needs of these courses, and indicate possible improvements. The purpose of this article is to present a self-evaluation system for accreditation courses in the distance education modality. It is based on an experience at the Nucleus for Evaluation in the New Technologies Laboratory at the Federal University at Santa Catarina. The self-evaluation system is composed of a set of analytical categories grouped by criteria of increasing particularity and specificity, to facilitate collecting data about reality with lenses that have an increasingly closer focus on educational action. The categories of analysis are dimensions, subdimensions, elements of analysis and indicators. The dimensions of the system, which guide the other categories, are: social body, infrastructure, pedagogy and results. The system proposed is flexible because its components can be adapted according to the configurations of the distance education accreditation course to be evaluated and to the specificities of the educational reality implied by this process.