RESUMEN La clasificación tradicional de la evaluación según agentes evaluadores exige una reconfiguración a la luz del estudio de las relaciones de poder en las prácticas y las necesidades pedagógicas de proyectos innovadores. Se propone un nuevo modelo basado en la concepción de que lo que define el tipo de evaluación no es el rol del sujeto (docente, estudiante), sino la posición simbólica del evaluador respecto de lo evaluado, expresada en relaciones de poder y diálogo. El nuevo modelo considera los conceptos habituales categorizados según la naturaleza del evaluador: observador (heteroevaluación) y participante (coevaluación y autoevaluación). El artículo se organiza secuencialmente en problematización, revisión de la teoría evaluativa, análisis del modelo de clasificación tradicional y descripción del modelo propuesto. innovadores docente, docente (docente estudiante, estudiante , estudiante) evaluado diálogo heteroevaluación (heteroevaluación coevaluación autoevaluación. autoevaluación . autoevaluación) problematización evaluativa propuesto

ABSTRACT The traditional classification of evaluation according to evaluation agents requires a reconfiguration in light of the study of power relations in practices and pedagogical needs of innovative projects. A new model is proposed based on the concept that what defines the type of evaluation is not the role of the subject (teacher, student), but the symbolic position of the evaluator on what is evaluated, expressed in power relationships and dialogue. The new model considers usual concepts categorized according to the nature of the evaluator: observer (hetero-evaluation) and participant (co-evaluation and self-evaluation). The article is sequentially organized into problematization, review of evaluative theory, analysis of the traditional classification model, and description of the proposed model. projects teacher, teacher (teacher student, student , student) evaluated dialogue heteroevaluation hetero (hetero-evaluation coevaluation co selfevaluation. selfevaluation self . self-evaluation) problematization theory self-evaluation

RESUMO A classificação tradicional da avaliação segundo agentes avaliadores exige uma reconfiguração à luz do estudo das relações de poder nas práticas e nas necessidades pedagógicas de projetos inovadores. Propõe-se um novo modelo baseado na concepção de que o que define o tipo de avaliação não é o papel do sujeito (docente, estudante), mas a posição simbólica do avaliador em relação ao avaliado, expressa em relações de poder e diálogo. O novo modelo considera os conceitos habituais categorizados segundo a natureza do avaliador: observador (heteroavaliação) e participante (coavaliação e autoavaliação). O artigo se organiza sequencialmente em problematização, revisão da teoria avaliativa, análise do modelo de classificação tradicional e descrição do modelo proposto. inovadores Propõese Propõe docente, docente (docente estudante, estudante , estudante) avaliado diálogo heteroavaliação (heteroavaliação coavaliação autoavaliação. autoavaliação . autoavaliação) problematização avaliativa proposto

Resumen Este artículo trata sobre un estudio cualitativo llevado a cabo por las investigadoras como requisito para obtener el grado de maestría en educación con énfasis en evaluación educativa, en un momento donde la educación costarricense se estaba impartiendo a distancia debido a la pandemia ocasionada por el COVID-19. Como consecuencia nace la inquietud de investigar con el objetivo de identificar las competencias pedagógicas de las personas docentes para evaluar las matemáticas en el cuarto año de primaria en una escuela subvencionada. De esta manera, se diseña un estudio de caso en el que se utilizaron dos matrices de revisión documental, una para las Guías de Trabajo Autónomo, y otra para el Instrumento de Evaluacion Sumativa, así como un cuestionario cualitativo con preguntas cerradas y abiertas que se les aplicó a las dos personas docentes que impartieron matemáticas en el 2020 en ese centro educativo. Para el análisis de la información se llevó a cabo una triangulación entre las fuentes de información y se hizo un análisis temático. Los datos mostraron que las personas docentes son competentes únicamente en relación con la conceptualización de la heteroevaluación y la autoevaluación, así como la aplicación de esta última. Se concluyó que las personas docentes no son competentes en relación con el manejo del paradigma pragmático ni de la evaluación del proceso. También, muestran deficiencias técnicas en cuanto al diseño de los indicadores y construcción de instrumentos de evaluación. Sin embargo, son competentes en cuanto a la conceptualización y aplicación de la autoevaluación y la heteroevaluación.

Abstract This article is based on a qualitative study carried out by the researchers as a requirement to obtain a master's degree in education with a focus on educational assessment, at a time when Costa Rica education was being taught through the distance learning mode, due to the pandemic caused by COVID-19. Therefore, the concern to investigate arises intending to identify teachers' pedagogical skills to assess mathematics in the fourth year of primary school in a subsidized school. In this way, a case study is designed in which two document review matrices, one for the Autonomous Work Guide and the other for the Summative Assessment Instrument, as well as a qualitative questionnaire, with closed and open questions, were used. It was administrated to the two teachers who taught mathematics in 2020. For the analysis of the information, the data was triangulated among the sources of information, and a thematic analysis was made. The data showed that the teachers have pedagogical skills only in the conceptualization of hetero-evaluation and self-evaluation, as well as the application of the latter. It was concluded that teachers have no pedagogical skills regarding the pragmatic paradigm or assessment as an ongoing process. Also, they show technical deficiencies in the design of learning indicators and evaluation tools. However, they are competent in conceptualizing and applying hetero-evaluation and self-assessments.

RESUMEN El presente estudio tiene como objetivo proponer un modelo de Retroalimentación Formativa Integrada. Dentro de los principales métodos utilizados se constatan los métodos de análisis-síntesis e histórico-lógico que permitieron explorar las principales corrientes y tendencias epistemológicas de la evaluación formativa; el Método Holístico-Dialéctico para el diseño del modelo y el método de generalización-abstracción para revelar sus relaciones esenciales y regularidad. Los resultados permiten constatar un modelo con dos dimensiones: (1) dimensión de Retroalimentación Estratégica Reflexiva, contentiva de las configuraciones: Reconocimiento del Feed Up, Comprensión del Feed Back, Orientación del Feed Forward, y (2) dimensión de Retroalimentación Praxiológica Operativa, contentiva de las configuraciones: Autogestión de la Retroalimentación auto-evaluativa, Instrumentación de la Retroalimentación hetero-evaluativa y Aplicación de la Retroalimentación co-evaluativa, expresándose la configuración de “Retroalimentación Meta-Evaluativa” como proceso síntesis de las dos dimensiones. Se concluye presentando como relaciones esenciales que la proyección de la Retroalimentación Formativa Integrada se dinamiza desde procesos de meta-reflexión de los actores educativos, y su concreción se sustenta en una praxis evaluativa dialógico-experiencial, revelándose entonces como regularidad el carácter meta-regulado del desarrollo de la Retroalimentación Formativa Integrada, como expresión del vínculo dinámico de su construcción táctica en el proceso de enseñanza-aprendizaje.

ABSTRACT The present study aims to propose an Integrate Formative Feedback model. Among the main methods used are the analysis-synthesis and historical-logical methods that allowed us to explore the main trends and epistemological trends of formative evaluation; the Holistic-Dialectical Method for the design of the model and the generalization-abstraction method to reveal its essential relationships and regularity. The results allow to verify a model with two dimensions: (1) Reflective Strategic Feedback dimension, containing the configurations: Feed Up Recognition, Feed Back Understanding, Feed Forward Orientation, and (2) Operational Praxiological Feedback dimension, contentive of the configurations: Self-management of self-evaluative Feedback, Instrumentation of hetero-evaluative Feedback and Application of co-evaluative Feedback, expressing the configuration of “Meta-Evaluative Feedback” as a synthesis process of the two dimensions. It is concluded by presenting as essential relationships that the projection of Integrated Formative Feedback is dynamized from processes of meta-reflection of educational actors, and its concretion is based on a dialogical-experiential evaluative praxis, revealing then as regularity the meta-regulated character of the development of Integrated Formative Feedback, as an expression of the dynamic link of its tactical construction in the teaching-learning process.

RESUMEN Introducción: La evaluación del docente y del evaluador está centrada en criterios de valoración que la posiciona en el paradigma interpretativo, pues busca llegar a comprender e interpretar experiencias académicas sobre la calidad y el compromiso docente. Objetivo: Describir la valoración de docentes y evaluadores sobre evaluación del aprendizaje en la carrera de enfermería. Métodos: Estudio cuantitativo, descriptivo transversal, en la carrera de enfermería de la Universidad Estatal Península de Santa Elena, Ecuador, durante primer trimestre del 2018. Universo de 41 docentes y 9 evaluadores que impartieron docencia durante el periodo estudiado, se aplicó un cuestionario y lista de chequeo, validados por criterios de expertos. Se calcularon frecuencias absolutas, porcentajes y varianzas, las comparaciones para los grupos de docentes y evaluadores se realizaron con prueba U de Mann-Whitney. El nivel de significación si p ≤ 0,05. Resultados: Existieron consistencias y similitud entre las valoraciones de la heteroevaluación durante el proceso, los valores encontrados en docentes y evaluadores están entre intervalos 0,80 y 0,89, en evaluadores superior a 0,85, equivalente a resultado fiable, con consistencia interna del instrumento, el indicador con mayor tendencia negativa evidenció 24,39 %, lo que significa que en la evaluación no se alcanzan los logros deseados. Conclusiones: Los evaluadores áulicos consideran que en la evaluación no se alcanzan los logros deseados, que se evidencian aspectos que no corresponden con los preceptos de la evaluación del aprendizaje y que por lo general resulta ser lo típico del proceso evaluativo tradicional, a pesar de estar normado por Reglamento Nacional para Evaluación Estudiantil en Ecuador.

ABSTRACT Introduction: Evaluation by any professor or evaluator is centered on assessment criteria belonging to the interpretive paradigm, since it is aimed at understanding and interpreting academic experiences concerning quality and commitment of the professor. Objective: To describe evaluation by professors and evaluators on learning assessment in the Nursing major. Methods: Quantitative, descriptive and cross-sectional study carried out, during the first trimester of 2018, in the Nursing major of Universidad Estatal Península de Santa Elena, Ecuador. The universe was made up of 41 teachers and nine evaluators teaching during the study period. A questionnaire and a checklist, validated using expert judgment, were applied. Absolute frequencies, percentages and variances were calculated. The comparisons for the groups of professors and evaluators were made using Mann-Whitney U test. Differences were statistically significant if P ≤ 0.05. Results: There were consistencies and similarity among the evaluations of heteroassessment during the process; the values found in professors and evaluators are in the intervals between 0.80 and 0.89. In evaluators, it is greater than 0.85, equivalent to a reliable result, with internal consistency of the instrument. The indicator with the greatest negative trend showed 24.39%, which means that the desired achievements were not reached in assessment. Conclusions: Classroom evaluators consider that the desired achievements are not reached in assessment, that aspects that do not correspond to the precepts of learning assessment are evidenced, and that, in general, it turns out to a typical characteristic in traditional assessment, despite being regulated by the National Regulation for Student Assessment in Ecuador.

Resumen Objetivo: Elaborar un procedimiento para la gestión de la evaluación del desempeño de los profesores en la Universidad de Pinar del Rio, Cuba, en el que se buscó mayor correspondencia entre los resultados de las evaluaciones anuales y el cumplimiento de objetivos institucionales. Métodos: Se empleó el método histórico-lógico, el de modelación, así como el de medición, los que se aplicaron con ayuda de las técnicas de análisis documental, encuesta y entrevista y los procedimientos de análisis y síntesis e inducción y deducción, para el procesamiento y análisis de la información, tanto bibliográfica como empírica. Resultados: Como resultado del diagnóstico empírico se identificaron, entre otros problemas, los siguientes: poca participación de los actores que deben involucrarse en el proceso; resulta una tarea tediosa para los evaluadores; se incumple el tiempo establecido; las evaluaciones no se corresponden con las categorías. Sobre esta base y la bibliografía consultada, se elaboró un procedimiento para efectuar la evaluación del desempeño anual de los profesores, conformado por cuatro fases, 10 etapas y 19 pasos donde se combina la autoevaluación, la hetero-evaluación y la co-evaluación. Conclusiones: Aunque existen numerosos procedimientos para la evaluación del desempeño de los profesores universitarios, no existe consenso en la forma de evaluarlos y hacer esta, por lo que cada universidad debe gestionar este proceso a través de procedimientos que posibiliten su desarrollo adecuado, teniendo en cuenta sus características como organización y los objetivos trazados para el período.

Abstract Aim: To design a procedure for assessment of professor performance at the University of Pinar del Rio, Cuba, looking for broader correspondence between the outcome of annual assessment and the fulfillment of institutional goals. Methods: The methods used were historical-logical, modelling, and measurement, which relied on document analysis, surveys, and interview techniques, as well as the procedures such as analysis-synthesis and induction-deduction for processing and analysis of empirical and bibliographic information. Results: Some of the problems resulting from the empirical diagnostic were identified as poor engagement of actors that should be part to the process; it is a tedious task for assessors; the schedule set for this task was exceeded; assessment does not correspond to the categories. Based on the previous information, and the information consulted, a procedure was designed to conduct annual teacher performance assessment comprising 4 phases, 10 stages, and 19 steps, which combine self-evaluation, hetero-evaluation, and co-evaluation. Conclusions: Although several procedures to assess university professor performance are available, there is no consensus as to the way in which they should be implemented, so every university must manage this process through procedures that ensure proper development, considering the characteristics of an organization, and the goals set for the period.

Resumen Introducción. La autoevaluación es la forma de evaluación que hace una persona de sí misma; supone aspectos claves para el desarrollo de la madurez, como son autocrítica, autoconocimiento, autoconcepto y la capacidad de reflexionar, lo que genera conocimiento a partir de la práctica. La capacidad para la autoevaluación se aprende, y los estudiantes deben ejercitarse en ello, tomando conciencia por sí mismos de sus logros, errores y aspectos a mejorar. El estudiante debe contar con instrumentos confiables y válidos para que el proceso sea objetivo. Objetivo. Determinar el alcance de la rúbrica como instrumento confiable para la autoevaluación del aprendizaje clínico de los estudiantes de enfermería producto de la experiencia intrahos-pitalaria. Metodología: Investigación con metodología cuantitativa. El docente aplicó una rúbrica para evaluar la práctica clínica al mismo tiempo que el estudiante. Se realizó análisis de confiabilidad a través del Coeficiente Alpha de Cronbach y Coeficiente de Correlación Intraclase (CCI). Se aplicó t de Student para verificar diferencia de medias. Resultados: Participaron 37 estudiantes. Se obtuvo una rúbrica con Coeficiente Alpha de Cronbach de .750, CCI de ,655. Las puntuaciones obtenidas por los docentes como heteroevalua-ción y estudiantes como autoevaluación no evidenciaron diferencias estadísticamente significativas, p-valor > 0,05. Conclusiones: De acuerdo con los resultados obtenidos, se puede aseverar que una rúbrica válida y confiable es un instrumento objetivo para ser utilizado por los estudiantes. La autoevaluación es la reflexión sobre el propio desempeño, lo cual estimula habilidades metacognitivas y genera aprendizaje en los estudiantes.

Abstract Introduction. Self-evaluation is how a person makes an evaluation of himself. This modality is very important for personal and professional development, it involves key aspects for the development of human maturity such as self-criticism, self-knowledge, self-concept, self-objectivity and the ability to constantly think over action, which generates knowledge from the practice. The ability for self-assessment is learned and students should exercise this practice, becoming aware of their achievements, mistakes and aspects so they can improve during the skills learning process. The student must have reliable and valid instruments for this process in order to be objective. Goal. To determine the scope of the rubric as a reliable instrument for self-evaluation in clinical learning of nursing students as a result of the in-hospital experience. Methodology: Research with quantitative methodology, where summative evaluation of the clinical practice was performed by applying a rubric by the teacher and by the student at the same time during the second academic semester 2018. Internal and external reliability analysis was performed through the Cronbach's Alpha coefficient and Intraclass Correlation Coefficient (ICC). Student's T was applied to verify mean differences. Each participant signed off an Informed Consent (CI) Results: 37 students participated. A rubric with Cronbach's Alpha coefficient of .74, CCI of, 655 was obtained. The scores obtained by teachers as hetero-evaluation and students as self-evaluation did not show statistically significant differences, p-value> 0.05. Conclusions: According to the results obtained, it can be affirmed that a valid and reliable rubric is an objective instrument to be used by the students. The reflection on the action generates learning and the ability to evaluate their own performance, which generates in the students a more responsible attitude towards their own learning and stimulates metacognitive skills, which are necessary for a reflective professional practice according to changing and complex context.

Resumen Las emociones positivas constituyen una de las principales vías de acceso al bienestar psicológico, ya que favorecen el desarrollo de recursos que robustecen la capacidad de sobreponerse a la adversidad y de manejar con éxito diferentes situaciones de la vida. El presente trabajo aborda la medición de una emoción positiva de gran relevancia para el campo de la salud mental y la educación. El propósito principal fue construir y analizar el funcionamiento psicométrico de dos escalas independientes para evaluar la serenidad en niños argentinos: una técnica de autoinforme y un reporte de observador externo. Se llevó a cabo un estudio de tipo instrumental, con diferentes muestras de niños, seleccionadas para la autoevaluación y la heteroevaluación, a fin de analizar el poder discriminativo de los ítems, la consistencia interna, la validez de constructo y la validez nomológica de las escalas. En ambos casos, los resultados indicaron que los ítems tienen una adecuada capacidad discriminante, una consistencia interna alta, y se agrupan de manera clara en un único factor general. Asimismo, muestran evidencias de validez nomológica, ya que los niños con altas puntuaciones de serenidad tendrían menor probabilidad de mostrar comportamientos agresivos cuando se relacionan con sus compañeros, mostrarían menos hiperactividad y un menor número de reacciones impulsivas. A partir de los resultados, se concluye que las nuevas escalas de serenidad infantil constituyen un aporte interesante para el campo de la evaluación psicológica, ya que proveen datos confiables y válidos sobre una emoción positiva que ha sido escasamente estudiada en el período de la niñez.

Abstract The present research focuses on the measurement of a positive emotion of great relevance for the field of mental health and education. The main purpose was to develop and validate two independent scales to assess serenity in children: a self-report instrument and an external observer report. In Study 1, we evaluated the psychometric properties of a self-report instrument. The participants of this study were 613 children aged between 9 and 12 years old (44.70 % boys and 55.30 % girls), that attended public schools in the city of Buenos Aires, Argentina. The scale consists of 11 items with three response options on a Likert scale (Yes, Sometimes, and No), and presents a comprehensible language for school-age children. It includes both general statements (e. g., “I am relaxed most of the time”, “Most days I feel at peace”), as well as statements that refer to the search for serenity in threatening or stressful situations (e. g., “When someone bothers me I try to stay calm”, “When things go wrong I try to calm down”). Study 2 was carried out to assess the psychometric properties of a serenity scale that takes into account the perspective of an external observer close to the child, such as parents or educators. This scale is appropriate for obtaining information from young children without the ability to read and write, from four years old and up. In addition, due to its short extension, it is ideal to work in the school context, when the teacher is required to complete the information for large groups of students. The non-randomized sample was composed of 365 children (51.4 % boys and 48.6 % girls), between 4 and 12 years of age, that attended the initial levels (.age = 4.60; SD = .50) and primary schools (.age = 8.13; SD = 1.68), from the province of Entre Ríos, Argentina. Teachers were responsible of answering the scale, in reference to each of their students. The report contains six items, with three response options on a Likert scale (Yes, More or less, and No). The items were formulated as questions that made reference to a threatening situation in which the child could exhibit or not the ability to calm down (e. g., “When the child encounters a problem, does he/she make an effort to stay calm?”, “Can the child stay calm even if he/she is in a noisy or exciting environment?”). In both cases, an instrumental study was carried out to analyze the items’ discriminative power, the internal consistency, the construct validity and the nomological validity of the scales. In both studies, the results indicated that the items have an adequate discriminant capacity, a high internal consistency, and are clearly grouped in a single general factor. They also provide evidence for nomological validity, since they correlate negatively and significantly with measures of aggression, hyperactivity and impulsivity. It is concluded that these new measures of serenity constitute an interesting contribution for the field of psychological evaluation, providing reliable and valid data on a positive emotion that has been scarcely studied in childhood. This study also revealed that serene children are less likely to show aggressive behaviors, such as hitting, kicking or insulting, when they relate to their peers; and that, in addition, they would show less hyperactivity and a smaller number of impulsive reactions. It would be advisable then that schools and parents could have a more active role in the teaching of exercises to encourage inner calm, in order to help their children to respond more responsively to the stressful situations in their environment.

Resumen Esta investigación tuvo como objetivo analizar la evaluación del desempeño docente del programa Técnico Profesional en Servicio de Policía (TPSP), rediseñando los instrumentos de evaluación y el protocolo del sistema de valoración de los pedagogos. Se empleó un enfoque cuantitativo de tipo descriptivo, efectuando un análisis univariado, utilizando tablas de contingencia de 2 por 2. Así se determinó el nivel de acuerdo entre evaluadores, correlacionando las 8 variables comportamentales de la evaluación docente: planeación pedagógica, estrategias de enseñanza y aprendizaje, desarrollo metodológico, evaluación del aprendizaje, implementación de créditos académicos, espacios de convivencia, dominio del conocimiento y habilidades comunicativas. Se realizó una evaluación a 14 sedes educativas y a los resultados de las visitas de pares por parte del Concejo Nacional de Acreditación, empleando un cuestionario validado, junto con la autoevaluación, heteroevaluación y coevaluación a 32 docentes del TPSP y 296 estudiantes. Se concluyó que las habilidades comunicativas y las estrategias de enseñanza aprendizaje, son las variables que más inciden en la evaluación docente por parte de los estudiantes, con un nivel de acuerdo casi perfecto entre evaluadores (Kappa de Cohen de 0,9).

Abstract The objective of this research was to analyze the evaluation of the teaching performance of the Professional Technician Program in Police Service (TPSP), redesigning the evaluation instruments and the protocol of the pedagogical assessment system, using a quantitative approach of descriptive type, carrying out an analysis univariate, using 2 by 2 contingency tables. Thus the level of agreement between evaluators was determined, correlating the 8 behavioral variables of the teacher evaluation: pedagogical planning, teaching and learning strategies, methodological development, learning evaluation, implementation of academic credits, living spaces, and knowledge domain and communication skills. An evaluation was carried out on 14 educational sites and the results of peer visits by the National Accreditation Council (CNA), using a validated questionnaire, along with the self-evaluation, hetero-evaluation and co-evaluation of 32 TPSP teachers and 296 Students. It was concluded that communicative skills and teaching-learning strategies are the variables that most affect the teacher evaluation by students, with an almost perfect level of agreement between evaluators (Cohen's Kappa of 0.9).

El objetivo de este trabajo es presentar una revisión crítica de las maneras en que se tiende a evaluar el desempeño de los docentes universitarios. Por lo general, las instituciones enuncian propósitos de la evaluación que suelen no coincidir con lo que se evalúa y con el uso que se hace de los resultados. Se incluye la revisión de distintos modelos de evaluación Para mostrar los desfases entre objetivos y prácticas, es decir, la pobre relación de lo que se hace, con el modelo del declarado. Se tiende a enunciar que el objetivo de la evaluación está centrado en la mejora continua. Uno de los instrumentos más utilizados es el cuestionario, con el que se pretende hacer una evaluación precisa, pero que, por lo general, no evalúa el desempeño docente, sino, en el mejor de los casos, la opinión de los estudiantes. Si se declara que la evaluación debe servir para mejorar la práctica docente, convendría privilegiar el modelo constructivista que permitiría favorecer los cambios que se requieren a través de la reflexión que surja de la revisión de la autoevaluación, la hetero-evaluación y la co-evaluación.

The purpose of this article is to present a critical review of the ways in which the performance of university teachers are usually evaluated. Generally, the institutions state proposal of evaluation that usually coincide with what is evaluated and the use of the results. It includes the review of the different evaluation models to show the discrepancies between the objectives and the practices, that is, the poor relationship between the model used and what is done. Universities usually declare that the focus of the evaluation is improvement of practice. One of the most used instruments is the questionnaire, with which an accurate measurement can be made, but generally it does not evaluate the teaching performance, but, in the best-case scenario, the opinion of the students. If universities state that the evaluation should serve to improve the teaching practice, it would be advisable to favor the constructivist model that promotes changes required through the reflection that arises from the review of the self-evaluation, the hetero-evaluation and the co- evaluation.

RESUMO Objetivo: avaliar evidências de validade da Escala de Competências das Ações do Enfermeiro em Emergências com base na estrutura interna, na consistência interna e no critério externo. Métodos: estudo metodológico para verificação de novas evidências de validade da Escala, com conteúdos previamente validados. A Escala com 81 ações mensuráveis em cinco níveis de competências pode ser realizada tanto para o enfermeiro se autoavaliar como outros o avaliarem. Resultados: participaram 407 enfermeiros assistenciais e 41 gestores das cinco regiões do Brasil, atuantes em emergências pré-hospitalar móvel, fixa ou hospitalar. A dimensionalidade foi evidenciada mediante análise fatorial exploratória dos 81 itens, apontando sete fatores que explicaram 66,5% da variância total dos dados. O alfa de Cronbach variou de 0,79 a 0,98. O Kaiser- Meyer-Olkin 0,988 indicou que as correlações entre os itens foram significantes. No critério externo, correlações de Pearson entre escores de competências de heteroavaliação e classificação subjetiva do gestor foram significantes (p<0,001), bem como diferenças das médias dessas competências por grupo critério. Adicionalmente, avaliaram-se escores por características, verificando-se médias estatisticamente distintas. Conclusão: por meio dos Procedimentos Estatísticos adotados, com multimétodos e multi-informantes, analisaram-se diferentes propriedades psicométricas, gerando um sumário de evidências, demostrando que a Escala é válida e confiável.

ABSTRACT Objective: to evaluate the validity of the Competence Scale of Actions of Nurses in Emergencies based on internal structure, internal consistency, and external criteria. Methods: methodological study to verify new evidence of validity of the Scale, with contents previously validated. The Scale has 81 measurable actions at five levels of competence and can be applied both for self- and/or hetero-evaluation. Results: one hundred and forty seven nursing assistants and 41 managers from the five regions of Brazil participated in the study. They were linked to mobile prehospital emergency service, fixed prehospital emergency service, or hospital emergencies. Dimensionality was evidenced by exploratory factorial analysis of the 81 items, pointing out seven factors that explained 66.5% of the total data variance. Cronbach’s alpha ranged from 0.79 to 0.98. The Kaiser-Meyer-Olkin 0.988 indicated that the correlations between the items were significant. In the external criterion, Pearson’s correlations between hetero-evaluation competence scores and the manager’s subjective classification were significant (p < 0.001), as well as differences in the means of these competencies by criterion group. In addition, scores by characteristics were evaluated to detect statistically different means. Conclusion: through the adopted Statistical Procedures, with multi-methods and multi-informants, different psychometric properties were analyzed. A summary of evidence was generated showing that the Scale is valid and reliable.

RESUMEN Objetivo: evaluar evidencias de validez de la Escala de Competencias de las Acciones del Enfermero en Emergencias con base en la estructura interna, en la consistencia interna y en el criterio externo. Métodos: estudio metodológico para verificación de nuevas evidencias de validez de la Escala, con contenidos previamente validados. La Escala con 81 acciones mensurables en cinco niveles de competencias puede ser realizada tanto para que el enfermero se autoevalúe como otros lo evalúen. Resultados: participaron 407 enfermeros asistenciales y 41 gestores de las cinco regiones de Brasil, actuantes en emergencias pre-hospitalaria móvil, fija o hospitalaria. La dimensionalidad fue evidenciada mediante análisis factorial exploratoria de los 81 ítems, apuntando siete factores que explicaron 66,5% de la variancia total de los datos. El alfa de Cronbach varió de 0,79 a 0,98. El Kaiser- Meyer-Olkin 0,988 indicó que las correlaciones entre los ítems fueron significantes. En el criterio externo, correlaciones de Pearson entre puntajes de competencias de heteroevaluación y clasificación subjetiva del gestor fueron significantes (p<0,001), así como diferencias de las medias de esas competencias por grupo criterio. Adicionalmente, se evaluaron puntajes por características, verificándose medias estadísticamente distintas. Conclusión: por medio de los Procedimientos Estadísticos adoptados, con multimétodos y multiinformantes, se analizaron diferentes propiedades psicométricas, generando un sumario de evidencias, demostrando que la Escala es válida y confiable.

ABSTRACT Objective: to evaluate the validity of the Competence Scale of Actions of Nurses in Emergencies based on internal structure, internal consistency, and external criteria. Methods: methodological study to verify new evidence of validity of the Scale, with contents previously validated. The Scale has 81 measurable actions at five levels of competence and can be applied both for self- and/or hetero-evaluation. Results: one hundred and forty seven nursing assistants and 41 managers from the five regions of Brazil participated in the study. They were linked to mobile prehospital emergency service, fixed prehospital emergency service, or hospital emergencies. Dimensionality was evidenced by exploratory factorial analysis of the 81 items, pointing out seven factors that explained 66.5% of the total data variance. Cronbach’s alpha ranged from 0.79 to 0.98. The Kaiser-Meyer-Olkin 0.988 indicated that the correlations between the items were significant. In the external criterion, Pearson’s correlations between hetero-evaluation competence scores and the manager’s subjective classification were significant (p < 0.001), as well as differences in the means of these competencies by criterion group. In addition, scores by characteristics were evaluated to detect statistically different means. Conclusion: through the adopted Statistical Procedures, with multi-methods and multi-informants, different psychometric properties were analyzed. A summary of evidence was generated showing that the Scale is valid and reliable.

RESUMEN Objetivo: evaluar evidencias de validez de la Escala de Competencias de las Acciones del Enfermero en Emergencias con base en la estructura interna, en la consistencia interna y en el criterio externo. Métodos: estudio metodológico para verificación de nuevas evidencias de validez de la Escala, con contenidos previamente validados. La Escala con 81 acciones mensurables en cinco niveles de competencias puede ser realizada tanto para que el enfermero se autoevalúe como otros lo evalúen. Resultados: participaron 407 enfermeros asistenciales y 41 gestores de las cinco regiones de Brasil, actuantes en emergencias pre-hospitalaria móvil, fija o hospitalaria. La dimensionalidad fue evidenciada mediante análisis factorial exploratoria de los 81 ítems, apuntando siete factores que explicaron 66,5% de la variancia total de los datos. El alfa de Cronbach varió de 0,79 a 0,98. El Kaiser- Meyer-Olkin 0,988 indicó que las correlaciones entre los ítems fueron significantes. En el criterio externo, correlaciones de Pearson entre puntajes de competencias de heteroevaluación y clasificación subjetiva del gestor fueron significantes (p<0,001), así como diferencias de las medias de esas competencias por grupo criterio. Adicionalmente, se evaluaron puntajes por características, verificándose medias estadísticamente distintas. Conclusión: por medio de los Procedimientos Estadísticos adoptados, con multimétodos y multiinformantes, se analizaron diferentes propiedades psicométricas, generando un sumario de evidencias, demostrando que la Escala es válida y confiable.

RESUMO Objetivo: avaliar evidências de validade da Escala de Competências das Ações do Enfermeiro em Emergências com base na estrutura interna, na consistência interna e no critério externo. Métodos: estudo metodológico para verificação de novas evidências de validade da Escala, com conteúdos previamente validados. A Escala com 81 ações mensuráveis em cinco níveis de competências pode ser realizada tanto para o enfermeiro se autoavaliar como outros o avaliarem. Resultados: participaram 407 enfermeiros assistenciais e 41 gestores das cinco regiões do Brasil, atuantes em emergências pré-hospitalar móvel, fixa ou hospitalar. A dimensionalidade foi evidenciada mediante análise fatorial exploratória dos 81 itens, apontando sete fatores que explicaram 66,5% da variância total dos dados. O alfa de Cronbach variou de 0,79 a 0,98. O Kaiser- Meyer-Olkin 0,988 indicou que as correlações entre os itens foram significantes. No critério externo, correlações de Pearson entre escores de competências de heteroavaliação e classificação subjetiva do gestor foram significantes (p<0,001), bem como diferenças das médias dessas competências por grupo critério. Adicionalmente, avaliaram-se escores por características, verificando-se médias estatisticamente distintas. Conclusão: por meio dos Procedimentos Estatísticos adotados, com multimétodos e multi-informantes, analisaram-se diferentes propriedades psicométricas, gerando um sumário de evidências, demostrando que a Escala é válida e confiável.

Resumen La Facultad de Odontología de la Universidad Autónoma de Sinaloa (UAS) implementa un modelo educativo basado en competencias profesionales integradas, que conlleva una evaluación del desempeño fundamentada en criterios de calidad, realimentación, diversificación de actores y momentos, con instrumentos de evaluación afines. Se realizó una investigación de enfoque cuantitativo, diseño preexperimental tipo estudio de caso, de alcance descriptivo, a fin de probar la Rúbrica para evaluar presentaciones de casos clínicos como instrumento que oriente la calidad en el desempeño, desde la coevaluación y heteroevaluación; se realizaron comparaciones por turno y género. Como resultado, se obtuvieron mejores calificaciones al evaluar el desempeño en el turno matutino y género femenino (heteroevaluación) y en el turno vespertino y género femenino (coevaluación). La “Rúbrica para evaluar presentaciones de casos clínicos” es un instrumento válido para orientar la calidad en el desempeño de los estudiantes a través de la coevaluación y heteroevaluación.

Abstract The Faculty of Dentistry of the Autonomous University of Sinaloa (UAS, for its acronym in Spanish) implements an educational model based on integrated professional competencies, which involves a performance assessment based on criteria of quality, feedback, diversification of actors and moments, with related evaluation instruments. An investigation of quantitative approach, pre-experimental design, case study-like, of descriptive scope was carried out in order to test the Rubric to evaluate presentations of clinical cases as an instrument that guides quality in performance, from the co-evaluation and hetero-evaluation; comparisons were made per shift and gender. As a result, better grades were obtained when evaluating performance in the morning shift and in the female gender (hetero-evaluation), as well as in the evening shift and female gender (co-evaluation). The "Rubric to evaluate presentations of clinical cases" is a valid instrument to guide the quality in the performance of the students through the co-evaluation and hetero-evaluation.

RESUMEN Introducción: En la actualidad se han sucedido una serie de transformaciones importantes y significativas en el proceso de evaluación a docentes de enfermería en países de Latino América, del cual la República del Ecuador no ha estado exenta y donde el objetivo primordial es lograr la formación de profesionales de avanzada en esta área. Objetivo: Determinar los resultados de la estrategia evaluativa del desempeño docente en profesores de la carrera de enfermería. Métodos: Estudio descriptivo, transversal en 32 docentes de la carrera de enfermería de la Facultad de Ciencias Sociales y de la Salud de la Universidad Estatal de la Península de Santa Elena, Ecuador. Los instrumentos analizados para darle salida al objetivo del estudio fueron la autoevaluación, coevaluación y heteroevaluación de cada docente en el primer semestre de 2016. Resultados: El 71,87 % de los docentes de la carrera de enfermería fueron mujeres, los componentes más representados fueron investigación y docencia. Los componentes en los cuales sus docentes recibieron mejores puntuaciones fueron: dirección o gestión académica, vinculación con la comunidad e investigación. Conclusiones: Los resultados obtenidos con la aplicación de la estrategia evaluativa al desempeño docente fueron positivos, ya que predominaron los docentes con evaluaciones satisfactorias sobre todo en los componentes dirección o gestión académica, vinculación con la comunidad e investigación.

ABSTRACT Introduction: Currently, there have been a series of important and significant changes in the evaluation process for nursing teachers in Latin American countries, of which the Republic of Ecuador has not been exempt and where the primary objective is to train professionals in advanced in this area. Objective: Determine the results of the evaluation strategy of teaching performance in professors of the Nursing Degree. Methods: Descriptive, cross-sectional study in 32 teachers of the Nursing Career of the Faculty of Social and Health Sciences of the State University of the Santa Elena Peninsula, Ecuador. The instruments analyzed to give an exit to the objective of the study were the self-evaluation, peer evaluation and hetero-evaluation of each teacher in the first semester of 2016. Results: The 71.87 % of the teachers of the Nursing Career are women; the most represented components were research and teaching. The components in which their teachers received better scores were: academic management, connection with the community and research. Conclusions: The results obtained with the application of the evaluative strategy to the teaching performance were positive since the teachers predominated with satisfactory evaluations especially in the components direction or academic management, connection with the community and research.

ABSTRACT Objective: To create an instrument to assess the professional competence of nurses in emergencies. Method: Methodological study carried out between 2013 and 2016 in a Brazilian university. We used the Pasquali's model and Psychometrics as references because they allow subjective phenomena to be measured. The survey covered defining steps of the behavior to be measured, the formulation of the items in the instrument, development of instructions for using the instrument and elements necessary to demonstrate validity evidence. Although we have previously performed, in a distinct and consecutive way, the literature review, definition of the Core (or Matrix) Competence and the Competence Profile, and identification of validity with Delphi, essential components to structure a technology, in this step we continued the conclusion of these Theoretical Procedures. Result: We created an instrument for self- and/or hetero-evaluation containing: personal/professional/academic characterization, Competency Scale, fictitious cases and actions representing the practice. Conclusion: We created a new soft-hard technology based on the validity evidence of contents according to experts of the five regions of Brazil.

RESUMEN Objetivo: Crear Instrumento de Evaluación de la Competencia Profesional del Enfermero en Urgencias. Método: Estudio metodológico realizado entre 2013 y 2016 en universidad brasileña. Se utilizó el modelo de Pasquali y la Psicometría como referenciales, pues permiten que fenómenos subjetivos sean medidos. La investigación abarcó etapas de definición del comportamiento a ser medido, la formulación de los ítems de la herramienta, desarrollado de instrucciones para el uso del instrumento y de elementos necesarios para demostrar evidencias de validez. Aunque ya haya sido realizada previamente de manera distinta y consecutiva la revisión de la literatura, la definición de la Matriz y del Perfil de Competencias e identificación de validez con Delphi, los componentes esenciales para estructurar una tecnología, se dio continuidad a la finalización de esos Procedimientos Teóricos en esta etapa. Resultado: Instrumento creado para auto y/o heteroevaluación conteniendo: la caracterización personal/profesional/académica, la Escala de Competencias, los casos ficticios y las acciones representativas de la práctica. Conclusión: Se construyó una tecnología blanda-dura novedosa basada por las evidencias de validez del contenido consensuado por expertos de las cinco regiones de Brasil.

RESUMO Objetivo: Criar Instrumento de Avaliação da Competência Profissional do Enfermeiro em Emergências. Método: Estudo metodológico realizado entre 2013 e 2016 em universidade brasileira. Usou-se o modelo de Pasquali e a Psicometria como referenciais, permitindo que fenômenos subjetivos sejam medidos. A pesquisa abrangeu etapas de definição do comportamento a ser medido, formulação dos itens da ferramenta, desenvolvimento de instruções para uso do Instrumento e de elementos necessários para demonstrar evidências de validade. Embora realizadas previamente de forma distinta e consecutiva revisão da literatura, definição da Matriz e do Perfil de Competências e identificação de validade com Delphi, componentes essenciais para estruturar uma tecnologia, deu-se continuidade à finalização desses Procedimentos Teóricos nesta etapa. Resultado: Instrumento criado para auto e/ou heteroavaliação contendo: caracterização pessoal/profissional/acadêmica, Escala de Competências, casos fictícios e ações representativas da prática. Conclusão: Construiu-se tecnologia leve-dura inédita alicerçada pelas evidências de validade do conteúdo consensuado por experts das cinco regiões brasileiras.

RESUMO Objetivo: Criar Instrumento de Avaliação da Competência Profissional do Enfermeiro em Emergências. Método: Estudo metodológico realizado entre 2013 e 2016 em universidade brasileira. Usou-se o modelo de Pasquali e a Psicometria como referenciais, permitindo que fenômenos subjetivos sejam medidos. A pesquisa abrangeu etapas de definição do comportamento a ser medido, formulação dos itens da ferramenta, desenvolvimento de instruções para uso do Instrumento e de elementos necessários para demonstrar evidências de validade. Embora realizadas previamente de forma distinta e consecutiva revisão da literatura, definição da Matriz e do Perfil de Competências e identificação de validade com Delphi, componentes essenciais para estruturar uma tecnologia, deu-se continuidade à finalização desses Procedimentos Teóricos nesta etapa. Resultado: Instrumento criado para auto e/ou heteroavaliação contendo: caracterização pessoal/profissional/acadêmica, Escala de Competências, casos fictícios e ações representativas da prática. Conclusão: Construiu-se tecnologia leve-dura inédita alicerçada pelas evidências de validade do conteúdo consensuado por experts das cinco regiões brasileiras.

ABSTRACT Objective: To create an instrument to assess the professional competence of nurses in emergencies. Method: Methodological study carried out between 2013 and 2016 in a Brazilian university. We used the Pasquali's model and Psychometrics as references because they allow subjective phenomena to be measured. The survey covered defining steps of the behavior to be measured, the formulation of the items in the instrument, development of instructions for using the instrument and elements necessary to demonstrate validity evidence. Although we have previously performed, in a distinct and consecutive way, the literature review, definition of the Core (or Matrix) Competence and the Competence Profile, and identification of validity with Delphi, essential components to structure a technology, in this step we continued the conclusion of these Theoretical Procedures. Result: We created an instrument for self- and/or hetero-evaluation containing: personal/professional/academic characterization, Competency Scale, fictitious cases and actions representing the practice. Conclusion: We created a new soft-hard technology based on the validity evidence of contents according to experts of the five regions of Brazil.

RESUMEN Objetivo: Crear Instrumento de Evaluación de la Competencia Profesional del Enfermero en Urgencias. Método: Estudio metodológico realizado entre 2013 y 2016 en universidad brasileña. Se utilizó el modelo de Pasquali y la Psicometría como referenciales, pues permiten que fenómenos subjetivos sean medidos. La investigación abarcó etapas de definición del comportamiento a ser medido, la formulación de los ítems de la herramienta, desarrollado de instrucciones para el uso del instrumento y de elementos necesarios para demostrar evidencias de validez. Aunque ya haya sido realizada previamente de manera distinta y consecutiva la revisión de la literatura, la definición de la Matriz y del Perfil de Competencias e identificación de validez con Delphi, los componentes esenciales para estructurar una tecnología, se dio continuidad a la finalización de esos Procedimientos Teóricos en esta etapa. Resultado: Instrumento creado para auto y/o heteroevaluación conteniendo: la caracterización personal/profesional/académica, la Escala de Competencias, los casos ficticios y las acciones representativas de la práctica. Conclusión: Se construyó una tecnología blanda-dura novedosa basada por las evidencias de validez del contenido consensuado por expertos de las cinco regiones de Brasil.