Abstract The professions related to the care of users are those that manifest higher levels of stress historically, an element that increases when the attention is to more than one beneficiary at a time, one of these careers is teaching, because day by day teachers develop their work avoiding various social phenomena such as the different types of violence that are experienced inside the school, exclusion, varied family models, conflicts, lack of resources, inequality, to name a few. This outlines a scenario full of demands for the teacher which represents an emotional charge that promotes the suffering of stress. The purpose of this paper is to identify the stress coping mechanisms and socio-emotional competencies with which they are linked in a group of normal students, through a non-experimental cross-sectional-descriptive quantitative study, carried out in July 2020, with a sample of 226 students. To this end, two instruments were applied, one that measured the situations that arise in life and that are assessed as stressful, and as a second instrument, a socio-formative analytical rubric of socio-emotional competencies was applied, which includes inter- and intrapersonal competencies. Among the findings, students show a moderate level of stress, on socio-emotional competencies it was found that the areas of immediate attention are social awareness and empathy. Some of the conclusions are to emphasize the formation of socio-emotional competencies and their potentiation in the educational system, as well as the approach of not working separately.

Resumen Las profesiones relacionadas con el cuidado a usuarios son las que manifiestan mayores niveles de estrés históricamente, elemento que se incrementa cuando la atención es a más de un beneficiario a la vez, una de esas carreras es la docencia, debido a que día a día profesores desarrollan su labor sorteando diversos fenómenos sociales como los distintos tipos de violencia que se viven al interior de la escuela, exclusión, modelos familiares variados, conflictos, carencia de recursos, desigualdad, por nombrar algunos. De ahí que, exista un escenario profesional lleno de demandas para el docente que representa una carga emocional que promueve el padecimiento de estrés. El objetivo de la presente es establecer la relación entre el afrontamiento del estrés y el dominio de competencias socioemocionales con las que cuentan un grupo de estudiantes normalistas, mediante un estudio cuantitativo no experimental transversal-descriptivo, realizado en julio del 2020, con una muestra de 226 estudiantes. Para ello, se aplicaron dos instrumentos, uno que midió las situaciones que se presentan en la vida y que se valoran como estresantes y como segundo instrumento se aplicó una rúbrica analítica socioformativa de competencias socioemocionales que comprende competencias inter e intrapersonales. Dentro de los hallazgos los estudiantes muestran un nivel moderado de estrés, sobre las competencias socioemocionales se encontró que las áreas de atención inmediata son la conciencia social y la empatía. Algunas de las conclusiones son enfatizar la formación de competencias socioemocionales y su potencialización en el sistema educativo, así como el planteamiento de no trabajarse por separado.

Resumen La finalidad de este trabajo es el estudio de apps educativas para el público infantil, a partir de la creación de un modelo de análisis de contenido. Tras una amplia revisión de trabajos de carácter internacional que presentan modelos y rúbricas específicas para evaluar apps educativas para niños y niñas de la etapa de educación infantil, se crea un modelo que, de forma detallada y comprensiva, permite abordar las características pedagógicas, técnicas y de diseño de estos programas. A partir de este modelo, y siguiendo la metodología de análisis de contenido deductivo y cualitativo, se examinan diez apps populares en España, que son seleccionadas en una plataforma de analítica de apps mediante una serie de filtros. Los resultados muestran que las aplicaciones clasificadas como educativas no reúnen todas las condiciones necesarias para ser consideradas como tales, obedecen principalmente a juegos de ordenador o juegos serios de simulación y de ejercitación y práctica, orientados a un aprendizaje más memorístico que significativo. Se puede afirmar que, a pesar de tener un supuesto propósito educativo, cumplen más una función de entretenimiento, además de cebo para la obtención de datos, publicidad y venta de productos.

Resumo O objetivo deste estudo é a análise de aplicações educacionais para crianças a partir da criação de um modelo de análise de conteúdo. Após uma extensa revisão de trabalhos em nível internacional que apresentam modelos e rubricas específicas para a análise de aplicações educacionais para meninos e meninas da educação infantil, é criado um modelo que, de forma detalhada e abrangente, permite analisar as características pedagógicas, técnicas e desenho desses programas. Com base neste modelo, seguindo a metodologia de análise de conteúdo dedutiva e qualitativa, dez aplicações populares na Espanha são examinados, os quais são selecionados em uma plataforma de análise de aplicativos através da aplicação de uma série de filtros. Os resultados deste estudo mostram que as aplicações classificadas como "educacionais" não reúnem todas as condições necessárias para serem consideradas como tal, sendo principalmente jogos sérios de simulação e exercício e prática orientados para a aprendizagem mais mecanizada do que significativa. Pode-se dizer que, apesar de terem uma pretensa finalidade educacional, cumprem mais uma função de entretenimento, sendo também isca para obtenção de dados, publicidade e venda de produtos.

Abstract The purpose of this study is the analysis of educational apps for children based on the design of a content analysis model. After an extensive review of international studies that propose specific models and rubrics for assessing educational apps for pre-schoolers, a model is designed in order to give a detailed and comprehensive analysis of the pedagogical and technical characteristics of these programs. Based on this model, following a qualitative and deductive content analysis methodology, ten popular apps in Spain, selected from an app analytics platform by applying a series of filters, are examined. The results of this study show that the applications classified as "educational" do not meet all the necessary conditions to be considered as such, being mainly educational computer games or serious games of simulation and drill and practice activities oriented more to rote learning than to meaningful learning. It can be said that, although they have an "assumed" educational purpose, they are more directed to entertainment, also working as bait for obtaining data, advertising and selling products.

Resumen Los instrumentos que el profesorado de idiomas emplea para evaluar el aprendizaje son raramente estudiados, y ellos constituyen una fuente significativa de input sobre la forma como se concibe el aprendizaje y la Enseñanza. El propósito de la investigación es analizar 205 instrumentos de evaluación proporcionados por profesores de inglés. Este es un estudio de casos exploratorio, en el cual los principios de evaluación del idioma analizados fueron Autenticidad, Validez, Equidad, Confiabilidad y Practicabilidad. Estos 205 instrumentos de evaluación fueron analizados mediante el uso de una rúbrica analítica, la cual consideró los principios de evaluación del idioma como criterios. Mediante los diferentes análisis presentados en este estudio, es posible concluir que la evaluación tradicional es preferida sobre la evaluación auténtica; además, cuatro diferentes grupos revelan que los principios de evaluación del idioma se manifiestan en diferentes grados en cada tipo de instrumento de evaluación. Interesantemente, aunque el aprendizaje de la lengua consiste principalmente en cómo las personas se comunican con otros, el profesorado aún enfatiza la evaluación de la gramática y el vocabulario en vez de ayudar al estudiantado a desarrollar la habilidad de comunicación en una lengua extranjera mediante técnicas y procedimientos de evaluación auténtica, auto-evaluación y co-evaluación. estudiados Enseñanza 20 inglés exploratorio Autenticidad Validez Equidad Practicabilidad analítica criterios auténtica además Interesantemente otros autoevaluación auto coevaluación. coevaluación co co-evaluación 2

Abstract The instruments language teachers employ to assess student learning are rarely studied and they constitute a significant source of input of how learning and teaching are conceived. The aim of this research is to analyze 205 assessment instruments created by English teachers. This is an exploratory case study, in which the assessment principles of Authenticity, Validity, Fairness, Reliability and Practicality were analyzed within the context of the assessment instruments. The 205 assessment instruments were analyzed by using an analytic rubric, which considered the language assessment principles as criteria. Through the different analyses, it is possible to conclude that traditional assessment was favoured over authentic assessment and four different clusters reveal that language assessment principles manifest in different degrees in each type of instrument. Interestingly, although language learning is mainly about how people try to communicate with others, teachers are still stressing the assessment of grammar and vocabulary knowledge instead of helping students develop the skill of foreign language communication through key authentic assessment, self-assessment and peer-assessment techniques and procedures. conceived 20 study Authenticity Validity Fairness rubric criteria analyses instrument Interestingly others selfassessment self peerassessment peer procedures 2

Resumo Os instrumentos que os professores de línguas utilizam para avaliar a aprendizagem dos alunos raramente são estudados e são uma fonte significativa de informações sobre como a aprendizagem e o ensino são concebidos. O objetivo da pesquisa é analisar 205 instrumentos de avaliação fornecidos por professores de inglês. Este é um estudo de caso exploratório, onde os princípios de avaliação da linguagem analisados foram Autenticidade, Validade, Equidade, Confiabilidade e Praticidade. Estes 205 instrumentos de avaliação foram analisados através da utilização de uma rubrica analítica, que considerou os princípios da avaliação linguística como critérios. Por meio das diferentes análises foi possível concluir que a avaliação tradicional é favorecida sobre a avaliação autêntica e quatro agrupamentos diferentes revelam que os princípios de avaliação da linguagem manifestam-se em diferentes graus em cada tipo de instrumento. Curiosamente, embora a aprendizagem de línguas seja principalmente sobre como as pessoas tentam se comunicar com outras, os professores ainda estão enfatizando a avaliação do conhecimento de gramática e vocabulário em vez de ajudar os alunos a desenvolver a habilidade de comunicação em língua estrangeira por meio de técnicas e procedimentos autênticos de avaliação, autoavaliação e coavaliação. concebidos 20 inglês exploratório Autenticidade Validade Equidade Praticidade analítica critérios manifestamse manifestam instrumento Curiosamente outras coavaliação 2

Resumen El contexto educativo determina, de forma tradicional, una práctica administrativa de los procesos de planeación y evaluación; en este sentido, existe una falta de instrumentos para evaluar el diseño de secuencias didácticas con el reto de otorgar saberes que enfrenten problemas de contexto y hacer una intervención docente con bases metodológicas para la resolución de problemas. El propósito de este estudio es describir el diseño de una rúbrica de secuencias didácticas para mejora de la práctica pedagógica. La metodología se realizó mediante un estudio instrumental de validez de contenido con base en el enfoque socioformativo con los siguientes pasos: 1) análisis de instrumentos afines; 2) construcción de una rúbrica con el enfoque de la socioformación; 3) revisión y mejora del instrumento por parte de equipos expertos; 4) aplicación del instrumento a un grupo piloto; y 5) validación de contenido por un grupo de jueces en el área educativa. Los resultados respecto a la V de Aiken con una significación de p<0,05, demuestran un valor arriba de 8.0. Se eliminaron algunos ítems cuyo nivel de significación fue de 0.71. El análisis de confiabilidad, muestra un valor de alfa de Cronbach de 0.891, las metodologías de coeficiente Aiken y Cronbach aplicadas determinaron la validez de contenido de la rúbrica. En conclusión, se presenta un instrumento pertinente para evaluar el diseño de secuencias didácticas, y se plantea la necesidad de ampliar este estudio con un análisis factorial exploratorio que determine su validez de constructo.

Resumo O contexto educacional tradicionalmente determina uma prática administrativa de processos de planejamento e avaliação. Neste sentido, faltam instrumentos para avaliar o desenho de sequências didáticas com o desafio de conceder conhecimentos que confrontem problemas contextuais, e fazer uma intervenção de ensino com bases metodológicas para resolver problemas. O objetivo deste estudo é descrever o desenho de uma rubrica de sequência didática para o aprimoramento da prática pedagógica. A metodologia foi realizada através de um estudo instrumental de validade de conteúdo baseado na abordagem socio formativa com os seguintes passos: 1) análise de instrumentos em fins; 2) construção de uma rubrica com foco de socio formação; 3) revisão e aprimoramento do instrumento por especialistas; 4) aplicação do instrumento a um grupo piloto; e 5) validação de conteúdo por um grupo de juízes na área educacional. Os resultados em relação ao V de Aiken com um significado de p <0,05, mostram um valor acima de 8,0. Alguns itens cujo nível de significância foi de 0,71 foram eliminados. A análise de confiabilidade mostra um valor de alfa de Cronbach de 0,891, as metodologias aplicadas pelos coeficientes de Aiken e Cronbach determinam a validade de conteúdo da rubrica. Em conclusão, apresenta-se um instrumento pertinente para avaliar o desenho de sequências didáticas, e é apresentada a necessidade de estender este estudo com uma análise fatorial exploratória que determine sua validade de conteúdo.

Abstract The educational context traditionally determines an administrative practice of planning and evaluation processes. In this sense, there is a lack of instruments to evaluate the design of didactic sequences with the challenge of transferring knowledge that tackles contextual problems and make a teaching intervention with methodological bases for solving problems. This study aims to describe the design of a didactic sequence rubric to improve pedagogical practice. The methodology was implemented using an instrumental study of content validity based on the socioformation approach with the following steps: 1) analysis of similar instruments; 2) construction of a rubric with the socioformation approach; 3) revision and improvement of the instrument by experts; 4) application of the instrument to a pilot group; and 5) validation of content by a group of judges in the educational area. The results of the Aiken’s V with the significance of p <0.05 show a value above 8.0. Some items whose level of significance was 0.71 were eliminated. The reliability analysis shows a value of Cronbach’s alpha of 0.891; the Aiken and Cronbach coefficient methodologies applied determined the rubric’s content validity. In conclusion, a pertinent instrument to evaluate the design of didactic sequences is presented, and the need to extend this study with an exploratory factor analysis that determines its construct validity is set out.

Objetivo: avaliar o desempenho referido sobre julgamento clínico por estudantes de graduação em enfermagem. Método: estudo transversal, com a aplicação da Lasater Clinical Judgment Rubric-Brazilian Version em 166 estudantes da graduação em enfermagem de uma universidade pública do Brasil. Os dados foram analisados de forma descritiva e analítica (comparando o nível de julgamento clínico entre estudantes dos grupos iniciante, intermediário e concluinte). Aplicaram-se os testes: Qui-quadrado, Exato de Fisher e Kruskal-Wallis, e adotou-se p-valor 0,05. A confiabilidade do instrumento global (alpha de Cronbach) foi de 0,786. Resultados: dos 166 estudantes, 65,7% se avaliaram como proficientes em relação ao desempenho referido sobre julgamento clínico. Das 11 dimensões da rubrica (observação focada, reconhecimento de desvios dos padrões esperados, busca por informações, priorização dos dados, compreensão dos dados, atuação calma e confiante, comunicação clara, intervenção bem planejada/flexibilidade, habilidade técnica, avaliação/autoanálise e comprometimento com o aperfeiçoamento), apenas quatro não apresentaram diferenças significativas entre os grupos (p<0,05): observação focada, busca por informações, priorização dos dados, atuação calma e confiante. Conclusão: O desempenho referido sobre julgamento clínico como proficiente foi apontado por 65,7% estudantes e foi verificada diferença estatística significante, em sete dimensões, entre os iniciantes, intermediários e concluintes, compatível com a evolução da aprendizagem.

Objective: to evaluate the reported performance regarding clinical judgment by undergraduate Nursing students. Method: a cross-sectional study with the application of the Lasater Clinical Judgment Rubric-Brazilian Version in 166 undergraduate Nursing students from a Brazilian public university. The data were analyzed descriptively and analytically (by comparing the level of clinical judgment among students from the initial, intermediate, and concluding groups). The following tests were applied: Chi-square, Fisher’s Exact and Kruskal-Wallis, and a p-value of 0.05 was adopted. The reliability of the global instrument (Cronbach’s alpha) was 0.786. Results: of the 166 students, 65.7% evaluated themselves as proficient in relation to the reported performance on clinical judgment. Of the rubric’s 11 dimensions (focused observation, recognizing deviations from expected patterns, information seeking, prioritizing data, making sense of data, calm and confident manner, clear communication, well-planned intervention/flexibility, being skillful, evaluation/self-analysis, and commitment to improvement), only four groups did not present significant differences among them (p<0.05): focused observation, information seeking, prioritizing data, and calm and confident manner. Conclusion: the performance on clinical judgment reported as proficient was pointed out by 65.7% of the students and a significant statistical difference was verified in seven dimensions, among beginners, intermediate, and concluding students, compatible with the evolution of learning.

Objetivo: evaluar la capacidad referida de juicio clínico de estudiantes de licenciatura en enfermería. Método: estudio transversal con aplicación de la Lasater Clinical Judgment Rubric-Brazilian Version en 166 estudiantes de licenciatura en enfermería de una universidad pública de Brasil. Los datos se analizaron de forma descriptiva y analítica (comparando el nivel de juicio clínico entre los estudiantes de los grupos principiante, intermedio y avanzado). Se aplicaron las pruebas: Chi-cuadrado, Exacta de Fisher y Kruskal-Wallis, y se adoptó un p-valor de 0,05. La confiabilidad del instrumento global (alfa de Cronbach) fue de 0,786. Resultados: de los 166 estudiantes, el 65,7% se evaluó como competente en relación con la capacidad referida de juicio clínico. De las 11 dimensiones de la rúbrica (observación enfocada, reconocimiento de desviaciones de los estándares esperados, búsqueda de información, priorización de datos, comprensión de datos, desempeño tranquilo y seguro, comunicación clara, intervención bien planificada/flexibilidad, habilidad técnica, evaluación/autoanálisis y compromiso con la mejora), solo cuatro no mostraron diferencias significativas entre grupos (p<0,05): observación enfocada, búsqueda de información, priorización de datos, desempeño tranquilo y seguro. Conclusión: el 65,7% de los estudiantes consideró que poseía juicio clínico competente y hubo una diferencia estadísticamente significativa, en siete dimensiones, entre principiantes, intermedios y avanzados, compatible con la evolución del aprendizaje.

Resumen La formación en competencias comunicativas del futuro personal docente se ha convertido en una necesidad en el Espacio Europeo de Educación Superior (EEES). En este sentido, es fundamental conocer la competencia escritora de las personas docentes en formación y, concretamente, sus habilidades para elaborar un texto. Por ello, el objetivo de este artículo de investigación fue la validación de una rúbrica analítica para evaluar textos expositivos escritos por estudiantado universitario. El instrumento ha considerado siete dimensiones generales que se valoran, a partir de una escala de estimación, que va de excelente a deficiente, pasando por bueno y aceptable. Mediante una metodología mixta (cualitativa-cuantitativa), se procedió a la validación del instrumento, en el que inicialmente 12 personas juzgaron, de manera independiente, validaron su contenido y después se realizó su validación estadística con el software StatisticalPackageforthe Social Sciences (SPSS). Se obtuvo la unanimidad de juicio del equipo evaluador, así como una elevada consistencia interna en el instrumento. Por tanto, la rúbrica goza de una adecuada validez de constructo, constatada por la valoración experta, y una alta fiabilidad, lo que justifica su utilidad para analizar y valorar textos expositivos en futuro estudiantado universitario y docentes en formación.

Resumo Resumo: A capacitação em competências comunicativas de futuros docentes se transformou em uma necessidade no Espaço Europeu de Educação Superior (EEES). Nesse sentido, é fundamental conhecer a competência escrita dos docentes em formação e, de fato, suas habilidades para elaborar textos. Por isso, o objetivo deste artigo de pesquisa foi a validação de uma rubrica analítica para avaliar textos expositivos escritos por estudantes universitários. O instrumento utilizado considerou sete dimensões gerais que são avaliadas em uma escala de estimativa que varia de excelente a ruim, passando por bom e aceitável. Com o uso de uma metodologia mista (qualitativa e quantitativa), se procedeu a validação do instrumento, no qual inicialmente 12 pessoas fizeram o julgamento de forma independente, validaram seu conteúdo e depois foi realizada a validação estatística com o software Statistical Package for the Social Sciences (SPSS). Obteve-se a unanimidade no julgamento entre os avaliadores, assim como uma elevada consistência interna no instrumento. Portanto, a proposta possui uma validade adequada de construto, constatada pela avaliação dos juízes e uma alta confiabilidade, o que justifica sua utilização para analisar e avaliar textos expositivos de estudantes universitários e professores em formação.

Abstract Teaching communicative competences to future teachers has become a need for the European Higher Education Area (EHEA). In this regard, it is essential to know the writing competence of the teachers in training and, specifically, their skills when it comes to writing a text. For that reason, this research article aimed to validate an analytical rubric to evaluate expository texts written by university students. The tool has taken into consideration seven general dimensions assessed according to an estimation scale, ranging from excellent to deficient, including good and acceptable. The validation of the tool was carried out using a mixed methodology (quantitative-qualitative), in which initially 12 independent judges validated its content, and then a statistical validation with the statistical package software (SPSS) was conducted. The results were the obtention of the unanimity of judgment among judges and high internal consistency in the tool. Therefore, the rubric has the suitable construct validity, validated by the judges’ assessment, and high reliability, which justifies its usefulness in analyzing and assessing expository texts to be written by future university students and teachers in training.

Abstract In this paper, the results of an instrumental study are presented that deals with the analysis of construct validity and reliability of the instrument: managerial approach in management for results in the knowledge society, with the objective to obtain an optimum quality so that provide valid and reliable evidence. The construction of the instrument was based on the four fundamental axes of the management cycle and what was expressed in the first principle of the Marrakech Declaration. To meet the objective, the instrument was applied to 505 executives of the public administration. The construct validity analysis was performed using the exploratory factor analysis (EFA) technique, verifying the pertinence of the data for this technique and analyzing the reliability of the instrument using Cronbach's Alpha. The results of the EFA reveal that the items are represented in the factorial model, manifesting only one factor, which corresponds to the proposed theoretical model. Regarding the reliability analysis, an optimal value was obtained (Cronbach's Alpha: 0.868). Given these results, it is concluded that the instrument and the elements that integrate it accurately represent and measure the construct that is intended to be evaluated.

Resumen En el presente trabajo se exponen los resultados de un estudio instrumental que aborda el análisis de la validez de constructo y confiabilidad del instrumento: enfoque directivo en la gestión para resultados en la sociedad del conocimiento, con el objeto de que obtenga una calidad óptima para que brinde evidencias válidas y confiables. La construcción del instrumento se basó en los cuatro ejes fundamentales del ciclo de gestión y en lo expresado en el primer principio de la Declaración de Marrakech. Para cumplir con el objetivo, el instrumento fue aplicado a 505 directivos de la administración pública. El análisis de validez de constructo se realizó con la técnica del análisis factorial exploratorio (AFE), verificándose la pertinencia de los datos para esta técnica y se analizó la confiabilidad del instrumento mediante el Alfa de Cronbach. Los resultados del AFE revelan que los ítems están representados en el modelo factorial, manifestándose un solo factor, lo cual corresponde con el modelo teórico propuesto. En cuanto al análisis de confiabilidad, se obtuvo un valor óptimo (Alfa de Cronbach: 0.868). Ante estos resultados, se concluye que el instrumento y los elementos que lo integran representan y miden con precisión el constructo que se pretende evaluar.

Abstract: The teaching and evaluation of writing are essential activities in any area, especially in Medicine, which is a highly specialized discipline. However, professors, who have received training in medicine but not in didactics or writing assessment, often lack adequate tools to evaluate the linguistic- discursive aspects of the texts produced by their students. Our aim is to propose a contextualized evaluation instrument for assessing the linguistic-discursive quality of disciplinary texts produced by students of Medicine degrees. For this, a qualitative study through a case study design were developed in order to generate an analytical rubric for guiding teaching and assessment of writing in medical training. The elaboration process of the instrument included the revision of different inputs from a Medical degree program, which allowed us to identify the linguistic-discursive properties that these specialized texts should have and the corresponding aspects that should be evaluated by the disciplinary teachers. The instrument was made up of 17 dimensions, grouped into four macro dimensions: communicative situation, communication of specialized knowledge in Medicine, global and sentence structure, and normative. After several validation procedures, the final version of the instrument obtained a considerable agreement for content validity (K=0.6) and an almost perfect agreement for intercoder reliability (K=0.9). In conclusion, this instrument will allow obtaining more precise information regarding the level of acquisition of the writing competence along the training of doctors as well as defining intervention strategies according to the needs of the disciplinary community.

Resumen: La enseñanza y evaluación de la escritura son actividades esenciales en cualquier área, máxime en Medicina, que es una disciplina altamente especializada. Sin embargo, los docentes, con formación médica, pero no en didáctica ni evaluación de la escritura, muchas veces carecen de herramientas adecuadas para evaluar los aspectos lingüístico-discursivos de los textos que producen sus estudiantes. El objetivo es proponer un instrumento de evaluación contextualizado que permita valorar la calidad lingüístico-discursiva de textos disciplinares producidos por estudiantes de Medicina. Para ello, se desarrolla un estudio cualitativo mediante un estudio de caso, a fin de generar una rúbrica analítica que permita orientar la enseñanza y evaluación de la escritura en la formación en Medicina. El proceso de creación del instrumento incluyó la revisión de distintos insumos de la carrera mencionada, lo que permitió realizar un levantamiento de las propiedades lingüístico-discursivas que debiesen poseer los textos especializados en cuestión y los aspectos que tendrían que ser evaluados por los docentes disciplinares en dichos textos. El instrumento quedó constituido por 17 dimensiones, agrupadas en cuatro macrodimensiones: situación comunicativa, comunicación del conocimiento especializado en Medicina, estructura global y oracional, normativa. Tras diversos procedimientos de validación, la versión final del instrumento obtuvo un acuerdo considerable para la validez de contenido (K=0,6) y uno casi perfecto para la confiabilidad intercodificador (K=0,9). En conclusión, este instrumento permitirá obtener información más precisa respecto del nivel de adquisición de la competencia escritural en la formación de médicos; y, además, definir estrategias de intervención adecuadas a las necesidades de la comunidad disciplinar.

ABSTRACT Introduction: Having evaluation tools for health promotion actions that integrate their principles allows us to identify achievements and areas of opportunity to improve dental health practices. Objective: To design a valid and reliable instrument to evaluate oral health promotion activities. Material and Methods: A socioformative rubric was built on the basis of the five principles of health promotion. An instrumental study was carried out for the validation of the instrument based on experts judgment and the application to a pilot group of 30 dentists. Results: The expert judgment determined the validity of content for the 22 items that make up the instrument (V. Aiken >0.80, ICI >0.70). The instrument was applied to a pilot group of 30 participants. The results showed that the instrument has a favorable reliability (Cronbach's alpha: 0.875, 95% CI: 0.801 + 0.931). Conclusions: The rubric obtained is a relevant instrument, valid in content and with acceptable reliability.

RESUMEN Introducción: Contar con instrumentos de evaluación para las acciones de promoción de salud que integren sus principios permite identificar los logros y las áreas de oportunidad para mejorar las prácticas estomatológicas en salud. Objetivo: Diseñar un instrumento para evaluar actividades de promoción de la salud bucal. Material y Métodos: Se construyó una rúbrica socioformativa con base en los cinco principios de promoción de salud, se llevó a cabo un estudio instrumental para la validación del instrumento con base en el juicio de expertos y la aplicación a un grupo piloto de 30 odontólogos. Resultados: Mediante el juicio de expertos se determinó la validez de contenido para los 22 ítems que conforman el instrumento (V de Aiken>0.80; ICI>0.70). El instrumento fue aplicado a un grupo piloto de 30 participantes, los resultados demostraron que el instrumento tiene una confiabilidad favorable (Alfa de Cronbach: 0.875; 95 % IC: 0.801 + 0.931). Conclusiones: La rúbrica obtenida es un instrumento pertinente, valido en contenido y con confiabilidad aceptable.

ABSTRACT: This research aims to evaluate a role play implemented in a group of students of Basic Education Pedagogy, who had to play a prominent character in Chilean history. It is a qualitative exploratory research based on a case study and a transectional design. Participant observation of the classes where the experience was carried out was used, so the instruments consigned for data collection were the field notebook designed by the students, the researcher's diary, the attendance sheet and the analytical rubric prepared to evaluate the activity. The results obtained show an improvement in student learning; however, several difficulties were also noted in the proposal, such as the poor familiarization of future teachers with the strategy and the great workload it implied for teachers and students.

RESUMEN: La presente investigación tiene como objetivo evaluar un juego de roles implementado en un grupo de estudiantes de Pedagogía en Educación Básica, quienes tuvieron que interpretar a un personaje destacado de la historia chilena. Es una investigación exploratoria de corte cualitativo basada en un estudio de casos y en un diseño transeccional. Se utilizó la observación participante de las clases donde se realizó la experiencia, por lo que los instrumentos consignados para la recogida de datos fueron el cuaderno de campo diseñado por los estudiantes, el diario del investigador, la planilla de asistencia y la rúbrica analítica elaborada para evaluar la actividad. Los resultados obtenidos muestran una mejora en el aprendizaje del alumnado; no obstante, también se constataron varias dificultades en la propuesta, tales como la escasa familiarización de los futuros docentes con la estrategia y la gran carga de trabajo que implicó para el docente y el estudiantado.

Resumen Esta investigación pretende evaluar la efectividad de las aplicaciones de grabación de vídeo en teléfonos inteligentes para aumentar la fluidez oral de los estudiantes de inglés como lengua extranjera (ILE). El estudio se llevó a cabo en un grupo de 31 alumnos de 7º grado de entre 12 y 13 años de edad, matriculados en una escuela subvencionada en Chile. Se utilizó el método de muestreo de conveniencia para seleccionar a los estudiantes participantes y se analizó la forma de comunicación de los participantes a través de varias sesiones de habla inglesa en las que utilizaron las aplicaciones de grabación de vídeo de sus teléfonos inteligentes. La recopilación de datos se llevó a cabo a través de las tareas de conversación previas y posteriores, asignadas para esta investigación-acción. Los datos recolectados fueron examinados usando una rúbrica analítica específica y una entrevista de grupo focal. El análisis de los datos se realizó mediante dos técnicas: un análisis porcentual simple y un examen temático. Los hallazgos revelaron un aumento en la fluidez del habla de los estudiantes participantes, específicamente con respecto al criterio de “ritmo” establecido en la rúbrica analítica utilizada para evaluar la mejora en el rendimiento oral de los estudiantes, tal y como se evidencia en las grabaciones de vídeo. Además, los resultados de la entrevista de grupo focal llevada a cabo con los estudiantes pusieron de manifiesto la respuesta positiva de los participantes al uso de aplicaciones de grabación de vídeo en teléfonos inteligentes para mejorar su fluidez en la comunicación en inglés.

Abstract This investigation intended to assess the effectiveness of smartphone video recording applications in increasing the speaking fluency of students of English as a foreign language (EFL). The study was conducted on a group of thirty-one 7th grade students aged between 12 and 13 years and enrolled in a subsidised school in Chile. The convenience sampling method was employed to select the participating students and the participants’ manner of communication was analysed through several English speaking sessions in which they used their smartphone video recording applications. Data collection was undertaken through pre- and post-speaking tasks used in this action research. The collected data were examined using a specific analytic rubric and a focus group interview. Data analysis was accomplished via two techniques: a simple percentage analysis and a thematic examination. The findings revealed an increase in the speaking fluency of the participating students, specifically with regard to the ‘pace’ criterion identified in the analytic rubric used to assess improvement in the speaking performance of students as evidenced by video recordings. Also, the results of the focus group interview conducted with the students evidenced the participants’ positive response to the use of smartphone recording video applications in ameliorating their English communication fluency.

Resumen: Hoy en día el idioma inglés es una herramienta de comunicación fundamental. En el sistema educacional chileno las oportunidades para desarrollar esta habilidad en el aula son pocas debido a la escasa cantidad de horas de clase de esta asignatura. La producción oral es un desafío para los alumnos pues requiere de conocimientos idiomáticos y de la superación del miedo y la vergüenza al comunicarse. La presente investigación-acción da cuenta de los resultados obtenidos al implementar una secuencia didáctica sustentada en la técnica dramática del role play con el fin de promover la fluidez y la precisión oral en inglés en 34 alumnos de 4.o de primaria de un establecimiento semipúblico. Ambos criterios fueron medidos con una rúbrica analítica de desempeño oral tanto al inicio como al final de la intervención. Para verificar si la mejora en las puntuaciones entre ambas rúbricas fue significativa se aplicó el Test de Wilcoxon. Asimismo se utilizó una entrevista semiestructurada de percepción acerca de la intervención a los estudiantes. Los resultados mostraron que tanto la fluidez como la precisión oral incrementaron significativamente su puntuación al final de la intervención. Asimismo la seguridad al hablar en inglés, el gusto por la asignatura y la autopercepción de la competencia oral aumentaron después de la implementación.

Abstract: Nowadays, the English language is a tool of paramount importance for communication. In the Chilean educational system, the opportunities to develop oral skills are scarce due to the reduced amount of time allocated to English as a subject. Oral production is a challenge since it requires idiomatic knowledge, and most importantly, it requires overcoming fear and embarrassment when speaking. This action research provides an account of the results gathered by implementing a pedagogical proposal based on the drama technique of role play. The objective was to promote fluency and accuracy in 34 fourth-grade students from a subsidized school. Both criteria were measured by an analytic rubric for oral performance both at the beginning and at the end of the implementation of the role play practice. The Wilcoxon test was used in order to verify whether or not the improvement in the scores was statistically significant. Furthermore, a semi-structured interview with questionnaire on perceptions about the pedagogical proposal was answered by the students who participated in the project. The results showed that, by the end of the implementation, students' scores in fluency and accuracy had increased significantly. Also, students' confidence when speaking, their liking of English subject and the self-perception of their oral competence had improved after such implementation.

Abstract: In this work, an intervention was designed to contribute to the training of scientists, through redesigning the assessment of an authentic performance task. An analytic rubric to assess a laboratory report written as a scientific paper for a biochemistry course was created and validated. The agreement between referees was 70%. The analysis allowed improving the instrument and identifying weaknesses in the students’ performance. Students’ perception of this experience was obtained, who declared that they used the rubric, agreeing in regard of its quality, objectivity and pertinence. However, there was no agreement with respect of its usefulness for guiding and providing feedback. Also, no effect was found on the course grades, showing that it is necessary to strengthen the design. As a result, a proposal was generated including: involving students in the definition of the quality standards, guiding the data analysis, including peer assessment and feedback. This experience illustrates the need of continuously updating and improving the teaching practices in order to achieve the learning outcomes.

Resumen : En este trabajo se diseñó una intervención para contribuir a la formación de científicos, a través de rediseñar la evaluación de una tarea de desempeño auténtica. Para ello, se creó y validó una rúbrica analítica para evaluar un informe de laboratorio en formato publicación científica en la asignatura bioquímica. Se obtuvo un consenso entre evaluadores de 70%. El análisis permitió mejorar el instrumento e identificar debilidades en el desempeño de los estudiantes. Se obtuvo la percepción de los estudiantes de la experiencia, quienes declararon utilizar la rúbrica, apreciándose acuerdo respecto a su calidad, objetividad y pertinencia. Sin embargo, no hubo acuerdo respecto de la utilidad para guiar y retroalimentar, ni hubo efecto en el rendimiento, evidenciando que se requiere robustecer el diseño. En consecuencia, se generó una propuesta que incorpora: involucrar a los estudiantes en la definición de estándares de calidad, guiar el análisis de datos, incluir coevaluación y retroalimentación.

Abstract Background: Nowadays, there are few differences between civilian and military trauma, requiring to surgeons serving at urban hospitals, the acquisition of competences leading to implementation of management strategies for these cases. For their training, instructional designs related to surgical education, incorporating multimedia resources and favoring the multichannel teaching-learning process, have demonstrated remarkable benefits on competences acquisition by participants. Method: Using an instructional design sustained on problems based learning and problems resolution, a digital video and its associated flat text were reviewed by the General Surgery residents, with the further application of a wide-answer problem-resolution questionnaire. Questionnaire's results were evaluated by an information-management analytic rubric, leading to obtain evidence related to competences acquisition. Results: In this series, 17 general surgery residents were included. Using the didactic strategy of the instructional design, 76.5% (n = 13) of participants acquired the expected level-5 generic instrumental methodologic competence, consisting in a relevant making-decisions process for problems resolution. Discussion: Incorporation of multimedia resources into instructional designs leads a significant multichannel learning and generic instrumental-methodologic competences, so that their preferential use is recommended.

Resumen Introducción: Hoy en día hay pocas diferencias entre los traumatismos civiles y militares, demandando al cirujano que labora en hospitales urbanos la adquisición de competencias para implementar estrategias de manejo de los casos. Para capacitarlos, los diseños instruccionales de educación quirúrgica que incorporan recursos multimedia y favorecen el proceso multicanal de enseñanza-aprendizaje han demostrado marcados beneficios en la adquisición de competencias por los participantes. Método: Con un diseño instruccional sustentado en el aprendizaje basado en problemas y en la solución de problemas, médicos residentes de cirugía general revisaron un video digital y un texto plano asociado, aplicando posteriormente un cuestionario de resolución de problemas con respuesta amplia. Los resultados del cuestionario se evaluaron con una rúbrica analítica de manejo de información, a fin de obtener evidencia de la adquisición de competencias. Resultados: Se incluyeron 17 residentes de cirugía general. Con la estrategia didáctica del diseño instruccional, el 76.5% (n = 13) de los participantes adquirieron la competencia genérica instrumental metodológica de nivel 5 esperada, consistente en la toma pertinente de decisiones para la resolución de problemas. Discusión: La incorporación de recursos multimedia a los diseños instruccionales promueve significativamente el aprendizaje multicanal y la adquisición de competencias genéricas instrumentales metodológicas; por lo anterior, se recomienda su uso preferencial.

Abstract: Performance assessments are criticized for the assumed lack of consistency in the results delivered by evaluators. However, statistical tools such as the Many-Facet Rasch Measurement (MFRM) are useful for examining the quality of the assessment process in tests with multiple facets of variability. The objective of this article is to present the functioning and contributions of MFRM on performance assessments. The study was carried out with non-Spanish-speaking university students who completed a written test of Spanish with academic ends. The results showed adequate levels of severity and indulgence among the evaluators, as well as in task difficulty and the analytical rubric employed to evaluate the texts. The conclusion is that MFRM is useful for examining the process of evaluating performance assessments.

Resumen: Las pruebas de desempeño son criticadas por la supuesta falta de consistencia en los resultados que otorgan los evaluadores. Sin embargo, herramientas estadísticas como Many-Facet Rasch Measurement (MFRM) son útiles para examinar la calidad del proceso de evaluación en pruebas con múltiples facetas de variabilidad. El objetivo de este artículo es dar a conocer el funcionamiento y aportaciones de MFRM en pruebas de desempeño. El estudio se realizó con estudiantes universitarios no hispanohablantes que sustentaron una prueba escrita de Español con fines académicos. Los resultados mostraron niveles de severidad e indulgencia adecuados por parte de los evaluadores, y de dificultad en las tareas y en la rúbrica analítica empleada para evaluar los textos. Del estudio se concluye la utilidad de MFRM para examinar el proceso de corrección de pruebas de desempeño.