Abstract :This article is the result of an investigation on the relevance of typographic marking in verbal and mathematical reasoning items of the Academic Aptitude Test (PAA: Spanish acronyms) of the University of Costa Rica. The objective is to gather evidence on the influence of the marking (bold, underline and capital letters) on the instruction of the selected items and to observe if there are variations in the technical properties when these marks of emphasis are present or not. From an exploratory study, with a qualitative approach, information was collected from interviews with a group of first-time students entering the university for 2019. The analysis focused on the particles ''No'', ''False'', ''True'' ''Certainty'' and ''Contradicts'' and the reasons for maintaining their marking, according to the people interviewed, obeyed to three fundamental reasons: 1. It is a strategy for highlighting key words such as negations. 2. It clarifies the question or instruction of the item. 3. It allows attention to be maintained during reading. The main results show that there is no significant difference between maintaining and eliminating marking regardless of the type of item and population, so that its use should be dispensed with for a standardized test such as the PPA.

Resumo :Este artigo é o resultado de uma investigação sobre a relevância da marcação tipográfica nos itens de raciocínio verbal e matemático do Teste de Aptidão Acadêmica (PAA) da Universidade da Costa Rica. O objetivo é reunir evidências sobre a interferência da marcação (negrito, sublinhado e letras maiúsculas) na instrução dos itens selecionados e observar se há variações nas propriedades técnicas quando essas marcas de ênfase estão presentes ou não. A partir de um estudo do tipo exploratório, com abordagem qualitativa, foram coletadas in- formações de entrevistas com um grupo de alunos iniciantes na universidade para 2019. A análise se concentrou nas partículas ''Não'', ''Falso'', ''Verdadeiro'', ''Com certeza'' e ''Contradiz'' e as razões para manter sua marcação, de acordo com as pessoas entrevistadas, se devem a três motivos fundamentais: 1. 2. esclarece a pergunta ou a instrução do item. 3. permite que a atenção seja mantida durante a leitura. Os principais resultados mostram que não há diferença significativa entre manter e eliminar a marcação, independentemente do tipo de item e da população, de modo que seu uso deve ser dispensado em um teste padronizado como o PPA.

Resumen :El presente artículo es producto de una investigación sobre la relevancia de la marcación tipográfica en ítems de razonamiento en contexto verbal y matemático de la Prueba de Aptitud Académica (PAA) de la Universidad de Costa Rica. El objetivo consiste en recabar evidencia sobre la injerencia de la marcación (negrita, subrayado y mayúsculas) en la instrucción de los ítems seleccionados y observar si existen variaciones en las propiedades técnicas cuando presentan o no estas marcas de énfasis. Desde un estudio de tipo exploratorio, con un enfoque cualitativo, se recabó información a partir de entrevistas a un grupo de estudiantes de primer ingreso a la universidad para el 2019. El análisis se centró en las partículas ''No'', ''Falso'', ''Verdadero'' ''Con certeza'' y ''Contradice'' y las razones para mantener su marcación, según las personas entrevistadas, obedece a tres razones fundamentales: 1. Es una estrategia para resaltar palabras claves como las negaciones. 2. Clarifica la pregunta o instrucción del ítem. 3. Permite mantener la atención durante la lectura. Los principales resultados muestran que no hay una diferencia significativa entre mantener y eliminar la marcación independientemente del tipo de ítem y de la población, de tal modo que conviene prescindir de su uso para una prueba estandarizada como la PPA.

Resumen Este estudio analizó el contenido de veinte ítems de las prácticas de las pruebas de aptitud académica de la Universidad de Costa Rica y el Instituto Tecnológico de Costa Rica para determinar la presencia de tareas de analogías, problemas de inferencia, razonamiento lógico, vocabulario y comprensión lectora. El presente documento es producto de un proyecto de extensión sobre la temática aquí abordada, ejecutado desde el Instituto Tecnológico de Costa Rica. Los resultados mostraron que el razonamiento lógico y la comprensión lectora son las habilidades más relevantes en estas prácticas, mientras que los problemas de inferencia y el vocabulario tienen una presencia menor, por su parte, las analogías no aparecen en los ítems analizados. El acuerdo entre dos jueces fue evaluado mediante el coeficiente de kappa de Cohen. Se evidenció un acuerdo perfecto en la clasificación de las tareas de analogía y comprensión lectora, moderado para problemas tanto de inferencia como de razonamiento lógico, y justo para vocabulario. En la discusión, se propone que los hallazgos de este trabajo son útiles en la generación de estrategias y materiales para el desarrollo del razonamiento verbal en estudiantes de Educación Diversificada de centros educativos con bajo perfil económico-social.

Abstract This study analyzed the content of twenty items of the practices of the academic aptitude tests of the University of Costa Rica and the Costa Rican Institute of Technology to determine the presence of analogy tasks, inference problems, logical reasoning, vocabulary and reading comprehension. This document is the result of an extension project on the topic discussed herein, conducted at the Costa Rican Institute of Technology. The results revealed that logical reasoning and reading comprehension are the most relevant skills in these practices, while inference problems and vocabulary have a lower incidence, and analogies do not appear in the analyzed items. The agreement between the two judges was measured by Cohen’s kappa coefficient. A perfect agreement was demonstrated in the classification of analogy and reading comprehension tasks, moderate for inference and logical reasoning problems, and fair for vocabulary. It is proposed in the discussion that the findings of this work are useful in the formulation of strategies and materials for the development of verbal reasoning in students of Diversified Education in schools with a low social-economic profile.

Resumen El objetivo de esta investigación es generar evidencias sobre el dominio léxico en el contexto de relaciones semánticas de sinonimia, antonimia y temática. Basado en un estudio de enfoque mixto, se construyeron y validaron, mediante juicio de personas expertas, los ítems del instrumento. Posteriormente, este se aplicó a 3864 personas aspirantes que realizaron la Prueba de Aptitud Académica (PAA) para el ingreso a la Universidad de Costa Rica en el 2021 y cuyas edades comprenden de los 17 a los 21 años. Recabados los datos, se analizaron las cargas factoriales, la dificultad, la discriminación, la curva de información y los distractores de cada ítem. Los hallazgos de la investigación señalan que efectivamente el léxico se puede medir en tres categorías que representan relaciones amplias y comunes en el contexto de la lectura. La habilidad para identificar este tipo de relaciones incide en el desempeño de las personas evaluadas al resolver ítems de las categorías de parafrasear, oponer y reducir, propias de la PAA. La resolución de estos ítems depende en cierta medida del nivel léxico. Por lo tanto, es recomendable comprender el dominio léxico ligado a estas relaciones semánticas en sí, libres del contexto, para tener certeza de que no se afecta la medición de las habilidades generales de razonamiento o para encontrar los mecanismos que eviten factores causantes de varianza irrelevante al constructo.

Abstract This work aims to generate evidence of lexical mastery in the context of the semantic relationships of synonymy, antonymy, and theme. This multidisciplinary study analyzed an instrument composed of 21 items, presented to 3864 applicants that took the Academic Aptitude Test (Prueba de Aptitud Académica (PAA) in Spanish) for admission to the University of Costa Rica in 2021, and whose ages ranged from 17 to 21 years. The results show that lexical mastery can indeed be measured in three categories that represent broad and common relationships in reading. The ability to identify these types of relationships affects the applicants’ performance, especially when solving items in the categories of opposition, paraphrase and reduction (all typical to the PAA) that require a level of lexical proficiency. Therefore, it is important to understand the links between lexical mastery and the semantic relationships themselves, free of context, to ensure that the measurement of general reasoning abilities is not affected, or to find mechanisms that avoid factors causing irrelevant variances in the instrument.