Persona:
Martínez Huertas, José Ángel

Foto de perfil
Dirección de correo electrónico
ORCID
0000-0002-6700-6832
Fecha de nacimiento
Proyectos de investigación
Unidades organizativas
Puesto de trabajo
Apellidos
Martínez Huertas
Nombre de pila
José Ángel
Nombre

Filtros

2018 - 201932020 - 202414
Restablecer filtros

Ajustes

Autor: Olmos, Ricardo ×

Resultados de la búsqueda

Mostrando 1 - 10 de 17
  • Miniatura
    Publicación
    Automated summary evaluation with inbuilt rubric method: An alternative to constructed responses and multiple-choice tests assessments
    (Taylor and Francis Group, 2019-02-09) Jastrzebska, Olga; Olmos, Ricardo; León, José A.; Martínez Huertas, José Ángel
    Automated Summary Evaluation is proposed as an alternative to rubrics and multiple-choice tests in knowledge assessment. Inbuilt rubric is a recent Latent Semantic Analysis (LSA) method that implements rubrics in an artificially-generated semantic space. It was compared with classical LSA’s cosine-based methods assessing knowledge in a within-subjects design regarding two validation sources: a comparison with the results of rubric scores and multiple-choice tests, and the sensitivity of predicting the academic level of the test-taker. Results showed a higher reliability for inbuilt rubric (from Pearson correlation coefficient .81 to .49) over the classical LSA method (from .61 to .34) and a higher sensitivity using binary logistic regressions and effect sizes to predict academic level. It is concluded that inbuilt rubric has a qualitatively higher reliability and validity than classical LSA methods in a way that is complementary to models based on semantic networks. Thus, it is concluded that new Automated Summary Evaluation approaches such as the inbuilt rubric method can be practical in terms of reliability and efficiency, and, thus, they can offer an affordable and valuable form of knowledge assessment in different educational levels.
  • Miniatura
    Publicación
    El proceso del estrés y el afrontamiento en cuidadores informales de personas con diagnóstico del espectro de la esquizofrenia. Un estudio longitudinal
    (Fundación VECA para el Avance de la Psicología Clínica Conductual, 2023) Mora Castañeda, Belvy; Márquez González, María; Fernández Liria, Alberto; Cabrera, Isabel; Olmos, Ricardo; O'connell, Daniel; Martínez Huertas, José Ángel
    El objetivo de este estudio longitudinal fue analizar el papel del estrés y las estrategias de afrontamiento en la explicación de la carga y la depresión de familiares cuidadores de personas con diagnóstico del espectro de la esquizofrenia. Fueron evaluados 30 pacientes este diagnóstico y sus cuidadores informales (n=30). Los participantes fueron evaluados en tres momentos temporales: línea base, a los 5 meses y a los 10 meses. Se encontró una disminución de los niveles de carga subjetiva con el paso del tiempo. Asimismo, la carga subjetiva y la depresión del cuidador mostraron una mayor relación con aquellas variables del paciente relacionadas con la sintomatología negativa. A nivel longitudinal, la evitación y la resignación mostraron una notable relación con la carga subjetiva y la depresión. Los posibles cambios en la evaluación de las demandas que el trastorno plantea y en las estrategias de afrontamiento empleadas por los cuidadores sugieren el desarrollo de un proceso de adaptación al trastorno por parte del cuidador.
  • Miniatura
    Publicación
    Modeling personality language use with small semantic vector subspaces
    (Elsevier, 2024-12-14) Jorge Botana, Guillermo de; Olmos, Ricardo; Martínez Huertas, José Ángel; Moreno Salinas, David; Martínez Mingo, Alejandro
  • Miniatura
    Publicación
    Metacomprehension skills depend on the type of text: An analysis from Differential Item Functioning
    (Colegio Oficial de Psicólogos del Principado de Asturias, 2019) Antonio León, José Antonio; Olmos, Ricardo; Moreno, José David; Martínez Huertas, José Ángel; Escudero Domínguez, Inmaculada
    Las habilidades metacomprensivas dependen del tipo de texto: un análisis desde el Funcionamiento Diferencial de los Ítems. Antecedentes: la metacomprensión supone la habilidad que uno mismo posee para juzgar su grado de aprendizaje y comprensión de un texto, adquiriendo una gran importancia en la comprensión lectora. Dado que los procesos de comprensión se encuentran influenciados por las características de los textos, el objetivo de este estudio fue analizar si diferentes tipos de texto afectan de manera significativa a la habilidad metacomprensiva de estudiantes de distintos niveles de Educación Primaria. Método: un total de 823 estudiantes de 4º y 6º de Primaria (9 y 11 años) leyeron tres textos diferentes (narrativo, expositivo y discontinuo) tomados de la prueba estandarizada de comprensión lectora ECOMPLEC.Pri (León, Escudero, y Olmos, 2012). Los estudiantes fueron clasificados por su nivel de metacomprensión obtenido en la prueba. Un Análisis Diferencial del Ítem (DIF) se aplicó para analizar si los procesos de comprensión lectora y de metacomprensión difieren entre tipos de texto y niveles académicos de los participantes. Resultados: los resultados mostraron una notable divergencia en el rendimiento metacognitivo del texto narrativo frente a los textos expositivo y discontinuo. Estas diferencias estaban relacionadas con el nivel académico. Conclusión: el tipo de texto puede tener un gran impacto en las habilidades de metacomprensión y, consecuentemente, en el aprendizaje de textos
  • Miniatura
    Publicación
    The processes of stress and coping in informal caregivers of people diagnosed on the schizophrenia spectrum. A longitudinal study
    (Fundación VECA para el Avance de la Psicología Clínica Conductual, 2023) Mora Castañeda, Belvy; Márquez González, María; Fernández Liria, Alberto; Cabrera, Isabel; Olmos, Ricardo; O'connell, Daniel; Martínez Huertas, José Ángel
    El objetivo de este estudio longitudinal fue analizar el papel del estrés y las estrategias de afrontamiento en la explicación de la carga y la depresión de familiares cuidadores de personas con diagnóstico del espectro de la esquizofrenia. Fueron evaluados 30 pacientes este diagnóstico y sus cuidadores informales (n=30). Los participantes fueron evaluados en tres momentos temporales: línea base, a los 5 meses y a los 10 meses. Se encontró una disminución de los niveles de carga subjetiva con el paso del tiempo. Asimismo, la carga subjetiva y la depresión del cuidador mostraron una mayor relación con aquellas variables del paciente relacionadas con la sintomatología negativa. A nivel longitudinal, la evitación y la resignación mostraron una notable relación con la carga subjetiva y la depresión. Los posibles cambios en la evaluación de las demandas que el trastorno plantea y en las estrategias de afrontamiento empleadas por los cuidadores sugieren el desarrollo de un proceso de adaptación al trastorno por parte del cuidador.
  • Miniatura
    Publicación
    Análisis de dos métodos de evaluación automática de análisis semántico latente (LSA): un nuevo método LSA (Inbuilt Rubric) y un método LSA tradicional ( Golden Summary) en resúmenes extraídos de textos expositivos
    (Colegio Oficial de Psicólogos de Madrid, 2018) Jastrzebska, Olga; Mencu, Adrián; Moraleda, Jessica; Olmos, Ricardo; Antonio León, José Antonio; Martínez Huertas, José Ángel
    El objetivo de este estudio es comparar dos métodos de evaluación automática del análisis semántico latente (LSA): Un nuevo método LSA ( Inbuilt Rubric) y un método LSA tradicional ( Golden Summary). Se analizaron dos condiciones del método Inbuilt Rubric: el número de descriptores léxicos que se utilizan para generar la rúbrica (pocos vs. muchos) y una corrección que penaliza el contenido irrelevante incluido en los resúmenes de los estudiantes (corregido vs. no corregido). Ciento sesenta y seis estudiantes divididos en dos muestras (81 estudiantes universitarios y 85 estudiantes de instituto) participaron en este estudio. Los estudiantes resumieron dos textos expositivos que tenían distinta complejidad (difícil/fácil) y longitud (1,300/500 palabras). Los resultados mostraron que el método Inbuilt Rubric imita las evaluaciones humanas mejor que Golden Summary en todos los casos. La similitud con las evaluaciones humanas fue más alta con Inbuilt Rubric ( r = .78 and r = .79) que con Golden Summary ( r = .67 and r = .47) en ambos textos. Además, la versión de Inbuilt Rubric con menor número de descriptores y con corrección es la que obtuvo mejores resultados.
  • Miniatura
    Publicación
    Recovering Crossed Random Effects in Mixed-Effects Models Using Model Averaging
    (PsychOpen, 2022-12-22) Olmos, Ricardo; Martínez Huertas, José Ángel
    Random effects contain crucial information to understand the variability of the processes under study in mixed-effects models with crossed random effects (MEMs-CR). Given that model selection makes all-or-nothing decisions regarding to the inclusion of model parameters, we evaluated if model averaging could deal with model uncertainty to recover random effects of MEMs-CR. Specifically, we analyzed the bias and the root mean squared error (RMSE) of the estimations of the variances of random effects using model averaging with Akaike weights and Bayesian model averaging with BIC posterior probabilities, comparing them with two alternative analytical strategies as benchmarks: AIC and BIC model selection, and fitting a full random structure. A simulation study was conducted manipulating sample sizes for subjects and items, and the variance of random effects. Results showed that model averaging, especially Akaike weights, can adequately recover random variances, given a minimum sample size in the modeled clusters. Thus, we endorse using model averaging to deal with model uncertainty in MEMs-CR. An empirical illustration is provided to ease the usability of model averaging.
  • Miniatura
    Publicación
    Distilling vector space model scores for the assessment of constructed responses with bifactor Inbuilt Rubric method and latent variables
    (['Springer', 'Psychonomic Society'], 2022-01-11) Olmos, Ricardo; Jorge Botana, Guillermo de; León, José A.; Martínez Huertas, José Ángel
    In this paper, we highlight the importance of distilling the computational assessments of constructed responses to validate the indicators/proxies of constructs/trins using an empirical illustration in automated summary evaluation. We present the validation of the Inbuilt Rubric (IR) method that maps rubrics into vector spaces for concepts’ assessment. Specifically, we improved and validated its scores’ performance using latent variables, a common approach in psychometrics. We also validated a new hierarchical vector space, namely a bifactor IR. 205 Spanish undergraduate students produced 615 summaries of three different texts that were evaluated by human raters and different versions of the IR method using latent semantic analysis (LSA). The computational scores were validated using multiple linear regressions and different latent variable models like CFAs or SEMs. Convergent and discriminant validity was found for the IR scores using human rater scores as validity riteria. While this study was conducted in the Spanish language, the proposed scheme is language-independent and applicable to any language. We highlight four main conclusions: (1) Accurate performance can be observed in topic-detection tasks without hundreds/thousands of pre-scored samples required in supervised models. (2) Convergent/discriminant validity can be improved using measurement models for computational scores as they adjust for measurement errors. (3) Nouns embedded in fragments of instructional text can be an affordable alternative to use the IR method. (4) Hierarchical models, like the bifactor IR, can increase the validity of computational assessments evaluating general and specific knowledge in vector space models. R code is provided to apply the classic and bifactor IR method.
  • Miniatura
    Publicación
    Can personality traits be measured analyzing written language? A meta-analytic study on computational methods
    (Elsevier, 2021) Moreno, José David; Olmos, Ricardo; Jorge Botana, Guillermo de; Botella, Juan; Martínez Huertas, José Ángel
    In the last two decades, empirical evidence has shown that personality traits could be related to the characteristics of written language. This study describes a meta-analysis that synthesizes 23 independent estimates of the correlations between the Big Five major personality traits, and some computationally obtained indicators from written language. The results show significant combined estimates of the correlations, albeit small to moderate according to Cohen’s conventions to interpret effect sizes, for the five traits (between r = 0.26 for agreeableness and neuroticism, and 0.30 for openness). These estimates are moderated by the type of information in the texts, the use of prediction mechanisms, and the source of publication of the primary studies. Generally, the same effective moderators operate for the five traits. It is concluded that written language analyzed through computational methods could be used to extract relevant information of personality. But further research is still needed to consider it as predictive or explanatory tool for individual differences.
  • Miniatura
    Publicación
    Enhancing topic-detection in computerized assessments of constructed responses with distributional models of language
    (Elsevier, 2021-12-15) Olmos, Ricardo; León, José A.; Martínez Huertas, José Ángel
    Usually, computerized assessments of constructed responses use a predictive-centered approach instead of a validity-centered one. Here, we compared the convergent and discriminant validity of two computerized assessment methods designed to detect semantic topics in constructed responses: Inbuilt Rubric (IR) and Partial Contents Similarity (PCS). While both methods are distributional models of language and use the same Latent Semantic Analysis (LSA) prior knowledge, they produce different semantic representations. PCS evaluates constructed responses using non-meaningful semantic dimensions (this method is the standard LSA assessment of constructed responses), but IR endows original LSA semantic space coordinates with meaning. In the present study, 255 undergraduate and high school students were allocated one of three texts and were tasked to make a summary. A topic- detection task was conducted comparing IR and PCS methods. Evidence from convergent and discriminant validity was found in favor of the IR method for topic-detection in computerized constructed response assessments. In this line, the multicollinearity of PCS method was larger than the one of IR method, which means that the former is less capable of discriminating between related concepts or meanings. Moreover, the semantic representations of both methods were qualitatively different, that is, they evaluated different concepts or meanings. The implications of these automated assessment methods are also discussed. First, the meaningful coordinates of the Inbuilt Rubric method can accommodate expert rubrics for computerized assessments of constructed responses improving computer-assisted language learning. Second, they can provide high-quality computerized feedback accurately detecting topics in other educational constructed response assessments. Thus, it is concluded that: (1) IR method can represent different concepts and contents of a text, simultaneously mapping a considerable variability of contents in constructed responses; (2) IR method semantic representations have a qualitatively different meaning than the LSA ones and present a desirable multicollinearity that promotes the discriminant validity of the scores of distributional models of language; and (3) IR method can extend the performance and the applications of current LSA semantic representations by endowing the dimensions of the semantic space with semantic meanings.