Psychometric properties of the Valuing Questionnaire in a Spaniard sample and factorial equivalence with a Colombian sample

Referencia completa: Ruiz, F. J., Odriozola-González, P., Suárez-Falcón, J. C., & Segura-Vargas, M. A. (2022). Psychometric properties of the Valuing Questionnaire in a Spaniard sample and factorial equivalence with a Colombian sample. PeerJ, 10, e12670. https://doi.org/10.7717/peerj.12670

Tipo de estudio: Validación transcultural

---

RESUMEN EN ESPAÑOL

Contexto y Objetivos

Contexto teórico: El Cuestionario de Valoración (VQ) es un instrumento diseñado para medir la vivencia de valores en la vida cotidiana según el modelo de Terapia de Aceptación y Compromiso (ACT). Los valores, en la teoría del ACT, constituyen reforzadores positivos verbalmente construidos que proporcionan dirección y significado al comportamiento humano. El VQ se considera uno de los instrumentos psicométricamente más robustos para medir la vivencia de valores según el modelo de aceptación y compromiso.

La revisión sistemática realizada por Barrett, O'Connor & McHugh (2019) y Reilly et al. (2019) identificó el VQ como probablemente el instrumento con las propiedades psicométricas más sólidas. Sin embargo, hasta el momento de este estudio, no existían investigaciones sobre las propiedades psicométricas del VQ en muestras españolas, lo que impedía estudiar el proceso de valores desde la perspectiva del ACT en población hispanohablante.

Objetivos específicos:

1. Analizar la validez del VQ en una muestra grande de población española adulta (N = 846)
2. Analizar la invarianza de medida (equivalencia factorial) entre la muestra española y una muestra colombiana (N = 724) de características similares
3. Examinar la confiabilidad interna del instrumento en la población española
4. Evaluar la validez de constructo convergente y discriminante
5. Analizar diferencias en las puntuaciones del VQ entre países y sexos

Método

Participantes:

Muestra 1 (España): Consistió en 846 participantes adultos españoles (75.7% mujeres), con edad promedio de 35.40 años (DE = 11.39) y rango de edad entre 18 y 72 años. Respecto al nivel educativo: 0.1% sin estudios, 33% educación primaria o nivel medio, 65.6% licenciados o graduados universitarios (1.3% no indicó nivel educativo). Aproximadamente el 44.6% reportó haber recibido tratamiento psicológico o psiquiátrico en el pasado, solo el 12.8% estaba actualmente en tratamiento. El 12.9% reportó estar usando medicación psicotrópica. Los participantes fueron reclutados mediante muestreo de bola de nieve a través de redes sociales.

Muestra 2 (Colombia): Consistió en 724 participantes colombianos (74.4% mujeres), con edad promedio de 26.11 años (DE = 8.93) y rango de edad entre 18 y 88 años. Nivel educativo: 17.8% estudios primarios o nivel medio, 82.2% licenciados o graduados universitarios. El 45% reportó haber recibido tratamiento psicológico o psiquiátrico en algún momento, solo el 8.4% estaba actualmente en tratamiento. El 5.4% reportaba usar medicación psicotrópica.

Instrumento principal:

Cuestionario de Valoración (VQ): Instrumento de autorreporte de 10 ítems respondido en escala Likert de 7 puntos (6 = completamente verdadero; 0 = nada verdadero). Fue diseñado para evaluar la vivencia de valores en general durante la última semana, sin especificar dominios de vida particulares. El VQ original de Smout et al. (2014) mostró una estructura bifactorial: Progreso (enactment of values; 5 ítems que reflejan conciencia clara de lo personalmente significativo y persistencia) y Obstrucción (disruption of valued living; 5 ítems que reflejan la disrupción de la vivencia de valores debido a evitación de experiencias no deseadas y distracción de valores). La versión española fue traducida por Ruiz et al. (2021).

Otros instrumentos (validez convergente y discriminante):

1. Cuestionario de Aceptación y Acción-II (AAQ-II): Instrumento de 7 ítems en escala Likert de 7 puntos que mide evitación experiencial. La versión española mostró buen funcionamiento psicométrico (alfa = .91).

2. Cuestionario de Fusión Cognitiva (CFQ): Escala de 7 ítems, Likert de 7 puntos que evalúa fusión cognitiva general. La versión española mostró excelente consistencia interna (alfa = .93).

3. Escalas de Depresión, Ansiedad y Estrés-21 (DASS-21): Instrumento de 21 ítems en escala Likert de 4 puntos que evalúa síntomas emocionales negativos (depresión, ansiedad, estrés). En este estudio obtuvo alfas de .95 (escala total), .92 (depresión), .87 (ansiedad) y .86 (estrés).

4. Escala de Satisfacción con la Vida (SWLS): Instrumento de 5 ítems en escala Likert de 7 puntos que evalúa bienestar autopercibido. La versión española mostró alfa = .89 y validez convergente en muestra española anterior.

Procedimiento: Ambas muestras respondieron a una encuesta anónima en línea distribuida a través de redes sociales mediante procedimiento de muestreo de bola de nieve. Los investigadores compartieron la publicación para alcanzar más personas. Los participantes proporcionaron consentimiento informado aceptando las condiciones (solo criterio de exclusión: ser menor de 18 años). Se enfatizó el carácter anónimo de la participación y la posibilidad de detenerla en cualquier momento. El tiempo mediano de completación fue aproximadamente 15 minutos. La encuesta estuvo disponible para la Muestra 1 durante un año hasta que se alcanzaron al menos 200 participantes de ambos sexos.

Análisis estadísticos:

1. Análisis Factorial Confirmatorio (AFC): Se realizó CFA para probar el modelo bifactorial del VQ usando la Muestra 1 (muestra española). Se siguió el procedimiento utilizado en la validación previa en Colombia (Ruiz et al., 2021). Dada la investigación previa (Smout et al., 2014), se permitieron correlacionar términos de error entre ítems 5 y 7 para comparar el ajuste con el modelo sin correlaciones. Se utilizó LISREL (versión 8.71) con método de estimación de máxima verosimilitud robusto (MLR) porque los datos no cumplían el supuesto de normalidad multivariada (prueba Mardia de curtosis = 610.954; p < .001).

2. Índices de bondad de ajuste evaluados:

   • Índice de Ajuste Comparativo (CFI): valores > .90 aceptables, > .95 buenos
   • Índice de Ajuste Normalizado No Normado (NNFI): criterios similares a CFI
   • Error Cuadrático Medio de Aproximación (RMSEA): valores < .08 aceptables, < .05 buenos
   • Índice de Ajuste de Parsimonia Normalizado (PNFI): valores más altos indican mayor parsimonia
   • Raíz Cuadrática Media Residual Estandarizada (SRMR): valores < .08 aceptables, < .05 muy buenos
   • Prueba de Bondad de Ajuste Cercano (PCLOSE): prueba unilateral que RMSEA ≤ .03

3. Confiabilidad de constructo: Se calculó el Coeficiente de Confiabilidad Compuesta (CCC) considerando valores > .70 como confiabilidad de constructo adecuada e interna consistencia apropiada. Se calculó la Varianza Extraída Promedio (VEP) considerando valores ≥ .50 como indicadores de confiabilidad satisfactoria.

4. Validez convergente y discriminante: Se aplicaron criterios de Brown (2015) y Fornell & Larcker (1981): (a) cargas factoriales deben ser significativas (estimaciones estandarizadas ≥ .40), (b) CCC > .70, (c) VEP ≥ .50 para cada constructo. Para validez discriminante: (a) correlación interconstructo < .80 y (b) raíces cuadradas de VEP deben ser mayores que las correlaciones interconstructo con otros factores.

5. Invarianza de medida: Se analizó invarianza métrica, escalar y estricta entre países (España y Colombia) y sexos siguiendo procedimientos de Jöreskog (2005) y Millsap & Yun-Tein (2004). Se probaron modelos secuencialmente más restrictivos: modelo de línea base multgrupo, invarianza métrica (cargas factoriales iguales), invarianza escalar (cargas factoriales e interceptos iguales), invarianza estricta (cargas, interceptos y residuos iguales). Para comparación de modelos se utilizaron criterios de Cheung & Rensvold (2002) y Chen (2007): (a) diferencia RMSEA (ΔRMSEA) < .01, (b) diferencia NNFI (ΔNNFI) y CFI (ΔCFI) ≥ −.01.

6. Consistencia interna: Se utilizó el paquete MBESS en R (Kelley & Lai, 2012; Kelley & Pornprasertmanit, 2016) para calcular alfas de Cronbach y omegas de McDonald con intervalos de confianza al 95% mediante bootstrap. Valores > .70 considerados aceptables, > .80 buenos según Nunnally & Bernstein (1994).

7. Correlaciones con otras variables: Se calcularon correlaciones de Pearson entre el VQ y escalas restantes (AAQ-II, CFQ, DASS-21, SWLS) usando SPSS 25. Se interpretaron según directrices de Lenhard & Lenhard (2016): correlación pequeña .10–.20, mediana .21–.36, fuerte > .36.

8. Análisis descriptivos: Se exploraron diferencias en puntuaciones del VQ entre países y sexos mediante pruebas t de muestras independientes.

Resultados

Evidencia de validez basada en la estructura interna:

Dimensionalidad: El modelo bifactorial del VQ mostró buen ajuste a los datos en la Muestra 1 según los índices de ajuste: CFI = .98, NNFI = .97, SRMR = .053. El valor RMSEA = .073 indicó ajuste aceptable. Sin embargo, la prueba de bondad de ajuste cercano (PCLOSE) mostró que el valor RMSEA fue significativamente superior a .05 (p < .01). El modelo alternativo bifactorial con términos de error correlacionados en los ítems 5 y 7 no mejoró significativamente el ajuste. Por lo tanto, se seleccionó el modelo bifactorial estándar por su mayor parsimonia (PNFI = .74 vs .71).

Confiabilidad de constructo y validez convergente y discriminante: El VQ mostró alta confiabilidad de constructo con valores de CCC superiores a .70 en ambos factores: VQ-Progreso (CCC = .85) y VQ-Obstrucción (CCC = .84). Los valores de VEP fueron: VQ-Progreso = .54 y VQ-Obstrucción = .52, ambos superiores a .50. Respecto a la validez discriminante, la correlación interconstructo fue r = −.60 (en valor absoluto menor que .80), indicando adecuada validez discriminante. Las raíces cuadradas de VEP fueron mayores que las correlaciones interconstructo con otros factores: √VEP = .73 para VQ-Progreso y √VEP = .72 para VQ-Obstrucción.

Calidad psicométrica de los ítems: Todos los ítems del VQ en la Muestra 1 mostraron correlaciones corregidas ítem-total altas. Para VQ-Progreso, las correlaciones oscilaron entre .52 y .71; para VQ-Obstrucción, entre .51 y .70. El alfa de Cronbach fue .85 (intervalo de confianza al 95%: [.83–.86]) para VQ-Progreso y .84 (95% CI: [.82–.86]) para VQ-Obstrucción. Los valores omega de McDonald fueron prácticamente idénticos: VQ-Progreso = .85 (95% CI: [.83–.87]) y VQ-Obstrucción = .84 (95% CI: [.82–.86]).

Invarianza de medida: Se demostró invarianza de medida a niveles métrico, escalar y estricto entre países (España y Colombia) y sexos. Las diferencias en RMSEA, CFI y NNFI fueron inferiores a .01 en todos los modelos comparados, indicando que el instrumento mantiene equivalencia en su estructura y puntuaciones entre grupos.

Evidencia de validez basada en relaciones con otras variables:

El VQ mostró correlaciones en las direcciones esperadas y de magnitud coherente con los constructos evaluados.

VQ-Progreso:

• Correlación negativa con VQ-Obstrucción (r = −.51)
• Correlación negativa de magnitud mediana con evitación experiencial (AAQ-II: r = −.49)
• Correlación negativa de magnitud mediana con fusión cognitiva (CFQ: r = −.44)
• Correlación negativa de magnitud mediana con síntomas emocionales totales (DASS-21: r = −.36)
• Correlación negativa de magnitud pequeña a mediana con depresión (r = −.48), ansiedad (r = −.23) y estrés (r = −.24) específicamente
• Correlación positiva fuerte con satisfacción con la vida (SWLS: r = .64)

VQ-Obstrucción:

• Correlación positiva fuerte con evitación experiencial (AAQ-II: r = .66)
• Correlación positiva fuerte con fusión cognitiva (CFQ: r = .68)
• Correlación positiva fuerte con síntomas emocionales (DASS-21 total: r = .65)
• Correlación positiva fuerte con depresión (r = .66), ansiedad (r = .53) y estrés (r = .54) específicamente
• Correlación negativa fuerte con satisfacción con la vida (SWLS: r = −.53)

Puntuaciones del VQ entre países y sexos:

No se encontraron diferencias estadísticamente significativas en las puntuaciones del VQ entre España y Colombia:

• VQ-Progreso: España M = 19.08, DE = 6.08; Colombia M = 19.50, DE = 6.43; t(1568) = −1.35, p = .18
• VQ-Obstrucción: España M = 11.31, DE = 6.63; Colombia M = 11.70, DE = 6.88; t(1568) = −1.16, p = .25

Respecto al sexo en participantes españoles, no hubo diferencias significativas:

• VQ-Progreso: Hombres M = 18.72, DE = 6.13; Mujeres M = 19.14, DE = 6.08; t(811) = −0.80, p = .43
• VQ-Obstrucción: Hombres M = 11.14, DE = 6.60; Mujeres M = 11.39, DE = 6.69; t(811) = −0.43, p = .67

Discusión y Conclusiones

Síntesis de hallazgos: El VQ es uno de los instrumentos de medida más utilizados y psicométricamente robustos para evaluar la vivencia de valores según el modelo del ACT. Aunque existe una versión española del VQ (Ruiz et al., 2021), este fue el primer estudio que analizó sus propiedades psicométricas en muestras españolas amplias. Además, fue el primero en examinar equivalencia factorial del VQ entre culturas diferentes.

Los resultados demostraron que el VQ obtiene buenas propiedades psicométricas en la muestra española. Respecto a la consistencia interna, el VQ mostró alfabetos de Cronbach y omegas de McDonald apropiados para ambos factores (Progreso = .85; Obstrucción = .84), consistente con estudios previos de validación.

El modelo bifactorial del VQ obtuvo buen ajuste a los datos. La bondad de ajuste fue muy similar a la del modelo bifactorial con términos de error correlacionados en los ítems 5 y 7, que fue el modelo considerado más apropiado en el estudio original de validación (Smout et al., 2014). Como en Ruiz et al. (2021), se seleccionó el modelo bifactorial estándar por su mayor parsimonia. Adicionalmente, el modelo de medida mostró confiabilidad de constructo adecuada y validez convergente y discriminante.

El VQ también mostró invarianza de medida a niveles métrico, escalar y estricto entre países y sexos. La invarianza de medida es relevante porque permite comparar puntuaciones entre muestras española y colombiana con similares características. Este hallazgo respalda la utilidad de comparar la vivencia de valores entre países hispanohablantes.

Las correlaciones del VQ con otros instrumentos fueron teóricamente coherentes y equivalentes a las encontradas en otros estudios. VQ-Progreso correlacionó positivamente con satisfacción con la vida y negativamente con síntomas emocionales, evitación experiencial y fusión cognitiva. VQ-Obstrucción mostró el patrón opuesto de correlaciones, proporcionando apoyo adicional al papel adaptativo de la vivencia de valores según el modelo del ACT.

Similitud con estudios previos: La versión española del VQ mostró propiedades psicométricas similares en esta muestra española a las encontradas en el estudio previo con muestras colombianas (Ruiz et al., 2021). Por lo tanto, este estudio proporciona evidencia adicional sobre la robustez psicométrica del VQ. Hasta donde es de conocimiento de los autores, este es el primer análisis de equivalencia factorial del VQ entre diferentes culturas.

Limitaciones:

1. El VQ fue administrado únicamente a una muestra no clínica. Estudios futuros deberían analizar las propiedades psicométricas del VQ en participantes clínicos españoles y la invarianza de medida entre muestras clínicas y no clínicas, particularmente dado que Ruiz et al. (2021) encontró invarianza de medida estricta del VQ entre muestras clínicas y no clínicas colombianas.

2. El porcentaje de mujeres fue significativamente mayor que el de hombres en la muestra española. Sin embargo, esta limitación fue parcialmente reducida por los resultados obtenidos en los análisis de invarianza de medida entre sexos.

3. El VQ fue correlacionado únicamente con otros autorreportes, lo cual podría haber inflado las correlaciones encontradas. Los autorreportes pueden presentar sesgos de medida.

4. La edad promedio fue relativamente baja, posiblemente como consecuencia del uso más frecuente de internet y redes sociales en personas jóvenes en España. Estudios futuros deberían explorar las propiedades psicométricas del VQ en muestras de participantes de mayor edad.

5. No se evaluó la sensibilidad al cambio del VQ en muestras españolas. Estudios subsecuentes deberían analizar si el VQ demuestra sensibilidad al cambio en muestras españolas de acuerdo con investigación previa que utilizó la versión española del VQ en Colombia.

Implicaciones prácticas: A pesar de estas limitaciones, el estudio actual tiene implicaciones prácticas para investigadores y profesionales de la salud mental en España:

Primero, el instrumento VQ podría ser utilizado en investigaciones de valores en contextos de investigación básica y clínica, así como en estudios de survey que analicen el papel de los valores en la salud mental e intervenciones clínicas analizando la eficacia y procesos de cambio en intervenciones del ACT.

Segundo, el VQ puede ser adoptado en la evaluación rutinaria realizada por profesionales que practican ACT.

Tercero, el VQ puede ser utilizado por investigadores que busquen comparar la vivencia de valores entre sexos y entre España y Colombia.

Importancia y contribución

Este estudio contribuye significativamente a la investigación psicológica en contextos hispanohablantes demostrando que el Cuestionario de Valoración mantiene propiedades psicométricas robustas en muestras españolas, con validez de estructura interna confirmada, confiabilidad de constructo adecuada, y validez convergente y discriminante con constructos teóricamente relacionados. Además, el estudio proporciona evidencia de equivalencia factorial transcultural entre España y Colombia, permitiendo comparaciones válidas de la vivencia de valores entre estos contextos, y facilitando el uso del instrumento en investigación y práctica clínica en contextos hispanohablantes.

---