Questionnaire Design for Scale Development in Social Sciences: Use of Exploratory (SPSS) and Confirmatory (EQS) Factor Analysis

Abstract

La investigación es una actividad permanente del ciclo: análisis, prueba de campo y síntesis que requiere de una gran agudeza por parte de quien lo practica, para discernir de las fuentes de información y recursos que empleará en la misma. Aún más, obtener reconocimiento y credibilidad en los resultados de investigación científica depende de qué estrategia esclarece y justifica mejor, la técnica de medición empleada. Así, es posible plantear diversas estrategias que permiten desarrollar y afinar las mediciones, sin embargo, su verdadero impacto dependerá del tipo de fenómeno científico que esté siendo medido, tanto con variables observables directamente como de sus relaciones subyacentes. De ésta manera y basados en el enfoque y alcances que su investigación tenga respecto al amplio rango de las disciplinas que comprenden las ciencias sociales, deberán de centrar su interés en el planteamiento, diseño, desarrollo y validación de constructos tanto de relaciones directas como subyacentes, que permitan explicar teóricamente, la realidad. Particularmente, éste último tipo de relaciones implica constructos que al representar abstracciones sólo pueden evaluarse de manera indirecta. La evaluación indirecta implica el diseño y uso de múltiples elementos (en nuestro caso, indicadores) que miden al constructo, es decir, plantean la escala para medir. Por lo tanto, partiendo de un problema de investigación determinado y caracterizados las factores, variables e indicadores que mejor la describan en forma de constructos, el objetivo principal de este documento es el de plantear y diseñar las relaciones de dichos factores, variables e indicadores para discutir cómo medirlos y validarlos a través de la creación de escalas. Para lograr lo anterior, se proporciona al lector: ANTECEDENTES. INVESTIGACIÓN y FUENTES DE INFORMACIÓN. con breves antecedentes de los que consta una idea de investigación, sus enfoques y alcances, el planteamiento del problema, los objetivos a alcanzar, y cómo conformar el marco teórico. Se ofrecen recomendaciones para hacer una mejor captura de la información. Se hace especial énfasis en la descripción de las fuentes de información, cómo tratarlas según el tipo de investigación a realizar y se exponen diversas características y condiciones de instrumentos tales como: el diseño de páneles, las entrevistas, los cuestionarios, etc. CAPÍTULO 1. LA IMPORTANCIA DE REALIZAR MEDICIONES EN RELACIÓN A LAS CIENCIAS SOCIALES el cual, justifica y enfatiza la importancia de la teoría del desarrollo de escalas a partir de explicar conceptos clave y básicos, como lo son la: dimensionalidad, confiabilidad y validez. Se destaca, la importancia del enfoque de cuatro etapas (el constructo; el contenido; el análisis factorial exploratorio y el análisis factorial confirmatorio) en el desarrollo de una escala que involucra a estos tres conceptos. CAPÍTULO 2. DIMENSIONALIDAD. Donde se esclarece cómo ésta etapa permite definir el alcance del constructo y el modelo final, con el fin de entender dos técnicas base en toda investigación de las ciencias sociales: el análisis factorial exploratorio y el análisis factorial confirmatorio. CAPÍTULO 3. CONFIABILIDAD. En este apartado, se explica la importancia del concepto y los diferentes tipos de confiabilidad existentes, la implicación de lo que es la consistencia interna, la fiabilidad y varianza compuestas en el diseño de la escala. CAPÍTULO 4. VALIDEZ. Es aquí donde se expone el impacto que tiene la validez del instrumento a diseñar, los diferentes tipos enfatizando la impirtancia de la validez discriminante y nomológica para el análisis factorial confirmatorio. CAPÍTULO 5. DEFINIENDO EL CONSTRUCTO Y SU CONTENIDO. Aquí, se inicia con el enfoque de cuatro etapas, haciendo recomendaciones profusas sobre la importancia de diseñar un marco teórico amplio y suficiente que soporte el diseño de la escala a través de la creación de indicadores. CAPÍTULO 6. DISEÑANDO LA ESCALA. ANÁLISIS FACTORIAL EXPLORATORIO (Etapa 3). Ésta técnica permite hacer las primeras reducciones de las variables y sus indicadores en el constructo y modelo final. Para su mayor comprensión, se explica a través de problemas basados en el uso del software estadístico SPSS. CAPÍTULO 7. FINALIZANDO LA ESCALA. ANÁLISIS FACTORIAL CONFIRMATORIO Y ECUACION ESTRUCTURAL. Es la última etapa de diseño y da cuenta del uso de software de análisis estructural EQS 6.2. El objetivo es hacer una demostración clara y concisa de cómo ingresar e interpretar los resultados que ésta herramienta aporta con el fin de confirmar el modelo e identificar relaciones subyacentes que el marco teórico no contempló. Por último, cabe destacar, que el diseño de una escala basado en constructos que definen finalmente un modelo, son el cimiento de la investigación científica, los cuales, son de carácter más que nada iterativo, en vez de lineal. Esto quiere decir, que en lugar de seguir pasos y actividades lineales o consecutivas, como todo proceso lógico y secuencial, el proceso sugerido de desarrollo de la escala tiende fuertemente a ser un procedimiento iterativo y continuo en el que se reinician todos los procedimientos de creación de escalas. Esto es así debido a que los investigadores conscientes, aprenden de sus esfuerzos y errores en el campo de las ciencias sociales, por lo que se hacen necesarias las revisiones, incluyendo las que sean de etapas tempranas como la definición de factores, variables e indicadores a nivel conceptual, así como la definición de la dimensionalidad, confiabilidad y validez del constructo, nuevamente planteado.Research is a permanent activity in the cycle of analysis, field testing, and synthesis. It requires keen discernment from the researcher to evaluate the sources of information and resources utilized. Moreover, gaining recognition and credibility in scientific research results depends on the strategy that best clarifies and justifies the measurement technique used. Various strategies can be proposed to develop and refine measurements; however, their true impact depends on the type of scientific phenomenon being measured, both with directly observable variables and their underlying relationships. Thus, based on the focus and scope of your research concerning the broad range of disciplines within social sciences, you should center your interest on the formulation, design, development, and validation of constructs, both of direct and underlying relationships, to theoretically explain reality. Particularly, this latter type of relationships involves constructs that, representing abstractions, can only be evaluated indirectly. Indirect evaluation implies the design and use of multiple elements (in our case, indicators) that measure the construct, i.e., form the measurement scale. Therefore, starting from a specific research problem and characterizing the factors, variables, and indicators that best describe it in the form of constructs, the main objective of this document is to propose and design the relationships of these factors, variables, and indicators to discuss how to measure and validate them through the creation of scales. To achieve this, the reader is provided with: BACKGROUND. RESEARCH AND SOURCES OF INFORMATION. This section offers brief backgrounds on the research idea, its approaches and scopes, problem statement, objectives, and how to build the theoretical framework. Recommendations are given for better data capture. There is a special emphasis on describing the sources of information, how to handle them according to the type of research, and various characteristics and conditions of instruments such as panel designs, interviews, questionnaires, etc. CHAPTER 1. THE IMPORTANCE OF MEASUREMENTS IN RELATION TO SOCIAL SCIENCES This chapter justifies and emphasizes the importance of scale development theory by explaining key and basic concepts such as dimensionality, reliability, and validity. The importance of the four-stage approach (construct; content; exploratory factor analysis and confirmatory factor analysis) in developing a scale that involves these three concepts is highlighted. CHAPTER 2. DIMENSIONALITY. This chapter clarifies how this stage defines the scope of the construct and the final model, to understand two basic techniques in all social science research: exploratory factor analysis and confirmatory factor analysis. CHAPTER 3. RELIABILITY. This section explains the importance of the concept and the different types of reliability, the implication of internal consistency, reliability, and composite variance in scale design. CHAPTER 4. VALIDITY. Here, the impact of the validity of the instrument to be designed is discussed, highlighting different types, with an emphasis on the importance of discriminant and nomological validity for confirmatory factor analysis. CHAPTER 5. DEFINING THE CONSTRUCT AND ITS CONTENT. This section begins with the four-stage approach, providing extensive recommendations on the importance of designing a broad and sufficient theoretical framework that supports scale design through the creation of indicators. CHAPTER 6. DESIGNING THE SCALE. EXPLORATORY FACTOR ANALYSIS (Stage 3). This technique allows the first reductions of variables and their indicators in the construct and final model. It is explained through problems based on the use of the statistical software SPSS for better understanding. CHAPTER 7. FINALIZING THE SCALE. CONFIRMATORY FACTOR ANALYSIS AND STRUCTURAL EQUATION MODELING. This is the last design stage and accounts for the use of structural analysis software EQS 6.2. The objective is to provide a clear and concise demonstration of how to input and interpret the results provided by this tool to confirm the model and identify underlying relationships that the theoretical framework did not consider. Finally, it should be noted that scale design based on constructs that ultimately define a model is the foundation of scientific research. These processes are more iterative than linear. This means that, rather than following linear or consecutive steps and activities as in any logical and sequential process, the suggested scale development process tends to be iterative and continuous, with all scale creation procedures being restarted. This is because conscientious researchers learn from their efforts and mistakes in the field of social sciences, making it necessary to revise, including early stages like defining factors, variables, and indicators at the conceptual level, as well as redefining the dimensionality, reliability, and validity of the construc