Cea DAncona, Ma. . (2004). Mtodos de encuesta. Madrid: Ed. Sntesis. Pp.

191-307

Captulo 4. El diseo del cuestionario

Mnica Elizabeth Cueva Castellanos El presente captulo trata del cuestionario, de su influencia en los distintos errores de medicin y de cmo stos pueden reducirse con una mejora en su diseo, de la traduccin de los conceptos tericos clave en preguntas concretas en un cuestionario. 4.1. De los conceptos tericos a los indicadores empricos El error de especificacin Errores de especificacin(antes de la redaccin del cuestionario) qu conceptos son clave en la medicin del problema de investigacin y cmo van a operacionalizarse. Estos errores se dan cuando el concepto implicado en la pregunta del cuestionario y aquel que debera medirse en la encuesta difieren. Los conceptos pueden definirse como smbolos lingsticos que categorizan a los fenmenos (Phillips, 1985:77). Se caracterizan por presentar constructos abstractos, no directamente observables (como la amistad, discriminacin o xenofobia). Para Kaplan el concepto es una familia de ideas. Son constructos. El concepto de compasin, por ejemplo es un constructo creado a partir de la idea de compasin que comparten quienes han utilizado dicho trmino. No se puede observar ni directa ni indirectamente porque no existe. Nosotros lo construimos. (Kerlinger,Hox) distinguen el concepto del constructo como abstracciones tericas. El concepto es una abstraccin formada por la generalizacin de fenmenos similares. En cambio el constructo es un concepto sistemticamente definido ms formal, para su uso en la teora cientfica. (pp.192) Operacionalizacin- diferente a conceptualizacin. Operacionalizacin proceso de traduccin de constructos tericos a variables observables. La conceptualizacin implica la formacin de conceptos que establece el significado de un constructo, elaborando la red nomolgica y definiendo importantes subdominios de su significado (Hox). (pp.193). Para Lundberg la definicin operacional es el constructo, no un proceso para observar un constructo despus de que se ha definido. Paul.F. Lazarsfeld propone el procedimiento a seguir para pasar de la conceptualizacin a la operacionalizacin de los conceptos tericos. Cuatro fases esenciales: 1.- Representacin terica del concepto, de forma que queden reflejados sus rasgos definitorios.

2.- Especificacin del concepto, descomponindolo en las distintas dimensiones o aspectos relevantes que engloba. 3.- Para cada una de las dimensiones se selecciona una serie de indicadores (o variables empricas), que indiquenla extensin que alcanza la dimensin en los casos analizados. 4.- Sntesis de los indicadores mediante el clculo de ndices. A cada indicador se le asigna un peso o valor de acuerdo con su importancia. A partir de estos valores se confecciona un ndice. Es decir, una medida comn que agrupe a varios indicadores de una misma dimensin operacionalizada numricamente. Fiske (1971): Procedimiento anlogo al de Lazarsfeld representacin terica del concepto, insiste en que el ncleo terico es la esencia del concepto. Ha de cubrir todos los fenmenos a los que se refiere. Exige: establecer lo que el concepto incluye y excluye. Describir su polo opuesto por ejemplo: satisfaccin/insatisfaccin. Parecido a los de Lazarsfeld Fiske menciona que se puede partir de constructos ms generales a subconstructos (subdimensiones de Lazarsfeld). Hox( 1997): a)La definicin constitutiva del constructo ha de ser: adecuada, contener suficientes caractersticas que permitan una delineacin satisfactoria de los lmites empricos y referentes del constructo: la definicin denotativa. Parsimonia, no incluir ninguna caracterstica innecesaria. Sartori (1984) propone recoger caractersticas de definiciones connotativas existentes (de un diccionario, de investigaciones previas). A partir de ellas, abstraer un ncleo comn. Distingue dos formas en las que se puede definir un constructo: Las asociaciones que tienen en mente sus usuarios o la lista de caractersticas incluidas en el constructo: definicin constitutiva. La denotacin semntica del constructo, por ejemplo, listando la serie de objetos a los que se refiere: definicin operacional.

Hox (1997) ha de evitarse la ambigedad: determinar los referentes empricos que pertenecen al constructo y cules no. Asegurarse de que la etiqueta verbal dada al constructo sea comprendida inequvocamente. Hox propone el test de la sustitucin. Si en una definicin constitutiva una palabra puede ser sustituida por otra palabra con una ganancia en claridad o precisin, entonces la primera palabra est siendo mal usada. Hox con lo anterior busca evitar tres problemas que pueden darse en un constructo terico: a) Problemas de connotacin. Confusin de significados porque el constructo est asociado a ms de un significado, o porque dos constructos apuntan el mismo significado

b) Problemas de denotacin. Constructos vagos. No queda claro a qu objetos o referentes se aplica. c) Problemas terminolgicos. Haber elegido, para el constructo, una etiqueta que induce a caractersticas o referentes errneos. A la conceptualizacin puede llegarse desde la teora, mediante un proceso deductivo ( de la teora a los datos, de lo general a lo concreto) a travs del cual se extraen los constructos y se seleccionan las variables observables. La teora puede concebirse como un grupo de proposiciones lgicamente interconectadas, de las que pueden deducirse uniformidades empricas (Merton, 1983:56). A la conceptualizacin puede llegarse desde los datos empricos. De las observaciones (datos de encuesta), mediante la operacin metodolgica de la induccinEn este proceder destaca la contribucin de las tcnicas analticas multivariables factoriales y similares que indagan en las interrelaciones entre una serie de variables, de las incluidas en el cuestionario, varan conjuntamente. Las variables correlacionadas o que comparten variabilidad, quedan agrupadas formando una misma dimensin latente (factor o componente principal). La condicin que se impone es que el nmero de dimensiones sea inferior al de indicadores o variables empricas. En caso contrario, el anlisis no sera pertinente porque las variables no tienen un nexo comn. Las dimensiones aparecen ordenadas conforme a su relevancia en la medicin del concepto especfico de que se trate. Dentro de cada dimensin se grada la aportacin de cada indicador, de manera que aquellos que presenten un coeficiente factorial ms elevado son los que ms contribuyen a la configuracin de la dimensin latente. En funcin de qu variables lo integren , se asigna una etiqueta a cada dimensin. sta proporcionar un nombre comn a los distintos indicadores que la componen. Ejemplo de operacionalizacin de conceptos tericos mediante anlisis factorial (pp.204). 4.2. La formulacin de las preguntas: sus efectos en el error de medicin Despus de concretados los indicadores se procede a la redaccin de las preguntas del cuestionario. Split-ballot es el procedimiento experimental ms aplicado en la comprobacin de diferencias en las respuestas ante dos alternativas de una misma pregunta. Garantizada la homogeneidad de los grupos las diferencias en las respuestas se interpretan como debidas a la formulacin de la pregunta, se concluye que la mayora de los errores de medicin se deben al diseo del cuestionario. En concreto,a la extensin del cuestionario, el orden de las preguntas, asu formato abierto o cerrado , al empleo de palabras ambiguas, de difcil comprensin a la saliencia de la pregunta para el encuestado y al empleo de ayudas al recuerdo. Errores debidos a la formulacin de la pregunta

Errores de especificacin La pregunta no se adecua a los objetivos de la investigacin. No logra su traduccin en un indicador vlido en la medicin de los conceptos esenciales del estudio. De medicin Desigual interpretacin de trminos de la pregunta, palabras ambiguas o que tengan distintas connotaciones pueden suscitar respuestas impares. La redaccin de la pregunta, su introduccin y formulacin concreta. Las opciones de respuesta: qu alternativas se ofrezcan: efectos de las opciones intermedias, de no opinin, equilibradas, en qu orden: efectos de primaca (la eleccin preferentes de la primera alternativa de respuesta que se mencione), recencia (la eleccin preferente de la ltima alternativa), ambos se pueden dar en personas con un bajo nivel de estudios principalmente aquellas preguntas con ms de tres opciones de respuesta, aquiescencia (tendencia al acuerdo indistintamente del significado de la pregunta)este sesgo es ms habitual en personas de estatus social bajo y en miembros de minoras tnicas. Se puede dar cuando el encuestado elige la respuesta que l cree que l cree que se espera que d. Una pregunta neutral equilibrada en afirmaciones positivas y negativas puede ser una forma de evitar los errores de medicin debidos al efecto de aquiescencia.(pp.212). Orden y contexto de la pregunta en el cuestionario. Tema de la pregunta: sesgo de deseabilidad social, errores deliberados (o motivados) de memoria, de comunicacin. Las preguntas precedentes pueden influir en las respuestas a preguntas posteriores. Cuando una pregunta general sobre un determinado tema sigue a una pregunta especfica relacionada, las personas procuran reiterar la informacin dada con anterioridad en su respuesta a la pregunta especfica. Las preguntas generales, ms que las especficas, estn ms expuestas al efecto de orden. Los efectos de contexto tambin pueden acontecer cuando la interpretacin de una pregunta est influida por la informacin que la anteceda. Errores de medicin debido al tema de la pregunta Preguntas embarazosas, amenazantes, sensitivas, ofensivas. Incomodan al encuestado y si no se aborda con cautela la captacin de respuestas vlidas se limita. El error de deseabilidad social se da ms en personas de mayor nivel educativo. Bradburn (1983) distingue tres tipos de errores de respuesta: a) Errores deliberados o motivados. El encuestado aade u omite informacin para causar una buena impresin al entrevistador; o para evitar que ste averige algo. b) Errores de memoria sobre la ocurrencia de determinados acontecimientos y cuando sucedieron

c) Errores de comunicacin. Causados bien porque el entrevistador no ha expresado con claridad lo que est preguntando o porque el entrevistado falla en aclarar su respuesta al entrevistador. Existen diferencias de personalidad que pueden afectar sistemticamente a su voluntad de dar respuestas veraces. Sobre todo en preguntas que podran afectar a su autoestima o imagen pblica. Tambin: a) La presencia de otras personas durante la entrevista b) Acontecimientos que le ocurrieron antes de que la entrevista comenzase c) Presiones sociales para no cooperar con extraos Los distintos errores de medicin debidos a la respuesta de los encuestados pueden traducirse en errores sistemticos y en errores variables o aleatorios. Depende de su incidencia en el conjunto de la encuesta. Sistemticos: no suman cero cuando las observaciones de la muestra son promediadas. Cuando los errores positivos o los negativos prevalecen en el conjunto de los casos analizados, resultando en una sobreestimacin o subestimacin de los valores reales de la poblacin. Variable: cuando en el anlisis conjunto de la muestra, no ha habido una mayor desviacin ni de exceso ni de defecto, anulndose los valores positivos y negativos. La incidencia en los resultados de la encuesta (los errores variables) pueden reducirse incrementando el tamao de la muestra. Recomendaciones para la redaccin de las preguntas Varios errores de medicin pueden corregirse con una redaccin adecuada de la pregunta. Acceder a cuestionarios ya validados en estudios anteriores. El ver qu preguntas se hicieron qu se trataba de medir con ellas, qu resultados se obtuvieron, puede ayudar a la redaccin de nuevas preguntas. Con ello se evita caer en errores cometidos con anterioridad. Se pueden tomar preguntas en las que se alcanz una buena medicin de los conceptos de inters. Qu se entiende por una buena pregunta? Payne (1980:72) es aquella que no afecta a la respuesta. Fowler (1998:344) es aquella que produce respuestas que son medidas vlidas y fiables de algo que queremos medir. Antes de comenzar a redactar las preguntas: 1. Especificar los objetivos de la encuesta. La informacin que pretende recogerse. 2. Identificar los conceptos centrales en la investigacin y traducirlos en indicadores validos que ayuden a reducir los errores de especificacin 3. Elegir el mtodo de encuesta a aplicar y concretar la poblacin a sondear (nivel de formacin de la poblacin, su dominio del idioma, su capacidad de comunicacin verbal, adems de su inters por el tema.

4. Concretar los anlisis que se prevn realizar, en consonancia con los objetivos de la investigacin. Qu difcil es escribir buenas preguntas. Requiere gran habilidad y juicio, mucho tiempo y experiencia y, todava, incluso despus de aos de experiencia, nadie puede escribir una pregunta perfecta (Sudman y Bradburn, 1982:3, 283). Las recomendaciones ms citadas en la literatura de encuesta para la redaccin de preguntas: 1. 2. 3. 4. 5. 6. 7. 8. Formular preguntas relevantes a la investigacin Preguntas breves y fciles de comprender por las personas a las que van dirigidas Emplear un vocabulario sencillo, evitando conceptos o trminos abstractos La redaccin de la pregunta ha de ser precisa La pregunta ha de ser lo ms objetiva o neutra posible para no influir en la respuesta No redactar preguntas en forma negativa Redactar preguntas de forma personal y directa Ni las preguntas ni las alternativas de respuesta (cuando se ofrezcan) pueden referirse a varias cuestiones al mismo tiempo. El principio de la idea nica. 9. No emplear palabras que comporten una reaccin estereotipada.

Formular preguntas relevantes a la investigacin Sudman y Bradburn (1987) regla general que el investigador se pregunte: por qu estoy haciendo esta pregunta? Preguntas breves y fciles de comprender, por las personas a las que van dirigidas. Sin duda la mejor estrategia es utilizar preguntas breves, cuando sea posible, y que los entrevistadores den a los entrevistados tiempo suficiente para responder a las preguntas. Hay ocasiones en las que las preguntas largas pueden funcionar mejor que las cortas. Existe evidencia emprica que avala el empleo de preguntas largas para reducir los efectos de deseabilidad social y mejorar la evidencia del recuerdo de acontecimientos del pasado. Ej: Ocasionalmente, la gente bebe con el estmago vaco o beben un poco demasiado y se intoxican. El ao pasado, con qu frecuencia se intoxic mientras beba algn tipo de bebida alcohlica? Sudman y Bradburn (1982) aceptan que las preguntas cortas son mejores cuando se indaga en actitudes. Por el contrario, las preguntas largas se prefieren cuando se analizan conductas. (las largas ayudan a la memoria, si la pregunta es larga se interpreta por el encuestado que es importante). Corta: qu problemas de salud ha tenido usted en el pasado?

Larga: la siguiente pregunta es sobre problemas de salud durante el ltimo ao. Esto es algo que preguntamos a todo el mundo en la encuesta. qu problemas de salud ha tenido usted el ao pasado? El uso continuado de preguntas largas en un mismo cuestionario puede aumentar la fatiga del encuestado. Emplear un vocabulario sencillo, evitando conceptos o trminos abstractos Nivel de educacin, edad. Trminos aparentemente sencillos, como proporcinpueden ser errneamente interpretados. Ej. qu proporcin del tiempo que ve la televisin lo dedica a ver programas de noticias? Slo 14 de las 53 personas entrevistadas interpretaron correctamente la palabra proporcin como porcentaje, parte o fraccin. El resto como cunto tiempo o qu programas de noticias ve. Incluir palabras familiares, empleadas con frecuencia. Evitarse palabras abiguas. Se desaconseja el uso de palabras habituales en el argot de los socilogos como proporcin, socializacin, alineacin, interaccin social. Precavidos con trminos como trabajador, mayor, joven, mucho usualmente su acepcin puede variar dependiendo de a quin se pregunte. Sugerencia de Fowler (1998) no utilizar escalas con adjetivos, en la medicin de estados subjetivos (actitudes, opiniones, valores) en estudios internacionales o que incluyan a poblaciones de culturas diversas. Una vez redactada la pregunta es conveniente ponerse en el lugar de la persona de menor nivel educativo y preguntarse cmo respondera yo a la pregunta si fuese encuestado? La redaccin de la pregunta ha de ser precisa Cuanto ms detalles ms precisin. posee un auto? Diferentes interpretaciones (auto y posee) La pregunta ha de ser lo ms objetiva o neutra posible para no influir en la respuesta Aunque se afirma que en las preguntas de la encuesta no existe una puramente objetiva se debe perseguir la objetividad. Que no invite a dar una determinada respuesta. EJ: no pegar usted a sus hijos, verdad? Adems de incitar a una respuesta negativa, no aportara informacin creble. Evitar expresiones como la mayora de la gente opina que o referencia a la opinin expresa de una autoridad. Para la redaccin consultar con personas que tengan otro punto de vista. Redactar preguntas de forma personal y directa Se prefiere lo concreto a lo abstracto. Ej. qu sentira si tuviese un accidente de trfico? Se obtendra mayor informacin con una redaccin ms directa y personal: Ha tenido usted, alguna vez un accidente de trfico? Si es as qu sinti?

Ni las preguntas ni las alternativas de respuesta pueden referirse a varias cuestiones al mismo tiempo En las ltimas navidades cen usted con su familia y se divirti? No emplear palabras que comparten una reaccin estereotipada Como se considera usted racista? Ocultar la intencionalidad. Deseabilidad social. Para reducir el sesgo: 1. Motivar al encuestado para que responda con sinceridad (que se explique el propsito de la pregunta a los encuestados, transmitir garantas de condifencialidad y anonimato) 2. Ocultar la intencionalidad de la pregunta (para lo de deseabilidad social) 3. Preferir el formato de pregunta abierto al cerrado, las preguntas largas a las cortas o breves en un vocabulario familiar 4. Proporcionar respuestas flexibles o atenuar la gravedad de la pregunta ( evitar que se piense que hay respuestas correctas e incorrectas) 5. Aleatorizar las opciones de respuesta(reducir el temor a revelar conductas, opiniones o actitudes, tcnica conocida como RRT Randomized Response Technique 6. Dar mayor privacidad a la respuesta (uso de hojas de respuesta autorellenadas) 7. Cargar deliberadamente la pregunta: todo mundo lo hace, asumir la conducta y preguntar por su frecuencia y otros detalles

Poner el cuadro de la pgina 263 sobre ventajas e inconvenientes de las preguntas abiertas y cerradas Escala de Distancia Social de Bogardus En 1925, aparece la propuesta de Emory S. Bogardus consiste en una serie de proposiciones dispuestas en orden decreciente de deseo de interrelacin con personas de tenias diferentes o expuestas a estigmas sociales. La propuesta de Bogardus presenta la siguiente graduacin decreciente hacia otras personas o grupos sociales: 1. 2. 3. 4. 5. 6. Me casara con l Le tendra como un amigo ms Trabajara con l en una oficina Admitira solamente como interlocutor Querra que viviese fuera de mi vecindad Querra que viviese fuera de mi pas

A partir de las respuestas se puede elaborar un ndice de distancia social, en consonancia con los pesos asignados en cada punto de la escala.

Los porcentajes de respuesta en cada proposicin o categora de respuesta se multiplica por el coeficiente de ponderacin asignado correspondiente:5,4,3,2,1,0. El resultado total se divide entre 500 al haber quedado excluida la sexta categora por estar multiplicada por 0 (poner la frmula). Escala diferencial de Thurstone Consiste en enunciar una serie de proposiciones relativas a una determinada actitud (ms o menos favorables o contrarias a la misma). Al encuestado se le pide que indique su acuerdo o desacuerdo con cada frase o proposicin. El promedio de las respuestas resumir su actitud ante el problema que se investiga. Poner el ejemplo de la tabla de Thurstone pp.268 Escalograma o escala acumulativa de Guttman En 1944 Louis Guttman propuso un procedimiento escalar acumulativo para la medicin de las actitudes. En ella la respuesta positiva a un tem supone una respuesta positiva a aquellos tems que se siten por debajo de l. Ello exige una clasificacin jerrquica y acumulativa de los tems. Poner el escalograma de guttman y la escala de thurstone (pp.269). La medicin de actitudes mediante escalas dicotmicas de acuerdo, en desacuerdo son las ms vulnerables al llamado sesgo de aquiscencia. Escala aditiva de Likert En 1932 Rensis Likert propone uno de los procedimientos escalares ms aplicados en la investigacin social. Ha de contener aproximadamente el mismo nmero de tems o proposiciones claramente favorables y desfavorables hacia el objeto de actitud. Han de ser expresin de un comportamiento deseado, enunciados de forma categrica, en el sentido del deber ser. Ej: los inmigrantes ilegales deberan ser repatriados a sus pases respectivos. No deberan incluirse aseveraciones muy suaves pues suscitan demasiado acuerdo cuando se incluyen en una escala Likert. Es politmica. Con cinco categoras de respuesta para cada tem por ejemplo: muy de acuerdo, de acuerdo, indeciso, en desacuerdo muy en desacuerdo. Diferencial Semntico de Osgood Procedimiento para asegurar el significado connotativo de los conceptos. Muestra gran utilidad en la medicin de estereotipos sociales y en general, en la medicin de las actitudes diferenciales ante distintos grupos sociales. Se pide a los encuestados que marquen una de las posiciones (generalmente siete) que median entre dos adjetivos antnimos.

Poner el ejemplo pgina 279 La puntuacin de una persona se obtiene asignando 1 a la posicin que expresa la respuesta ms negativa; el 7 a la ms positiva; y las intermedias desde 2 a 6 consecutivamente. La puntuacin global ser, igualmente el promedio de todas las respuestas para la totalidad de los enunciados propuestos. La ubicacin de las preguntas en el cuestionario 1. Preguntas iniciales interesantes y sencillas (despertar el inters, preguntas neutras para no pedir que precise una posicin en contra o a favor). 2. Preguntas clave en el centro del cuestionario (despus d ehaber despertado el inters del encuestado antes de que su cansancio pueda afectar, sobre todo en autoadministrada) 3. Distribuir secuencialmente las preguntas que formen una batera (se entiende un conjunto de preguntas relativas a una misma cuestin, al enfocar distintos aspectos del mismo tema). 4. Preguntas amenazantes al final del cuestionario (al final no puede afectar su reaccin a ellas no afecte a las preguntas posteriores, preguntas sociodemogrficas de identificacin al final al menos que sean de filtro para seleccionar a la poblacin). La presentacin del cuestionario Se comienza con un mensaje de presentacin cuidadosamente elaborado. Conviene comenzar con la identificacin de la institucin o centro responsable de la investigacin. (seriedad al estudio). Garantas de confidencialidad y de anonimato. Tal vez poner el ejemplo de la pgina 287 La prueba del cuestionario y su redaccin final El diseo del cuestionario no ha de darse por concluido hasta que haya sido probado o pretestado. Averiguar si: 1. Las preguntas tienen sentido, se comprenden y provocan las respuestas esperadas 2. Las preguntas cubren la variedad de lo que se analiza 3. La disposicin conjunta de las preguntas en el cuestionario sigue una secuencia lgica y no influye en la respuesta. 4. Las instrucciones se entienden y no se precisa aadir ms 5. La duracin del cuestionario no afecta a la respuesta El pretest no slo se circunscribe al cuestionario. Abarca las distintas fases de la encuesta. Hacerse con personas de iguales caractersticas que la poblacin de estudio reproduciendo con exactitud, las condiciones en que se administrar el cuestionario final. Que el investigador participe en el pretest no slo los entrevistadores. Grabar la entrevista para realizar el pretest.

Consultas a expertos Identificar errores de especificacin y de medicin del cuestionario. Los expertos revisan para evaluar en su condicin de experto. Entrevistas cognitivas Mediante ellas se quiere saber el proceso que sigue el encuestado en su cumplimentacin del cuestionario. En espacios controlados a modo de laboratorio equipados con grabadoras y video. Pueden tener un carcter simultneo o retrospectivo. Simultneo: piensa en alto dice en voz alta lo que piensa cuando se le formula la pregunta y medita la respuesta. Retrospectiva: al final pero puede que no sea capaz de recordar el proceso cognitivo seguido en la respuesta a las preguntas. Deteccin de errores de medicin por problemas de comprensin de las preguntas. Despus de la prueba se vuelve a las fases iniciales en el diseo de la encuesta.