Calidad de las respuestas

Acerca de la calidad de las respuestas

La calidad de las respuestas de ExpertReview es una función de la plataforma de Qualtrics que comprueba la calidad general de los datos que ha recopilado antes de empezar a analizarlos. Hará sugerencias sobre la mejor manera de limpiar sus datos para asegurarse de que está analizando los datos de la mayor calidad posible. A continuación se muestran posibles mensajes de error que puede recibir al analizar respuestas, y formas en que puede resolver cada uno de ellos.

Para obtener instrucciones sobre cómo utilizar ExpertReview en Datos y análisis, consulte Funcionalidad de calidad de respuesta.

Encuesta finalizada por el encuestado anormalmente rápida

Los encuestados que completen su encuesta demasiado rápido se marcarán como aceleradores. Esto implica que eligen respuestas aleatorias para pasar la encuesta rápidamente, en lugar de proporcionarle respuestas de calidad.

Las respuestas se marcan cuando se trata de más de dos desviaciones estándar respecto a la duración media que les lleva a los encuestados realizar la encuesta, y usted debe haber recopilado al menos 100 respuestas en su encuesta. Las respuestas descartadas, de vista previa y de prueba no se cuentan para las 100 respuestas.

Posible bot

Usando la tecnología reCaptcha invisible de Google, podemos detectar la probabilidad de que una respuesta provenga de un bot en lugar de un sujeto humano. Cuando la detección de bots está activada, se asigna una puntuación a cada encuestado en el campo de datos embebidos Q_RecaptchaScore, que indica la probabilidad de que la respuesta provenga de un bot. Si esta puntuación es inferior a 0,5, la respuesta se marcará como bot.

Evitar bots

Existen varias formas de reducir la probabilidad de que un bot se abra camino en la encuesta.

• Utilice Q_RecaptchaScore en la lógica de ramificación para enviar bots al final de la encuesta o descartarlos por completo.
• Use una pregunta de verificación mediante código al principio de la encuesta.
• Si está distribuyendo a un panel, utilice un autenticador o una contraseña para restringir quién puede acceder a la encuesta.
• Intente ajustar las opciones de seguridad de la encuesta.

El encuestado ha realizado la encuesta más de una vez

A veces, los usuarios pueden intentar realizar la encuesta más de una vez. Dependiendo del objetivo de su estudio, los duplicados pueden reducir la calidad de sus datos sesgando los resultados hacia la retroalimentación de los infractores repetidos.

En función de la opción de encuesta que haya activado, hay dos formas diferentes en las que una respuesta puede terminar marcada como duplicada:

• RelevantID está activado: El campo Q_RelevantIDDuplicateScore es superior o igual a 75.
• Evitar envíos múltiples está establecido en “Marcar respuestas:” El campo Q_BallotBoxStuffing es igual a “true”.

Evitar respuestas duplicadas

En función de cómo configure su encuesta, puede evitar que se dupliquen las respuestas antes incluso de que comience a recopilar datos.

• Si conoce a sus encuestados, envíe la encuesta por correo electrónico a los encuestados.
  Consejo Q: Para asegurarse de que nadie pueda utilizar el enlace anónimo, cambie su Acceso de encuesta a Solo por invitación.
• Si conoce a sus encuestados o utiliza el inicio de sesión único (SSO) en su organización, utilice un autenticador con la opción para volver a realizar la tarea desactivada.
• Al utilizar Evitar varios envíos con un enlace anónimo, seleccione una encuesta final o una opción de redireccionamiento.
  Consejo Q: Al utilizar un enlace anónimo, la activación de RelevantID no borrará instantáneamente los duplicados, pero reforzará la calidad de sus datos permitiéndole borrar duplicados una vez finalizada la recopilación de datos.

Tasa de finalización insuficiente en 24 horas

Si un encuestado no termina su encuesta dentro de las 24 horas posteriores al inicio, es probable que no vuelva para terminar la encuesta. Cuanto más ocurre esto, más probable es que algo sobre la forma en que se escribe o formatea la encuesta ahuyenta a los encuestados.

Su encuesta solo se puede marcar por tener una tasa de finalización deficiente después de haber recopilado al menos 100 respuestas completadas. (Esto excluye las respuestas incompletas y las respuestas en curso). Tampoco se marcará la tasa de finalización baja si no se ha iniciado ninguna respuesta en las últimas 24 horas. (Esto incluye respuestas completadas, respuestas incompletas y respuestas en curso). Esto garantiza que no habrá un falso positivo por finalización deficiente cuando su estudio dejó de recopilar respuestas hace meses.

Cuando se marca la tasa de finalización de 24 horas

Se determina que una encuesta tiene una baja tasa de finalización calculando lo siguiente:

(Número de encuestas iniciadas 24 horas desde la hora actual y completadas) / (Número de encuestas iniciadas 24 horas desde la hora actual)

• Menor: Solo 1 a 9% de las respuestas iniciadas en las últimas 24 horas no se han completado.
• Moderado: entre el 10 y el 20 % de las respuestas iniciadas en las últimas 24 horas no se han completado.
• Grave: no se ha completado el 21% o más de las respuestas iniciadas en las últimas 24 horas.

Revisión de su encuesta

Las tasas de finalización deficientes pueden significar que hay un problema con cómo se creó la encuesta. Al revisar su encuesta para mejorar la tasa de finalización, es importante tener en cuenta lo que iQ Score ExpertReview asignó inicialmente a su encuesta. Las siguientes páginas contienen consejos sobre los indicadores de ExpertReview de todos los problemas.

• Metodología de la encuesta y mejores prácticas de cumplimiento
• Errores comunes de las encuestas
• Solicitudes de datos confidenciales

Tasa de finalización general baja

Cuanto peor es la tasa de finalización de una encuesta, más probable es que algo sobre la forma en que se escribe o formatea la encuesta ahuyenta a los encuestados.

Su encuesta solo se puede marcar por tener una tasa de finalización deficiente después de haber recopilado al menos 100 respuestas completadas. (Esto excluye las respuestas importadas, las respuestas incompletas y las respuestas en curso.)

Cuando se marca la tasa de finalización global

Se determina que una encuesta tiene una baja tasa de finalización calculando lo siguiente:

(Número total de respuestas completas de la encuesta) / (Número total de respuestas registradas + Número total de respuestas en curso)

• Menor: Solo 1 a 9% de las respuestas iniciadas en las últimas 24 horas no se han completado.
• Moderado: entre el 10 y el 20 % de las respuestas iniciadas en las últimas 24 horas no se han completado.
• Grave: no se ha completado el 21% o más de las respuestas iniciadas en las últimas 24 horas.

Revisión de su encuesta

Las tasas de finalización deficientes pueden significar que hay un problema con cómo se creó la encuesta. Al revisar su encuesta para mejorar la tasa de finalización, es importante tener en cuenta lo que iQ Score ExpertReview asignó inicialmente a su encuesta. Las siguientes páginas contienen consejos sobre los indicadores de ExpertReview de todos los problemas.

• Metodología de la encuesta y mejores prácticas de cumplimiento
• Errores comunes de las encuestas
• Solicitudes de datos confidenciales

La respuesta contiene datos confidenciales

A veces, una respuesta contendrá información confidencial sobre un encuestado. Puede ser cualquier cosa, desde un número de teléfono a un número de la seguridad social. Cada organización tiene su propio estándar de contenido que considera confidencial y hay ocasiones en las que es posible que desee excluir estos datos del conjunto de datos porque la información que los encuestados han proporcionado es demasiado sensible para incluirla en su análisis.

Según la configuración de su organización, la información confidencial también se puede redactar a partir de la respuesta. En este caso, la información confidencial se sustituirá por asteriscos y no tendrá forma de recuperar la información confidencial. Si incluye respuestas con información redactada en su análisis depende de usted.

Evitar la recopilación de datos confidenciales

A pesar de que los encuestados pueden proporcionar información confidencial en una respuesta abierta sin solicitarla, la mejor manera de evitar violaciones de datos confidenciales es asegurarse de que no está solicitando información personal. Consulte Resolver problemas con datos confidenciales para obtener más información sobre cómo eliminar estos tipos de solicitudes de su encuesta.

Si es administrador de organización, considere la posibilidad de añadir redacción a su política de datos confidenciales. Esto puede ayudar a garantizar que los creadores de la encuesta no tengan acceso a información confidencial sobre sus encuestados. Puede seleccionar qué temas sensibles están redactados y cuáles no.

Texto ambiguo

Se marcarán los encuestados que introduzcan texto ambiguo en los campos de entrada de texto. El texto ambiguo incluye “tontos” o casos en los que el encuestado escribió letras y/o símbolos aleatorios para responder a una pregunta. El texto ambiguo se puede detectar en inglés (EE. UU., Reino Unido), español (ES, ES-ES), francés (FR, FR-CA), alemán (DE), portugués (PT, PT-BR) e italiano (IT). Las respuestas proporcionadas en otro idioma y las respuestas que contienen acrónimos (por ejemplo, CX) no están marcadas.

Prevención de respuestas ambiguas

Si bien no hay forma de prevenir completamente este comportamiento, hay formas de animar a los encuestados a dar respuestas de mayor calidad a preguntas abiertas.

• Ocultar preguntas que es posible que no se apliquen a todos los encuestados: a veces, los encuestados introducirán texto ambiguo porque ha forzado la respuesta, pero el contenido de la pregunta no es relevante para ellos. Por ejemplo, si está encuestando a una población general, pero empieza a hacer preguntas a sus encuestados sobre sus hijos, es probable que haya personas que realicen la encuesta a las que no se aplican estas preguntas. Puede ocultar preguntas sobre niños en la casa si empieza con una pregunta general (¿Tiene hijos?) y, a continuación, utilice la respuesta del encuestado para configurar la ramificación, la visualización o la lógica de salto en las siguientes preguntas.
  
• Asegúrese de que la pregunta no sea demasiado general: Cuando proporciona a los encuestados un campo de entrada de texto, a menudo necesitan ayuda sobre el tipo de datos que está buscando. Si la petición es demasiado amplia, es posible que los encuestados no sepan cómo responder.
  Ejemplo: “¿Hay comentarios adicionales que le gustaría proporcionar?” no es tan específico como “¿Hay comentarios adicionales que le gustaría proporcionar sobre su experiencia con el soporte técnico?” Esto último especifica que no está buscando comentarios generales de productos o de la empresa, sino comentarios sobre una experiencia específica con su equipo de soporte.
• Si procede, solicite que las respuestas se ajusten a un determinado formato: Por ejemplo, si está solicitando una dirección de correo electrónico, puede añadir validación de contenido a su pregunta.
  

Respuestas de marcado que contienen texto ambiguo

Aunque ExpertReview no marcará este tipo de respuestas de forma predeterminada, puede activarlo con los pasos siguientes:

1. Asegúrese de estar en la sección Datos de la pestaña Datos y análisis.
   
2. Haga clic en Calidad de respuesta.
3. Haga clic en Sugerencia.
   
4. Active Texto ambiguo.

Si no desea marcar respuestas según esta métrica, puede desactivar esta opción siguiendo los mismos pasos. Cuando activa este análisis, es solo para la encuesta en la que se encuentra actualmente, no todas las encuestas de su cuenta, por lo que puede personalizar el análisis de calidad de las respuestas según sea necesario.

Identificar preguntas con respuestas ambiguas

Independientemente de si se ha marcado la respuesta, puede obtener información más específica sobre si en una respuesta había o no texto ambiguo y las preguntas específicas afectadas. Para ver sus datos directamente dentro de Qualtrics:

1. Asegúrese de estar en la sección Datos de la pestaña Datos y análisis.
   
2. Haga clic en Selector de columna.
3. Seleccione Datos embebidos.
4. Seleccione los siguientes campos:
   • Q_AmbiguousTextPresent: Si había o no texto ambiguo en la respuesta de la encuesta. Esto puede ser como respuesta a cualquier pregunta abierta de la encuesta. 0 indica no y 1 indica que sí.
   • Q_AmbiguousTextQuestions: Las preguntas específicas que recibieron una respuesta ambigua. Se indica como un QID interno, no como el número de pregunta editable.
     Consejo Q: Para encontrar QID, autonumere sus preguntas con Numeración de ID interna. Siempre puede volver a cambiar la numeración más tarde o optar por no publicar estas modificaciones.
5. Estas columnas aparecerán en sus datos.
   

Patrón de preguntas sin responder

Las respuestas se marcarán si el encuestado no respondió muchas de las preguntas, a pesar de que las vio. Las respuestas se marcan cuando el 30% o más de las preguntas vistas quedaron sin respuesta; de esa manera, no se marcan pocos errores o la decisión deliberada de saltarse una pregunta irrelevante.

Evitar patrones de preguntas sin responder

Si se marca a los encuestados por tener una tendencia a saltarse preguntas, podría deberse a lo siguiente:

• Tus preguntas no son relevantes para el público: Elegir tu muestra es un paso importantísimo en la realización de la investigación. Si distribuye su encuesta a un público muy generalizado, es posible que termine formulando preguntas que el público no tiene forma de responder. Por ejemplo, si está encuestando a una población sobre la ergonomía de su área de trabajo, probablemente no debería incluir a los encuestados que actualmente están desempleados. Si no tiene control sobre su muestra de distribución, considere configurar descartes para eliminar encuestados irrelevantes.
• Sus preguntas no son claras: es posible que esté formulando las preguntas correctas, pero su redacción puede resultar un poco confusa para los encuestados. Intente reescribir estas preguntas para que sean lo más cortas y claras posible. Asegúrese de utilizar la voz activa en lugar de la voz pasiva.
• El encuestado está intentando de forma deliberada finalizar la encuesta lo antes posible: esto también se puede indicar mediante el uso de texto ambiguo y un alineamiento directo. Para animar a los encuestados a responder todas las preguntas de la encuesta, considere añadir una validación a sus preguntas. Puede obligar a los encuestados a responder cada pregunta o solicitar un mensaje para que vuelvan a las preguntas sin responder cuando terminen una página de la encuesta.
  Consejo Q: también es importante considerar si la fatiga del encuestado es un factor.

Marcar respuestas con un patrón de preguntas sin responder

Aunque ExpertReview no marcará este tipo de respuestas de forma predeterminada, puede activarlo con los pasos siguientes:

1. Asegúrese de estar en la sección Datos de la pestaña Datos y análisis.
   
2. Haga clic en Calidad de respuesta.
3. Haga clic en Sugerencia.
   
4. Habilitar preguntas sin responder.

Si no desea marcar respuestas según esta métrica, puede desactivar esta opción siguiendo los mismos pasos. Cuando activa este análisis, es solo para la encuesta en la que se encuentra actualmente, no todas las encuestas de su cuenta, por lo que puede personalizar el análisis de calidad de las respuestas según sea necesario.

Identificar las preguntas que los encuestados no respondieron

Puede obtener información más específica sobre qué preguntas se han omitido y qué porcentaje de las preguntas de la encuesta se han dejado sin responder, independientemente de si la respuesta se ha marcado o no. Para ver sus datos directamente dentro de Qualtrics:

1. Asegúrese de estar en la sección Datos de la pestaña Datos y análisis.
   
2. Haga clic en Selector de columna.
3. Seleccione Datos embebidos.
4. Seleccione los siguientes campos:
   • Q_Sin responderedPercent: El porcentaje de preguntas de la encuesta para las que el encuestado no ha proporcionado respuesta. Solo las preguntas que vieron se cuentan para este valor. Esto se presenta como una proporción. Por ejemplo, 100% es 1 y 66,7% es 0,667.
   • Q_Sin responderedPreguntas: Las preguntas específicas que no se respondieron. Se indica como un QID interno, no como el número de pregunta editable.
     Consejo Q: Para encontrar QID, autonumere sus preguntas con Numeración de ID interna. Siempre puede volver a cambiar la numeración más tarde o optar por no publicar estas modificaciones.
5. Estas columnas aparecerán en sus datos.
   

Alineación

La línea recta es la práctica de proporcionar las mismas respuestas en una tabla de matriz para superar rápidamente las preguntas. Por ejemplo, un encuestado siempre puede elegir la primera respuesta a cada enunciado, independientemente de cómo se sienta.

Los encuestados pueden ser directos porque están cansados, especialmente si no son un speeder o un bot, y sus respuestas al principio de la encuesta eran normales.

Respuestas de marcado que contienen líneas rectas

Aunque ExpertReview no marcará este tipo de respuestas de forma predeterminada, puede activarlo con los pasos siguientes:

1. Asegúrese de estar en la sección Datos de la pestaña Datos y análisis.
   
2. Haga clic en Calidad de respuesta.
3. Haga clic en Sugerencia.
   
4. Habilite la línea recta.

Si no desea marcar respuestas según esta métrica, puede desactivar esta opción siguiendo los mismos pasos. Cuando activa este análisis, es solo para la encuesta en la que se encuentra actualmente, no todas las encuestas de su cuenta, por lo que puede personalizar el análisis de calidad de las respuestas según sea necesario.

Identificar preguntas en las que los encuestados se enderezaron

Para marcarse como de línea recta, el encuestado debe tener:

• De forma directa a través de al menos 3 tablas de matriz similares (no sentencias, sino todas las preguntas)
• 80% de las tablas de matriz en la encuesta

Sin embargo, puede evaluar el número de matrices alineadas y qué preguntas se han simplificado si desea realizar un análisis más profundo. Para analizar sus datos directamente dentro de Qualtrics:

1. Asegúrese de estar en la sección Datos de la pestaña Datos y análisis.
   
2. Haga clic en Selector de columna.
3. Seleccione Datos embebidos.
4. Seleccione los siguientes campos:
   • Q_StraightliningCount: el número de preguntas de matriz que el encuestado ha alineado.
   • Q_StraightliningPercent: El porcentaje de tablas de matriz de la encuesta que el encuestado enderezó. Esto se presenta como una proporción. Por ejemplo, 100% es 1 y 66,7% es 0,667.
   • Q_StraightliningQuestions: Las preguntas específicas que se ajustaron. Se indica como un QID interno, no como el número de pregunta editable.
     Consejo Q: Para encontrar QID, autonumere sus preguntas con Numeración de ID interna. Siempre puede volver a cambiar la numeración más tarde o optar por no publicar estas modificaciones.
5. Estas columnas aparecerán en sus datos.