Ordem das questões em uma pesquisa

Imagem por Artjane em Pixabay.

As cédulas eleitorais em papel têm, necessariamente, que listar os candidatos em alguma ordem. É sabido que os candidatos se beneficiam de serem listados primeiro. Um estudo descobriu que um candidato cujo nome é listado primeiro ganha cerca de 3,5 pontos percentuais na votação [1].

O efeito é menor quando os candidatos são bem conhecidos, como nas eleições presidenciais, mas quando os candidatos têm pouco reconhecimento de nome ou pouca cobertura da mídia (como na maioria das eleições locais), o efeito pode ser ainda maior.

O  mesmo acontece nas pesquisas de satisfação realizadas junto aos clientes e aos colaboradores. Então, é preciso ter muito cuidado para evitar distorções. Se a ordem das questões no questionário da pesquisa pode alterar a conclusão que interessa ao cliente, ou aos usuários dos resultados, temos as seguintes alternativas:

A. Fazer a pesquisa com vários questionários, em que a ordem das perguntas é alterada. Em sistemas informatizados isso é fácil.

B. Tomar o cuidado de só analisar variações em relação a levantamentos anteriores, em que a ordem das questões era a mesma.

Referência:

1. Koppell, Jonathan G. S., and Jennifer A. Steen. The Effects of Ballot Position on Election Outcomes. Journal of Politics 66 (2004): 267-81. Citado em Thaler, Richard H. e Sunstein, Cass R. Nudge: Improving Decisions About Health, Wealth, and Happiness. Penguin Books. USA. 2009. p. 249.

Linha de Base (Baseline)

Desenho de gráfico em que uma mão desloca um dos resultados.

Não se pode buscar a melhoria sem sabermos qual resultado já temos. Isso é até mais importante do que saber aonde queremos chegar.

A Linha de Base (baseline) é o nível de desempenho médio de um processo ou sistema no momento inicial e serve de baliza para avaliar o ganho obtido. É a referência que permite quantificar a melhoria. Ou, de outro modo, é o resultado das medidas feitas antes de uma intervenção, permitindo comparar e avaliar o efeito das ações tomadas. Afinal, sem conhecer a situação inicial é difícil determinar o progresso alcançado.

Por que não se fala em ponto de partida, mas em linha de base?

Porque, devido às oscilações dos processos, é difícil determinar um único ponto representativo da realidade. A baseline deve ser fruto de no mínimo cinco medidas [1], para maior certeza de que não se trata de uma condição atípica decorrente de variações naturais ou um fenômeno aleatório.

A melhor maneira de determinar a linha de base é usar a Linha Central do Gráfico XmR do processo, que leva em conta os resultados de um período.

Exemplo de Gráfico XmR – A Linha de Base corresponde à Linha Central.

“Linha de base é um retrato da situação existente no momento inicial e que serve de referência para avaliar o progresso obtido”.

A determinação correta da baseline é particularmente importante nos casos em que o processo é irreversível, como o ganho de experiência de um grupo  profissional, por exemplo.

Atenção

  • Para determinar a linha de base de um indicador sujeito a sazonalidades, é importante dessazonalizar os dados.

Se a meta é o ponto de chegada, a “linha de base” (baseline) é a situação de partida. Não faz sentido desenvolver um plano de ações se não soubermos onde estamos e para onde queremos ir. — dlb

Referência

1. Stacey Barr. How to Set a KPI Baseline to Monitor Improvement. January 10, 2018.

Post240219 de novembro/20, atualizado em abr/24