hilo
Pesquisas, levantamentos e dados secundários

Revise e mescle a sua base de dados: os erros que não aparecem na planilha

Uma resposta cortada no meio. Um 99 que quer dizer «não respondeu» e entra na média como se fosse uma resposta. Uma coluna que parece numérica e tem dois valores escritos com letras. Um caso carregado duas vezes. Nada disso se vê ao abrir o arquivo, e tudo isso muda os resultados.

Você envia o arquivo e em segundos tem a lista do que foi encontrado. E se enviar dois, o HILO diz em que eles se diferenciam e se convém uni-los.

  • A revisão aparece sozinha, antes que você faça qualquer coisa
  • Lê bem os arquivos que o Excel abre desmontados
  • Não sai do seu navegador
O que encontra

Quatro coisas que arruínam uma análise em silêncio

Todas aparecem depois, quando o número já está no relatório.

Leitura

O arquivo não está quebrado: está sendo lido errado

As exportações do SPSS colocam os valores entre aspas simples, e o Excel só entende as duplas. Cada vírgula escrita dentro de uma resposta divide a linha, então o arquivo parece ter colunas a mais e linhas de largura diferente. Aqui eles são lidos corretamente, e se diz qual era a diferença.

.dat do SPSSlinhas quebradasseparadores
Valores perdidos

O 99 que se infiltra na média

O 99, o 999 e o -1 costumam querer dizer «não respondeu». Se ninguém os declara como perdidos, entram no cálculo como mais uma resposta. São marcados apenas quando ficam muito distantes do resto daquela coluna, então uma escala que legitimamente chega a 99 não é marcada. E, à parte, quais colunas mais da metade deixou em branco.

não respondeumédiasem branco
Tipos e formato

Um «não sabe» converte a coluna em texto

Basta um valor escrito com letras numa coluna de números para que o programa a leia inteira como texto e não calcule nada. O mesmo com os decimais: se convivem 3,5 e 3.5, uns são lidos como número e outros não, conforme o idioma do programa.

tipos misturadosvírgula ou ponto
Duplicados

O caso que foi carregado duas vezes

Linhas idênticas, e também a coluna que parece um identificador e, no entanto, repete valores. Essa é a forma como aparece uma resposta carregada duas vezes, e não se vê olhando: vê-se contando.

casos repetidosidentificador
Com dois arquivos

Antes de unir, saber se podem ser unidos

Com dois arquivos carregados faz-se a comparação: se têm a mesma forma, em que linhas e colunas diferem, e se um tem o texto cortado por um limite da exportação. Depois podem ser unidos, emparelhando as colunas pela forma dos seus dados e não pelo nome, porque os nomes mentem com frequência e os dados não. Cada par é mostrado com o seu motivo para que você o confirme ou descarte.

Para ser claro

O que faz e o que não faz

Vale mais dizer isso aqui do que no primeiro minuto de uso.

Não faz

Análise estatística

Não calcula, não cruza variáveis e não faz gráficos. É o passo anterior: deixar os dados em condições para que o programa que você use não lhe devolva um número errado como se fosse correto.

sem cálculossem gráficos
Não decide

Se duas bases medem o mesmo

Antes de baixar uma fusão é preciso marcar quatro verificações: mesma unidade de análise, mesmo período, mesma definição, mesmos códigos, que só pode fazer quem sabe de onde saíram os dados.

unidade de análiseo seu critério
Dados pessoais

O arquivo não sai do seu computador

Ele é lido no seu navegador e não é enviado a lugar nenhum. Numa base de pesquisa, com nomes, e-mails e consentimento informado por trás, isso importa mais do que em qualquer outro documento. E se ela tem ainda uma pergunta aberta, você pode codificá-la ali mesmo sem mover o arquivo de lugar.

Se a base vai ser compartilhada, antes você pode remover os identificadores: CPF, RG ou matrícula viram códigos e os nomes saem, também no seu navegador.

Perguntas frequentes

Como o arquivo foi lido, linhas de largura diferente, se falta a linha de cabeçalhos, linhas inteiras repetidas, colunas vazias, colunas em que todos responderam o mesmo, colunas que mais da metade deixou em branco, códigos de valor perdido tratados como números, colunas numéricas com algum valor escrito com letras, decimais com vírgula e com ponto misturados, e identificadores com valores repetidos.

As exportações do SPSS colocam os valores entre aspas simples, e o Excel só entende as duplas. Cada vírgula escrita dentro de uma resposta divide a linha, então o arquivo parece ter colunas a mais e linhas quebradas. Elas não estão quebradas: estão sendo lidas errado, e aqui são lidas corretamente.

Um 99, um 999 ou um -1 que na verdade querem dizer «não respondeu». Se ninguém os declara como perdidos, entram na média como se fossem mais uma resposta e a arruínam sem que nada avise. São marcados apenas quando ficam muito distantes do resto das respostas daquela coluna, então uma escala que legitimamente chega a 99 não é marcada.

Emparelha as colunas pela forma dos seus dados: quanta variedade têm, qual o comprimento típico e quanto se sobrepõe o vocabulário que usam. Se há cabeçalhos, um nome idêntico prevalece. Depois mostra cada par com o seu motivo para você confirmar ou descartar: nada é unido sem que você veja.

Pode colá-las, mas o resultado depende de algo que nenhuma ferramenta consegue verificar: que as duas contem a mesma unidade. Uma base pode contar pessoas e a outra registros, e as colunas são coladas do mesmo jeito. Por isso, antes de baixar é preciso marcar quatro verificações que só pode fazer quem sabe de onde saíram os dados.

Em Excel.

Não. O arquivo é lido no seu navegador e não sai do seu computador. Numa base de pesquisa com dados pessoais, isso importa mais do que em qualquer outro documento.

Experimente com a sua própria base

Envie o arquivo e veja o que foi encontrado. Leva segundos, não pede cadastro e não envia nada.