Confirme que cada linha seja um item
Uma quebra visual causada pela largura do editor não cria outro item. A ferramenta compara linhas, não interpreta registros de banco de dados. Um campo CSV entre aspas pode conter uma quebra interna; nesse caso, linha física e registro não são a mesma unidade. Prepare a estrutura antes de aplicar uma deduplicação por linhas.
Maiúsculas podem fazer parte do dado
Com a diferenciação ativa, «São Paulo» e «são paulo» permanecem entradas distintas. Sem ela, a primeira forma pode ser mantida como representante das duas. A grafia original dessa primeira linha não é modificada. Em identificadores e caminhos, reduzir a lista ignorando o caso pode apagar uma diferença necessária.
Exemplo para conferir
São Paulo são paulo São Paulo Recife
| Diferenciando maiúsculas: removidas | 1 |
|---|---|
| Ignorando maiúsculas: removidas | 2 |
| Ordem | Primeira ocorrência |
Ignorar bordas só altera a comparação
A opção retira os espaços das extremidades da chave usada para comparar. Ela não reescreve a primeira linha mantida. Os espaços internos também não são reduzidos. Se o primeiro item tem uma margem de espaços, essa margem continua no resultado, separando a deduplicação da limpeza do texto original.
Decida sobre as linhas vazias
Uma quebra final produz uma linha lógica vazia. Sem a remoção de vazias, uma primeira ocorrência vazia pode ser preservada, e repetições iguais podem sair como duplicadas. Com a opção ativa, linhas sem conteúdo ou só com espaços são removidas. Em prosa, linhas vazias podem organizar parágrafos e não devem ser tratadas automaticamente como dados inúteis.
Confira a conta e uma amostra da saída
Teste repetição exata, mudança de caixa, espaços nas bordas e uma última linha vazia. O total de entrada deve ser igual a removidas mais mantidas. Revise também alguns itens para confirmar a regra. Desfaça se a comparação foi ampla demais e só exporte depois de verificar a ordem da primeira ocorrência.