Remover linhas duplicadas

Como remover linhas e palavras-chave duplicadas

1. 1

   Cole a lista ou solte um arquivo

   Uma palavra-chave ou um item por linha, colados na caixa ou em um arquivo .txt, .csv ou .md de até 5 MB.

2. 2

   Escolha o que conta como duplicata

   Mantenha “A primeira ocorrência”, “A última ocorrência”, “Só as linhas que se repetem” ou “Só as linhas que aparecem uma vez”. Em “Mais configurações” ficam “Ignorar maiúsculas e minúsculas” e “Ignorar pontuação”.

3. 3

   Confira a contagem e baixe

   Cada coluna mostra quantas linhas tem, a da direita exibe uma prévia das primeiras 400 linhas, e “Baixar TXT” salva a lista inteira.

Remover palavras-chave duplicadas de uma lista

Listas de palavras-chave ganham repetições quando são juntadas: duas exportações de pesquisa, a lista do mês passado colada embaixo da atual, a mesma frase tirada de várias ferramentas. Coloque uma frase por linha, e a página mantém a primeira cópia de cada uma, descarta as outras e não mexe na ordem. Uma exportação em CSV também é comparada linha por linha. Duas linhas com a mesma palavra-chave e volumes de busca diferentes são linhas diferentes, então cole só a coluna das palavras-chave. Em 20 de outubro de 2026, uma lista de teste com 10.000 frases (241 KB) voltou limpa em cerca de um quinto de segundo, no Chrome em um Mac.

O que conta como a mesma linha

Por padrão, duas linhas são iguais quando os caracteres coincidem, deixando de lado os espaços, as tabulações e os espaços não separáveis no início e no fim. “Ignorar maiúsculas e minúsculas” faz Tênis de corrida e tênis de corrida virarem uma linha só. “Ignorar pontuação” tira todos os sinais de pontuação e símbolos antes da comparação, então [tênis de corrida], "tênis de corrida", +tênis +de +corrida e tênis de corrida? contam como uma linha. “Remover linhas vazias”, também ligado por padrão, tira as linhas em branco e as que só têm espaços. Nada disso muda o que você baixa: cada linha que fica é gravada exatamente como estava.

Duplicatas que a ferramenta não detecta

Algumas linhas são iguais para uma pessoa e diferentes para uma comparação exata. As palavras podem vir em outra ordem (comprar tênis de corrida e tênis de corrida comprar) ou em outra forma (sapato e sapatos). Pode haver dois espaços entre as palavras, ou uma letra com e sem acento (café e cafe). Nenhuma configuração junta essas linhas, porque a página compara caracteres, e não significado. Montamos uma lista de teste de 10.000 linhas com repetições conhecidas: com todas as opções ligadas, ficaram 300 linhas com espaço duplo e 200 com as palavras invertidas. Espaços e letras podem ser corrigidos antes no Localizar e substituir. Escolha “Expressão regular”, coloque [ ]{2,} em “Localizar” e um espaço em “Substituir por”, e acrescente um par como “é” e “e” para cada letra. Depois escolha Remover linhas duplicadas abaixo do resultado; na lista de teste, isso reduziu o total de 7.500 para 7.200 linhas. Nenhuma das duas páginas corrige a ordem ou a forma das palavras.

A ordem não muda

Muitos jeitos de remover duplicatas ordenam a lista primeiro, porque a ordenação coloca as linhas idênticas lado a lado. Isso joga fora a ordem que você tinha. Aqui a lista é lida uma vez, e cada linha é comparada com as que já apareceram. As linhas que ficam saem na ordem em que entraram. “A última ocorrência” mantém, em vez disso, a cópia mais recente de cada linha. Isso importa quando as linhas posteriores corrigem as anteriores, como em um log ou em uma exportação com linhas atualizadas. Se você também quiser o resultado ordenado, o Ordenar linhas é uma das ferramentas oferecidas abaixo do resultado.

Linhas repetidas, linhas únicas e contagem

Dois modos invertem a tarefa. “Só as linhas que se repetem” mantém uma cópia de cada linha que aparece duas ou mais vezes. Assim aparecem IDs repetidos, reservas em dobro ou palavras-chave que duas campanhas têm em comum. “Só as linhas que aparecem uma vez” mantém as linhas sem par. Coloque duas listas já limpas uma embaixo da outra, e você recebe o que está em só uma delas. “Mostrar a contagem antes de cada linha” escreve quantas vezes cada linha apareceu, depois uma tabulação e depois a linha. No Ordenar linhas, “Como números” na coluna 1, com “Maiores primeiro”, coloca as linhas mais repetidas no topo.

Perguntas frequentes