Removedor de Linhas Duplicadas Online

Removedor de Linhas Duplicadas Online: limpe listas em um clique

O removedor de linhas duplicadas varre um texto linha por linha e devolve apenas as entradas únicas. É a forma mais rápida de limpar listas de e-mails, nomes, URLs, IDs, palavras-chave ou qualquer conteúdo colado de várias fontes. Todo o processamento acontece no navegador — nada é enviado para servidores.

Como remover linhas repetidas de uma lista

1. Cole a lista no campo de entrada, uma entrada por linha.
2. Ajuste as opções:
   • Ignorar maiúsculas e minúsculas — trata Brasil e brasil como iguais.
   • Ignorar espaços nas bordas — desconsidera espaços no início e no fim da linha.
   • Remover linhas vazias — descarta linhas em branco.
   • Ordenar alfabeticamente — devolve o resultado em ordem A–Z.
3. Confira a contagem de linhas originais, únicas e removidas.
4. Copie a lista limpa.

O que conta como linha duplicada

Duas linhas são consideradas iguais quando têm exatamente o mesmo conteúdo — depois de aplicar as opções que você marcou:

A comparação é exata, não aproximada: Joao e João continuam diferentes (acento), assim como item 1 e item 1 (dois espaços). Para casos assim, normalize o texto antes — por exemplo com o Removedor de Acentos ou o Removedor de Espaços.

Exemplo

Entrada:

maçã
Banana
maçã
banana
 laranja
laranja

Com ignorar maiúsculas e ignorar espaços ativados, o resultado é maçã, Banana, laranja — 6 linhas viram 3, mantendo a primeira grafia de cada uma.

Na linha de comando

Para arquivos, o mesmo efeito sem abrir editor:

awk '!seen[$0]++' arquivo.txt      # remove duplicadas mantendo a ordem
sort -u arquivo.txt                # remove duplicadas e ordena
sort arquivo.txt | uniq -d         # mostra só as que estavam repetidas

Casos de uso comuns

• Listas de e-mails e contatos: eliminar endereços repetidos antes de importar em uma ferramenta de e-mail marketing.
• Palavras-chave de SEO: juntar listas de várias fontes e remover termos duplicados antes de agrupar por intenção.
• Logs e IDs: obter o conjunto de valores distintos (IPs, IDs de pedido, URLs) de um arquivo de log.
• Planilhas: limpar uma coluna colada com repetições antes de somar, contar ou usar como filtro.
• Referências e links: consolidar uma bibliografia ou uma lista de URLs sem duplicatas.
• Cadastros e importações: remover registros repetidos de um CSV antes de subir para um sistema.

Dicas

• A ordem original é preservada por padrão (mantém a primeira ocorrência). Marque ordenar só se a sequência não importar.
• Para também colapsar espaços múltiplos e tabs dentro das linhas, passe o texto antes pelo Removedor de Espaços.
• Depois de limpar, numere a lista final com o Gerador de Linhas Numeradas.
• Quer só saber quantas linhas, palavras e caracteres a lista tem? Use o Contador de Linhas.
• Precisa comparar duas listas e ver o que mudou? Veja Como comparar textos online. Guia passo a passo: Como remover linhas duplicadas.