Remova linhas duplicadas online – desduplicador de texto gratuito e limpador de lista
Encontre e remova instantaneamente linhas duplicadas de listas de texto, endereços de e-mail, palavras-chave SEO, URLs, linhas CSV e arquivos de log em tempo real. Mantenha a ordem original da lista ou classifique os resultados em ordem alfabética ou por frequência, com suporte para correspondência sem distinção entre maiúsculas e minúsculas, normalização de espaços em branco, auditoria somente de duplicatas e contagens de ocorrências.
Como remover linhas duplicadas online
- Cole seu texto ou lista: Insira sua lista de múltiplas linhas na caixa Inserir texto à esquerda ou clique em Carregar lista de amostra para testar com endereços de e-mail duplicados e letras maiúsculas e minúsculas.
- Escolha um modo de filtro e correspondência: Mantenha Comparação sensível a maiúsculas e minúsculas marcada para correspondência exata de código/log ou desmarque-a (ou clique em Email / Lista de palavras-chave) para
Alex@example.comealex@example.comsão desduplicados juntos. - Classificar ou frequências de auditoria: Use o menu suspenso Classificar ordem para manter sua sequência original, classificar em ordem alfabética (A–Z ou Z–A) ou classificar linhas por Mais frequentes primeiro com Mostrar contagem duplicada ativado.
- Copiar ou exportar para
.txt: Clique em Copiar para a clipboard para colar sua lista limpa no Excel, no Planilhas Google ou em seu editor de código, ou clique em Baixar .txt para salvá-lo como um arquivo.
Modos de desduplicação e exemplos de saída
Suponha que sua lista de entrada contenha: apple, banana, apple, cherry, banana, apple. Veja como cada modo processa a lista:
| Modo / Predefinição | O que isso faz | Exemplo de saída |
|---|---|---|
| Manter linhas exclusivas (padrão) | Mantém uma cópia de cada linha em sua ordem original, removendo todas as repetições subsequentes. | maçã, banana, cereja |
| Relatório de frequência | Desduplica linhas, classifica por frequência mais alta e mostra contagens de ocorrências. | Maçã (3×), banana (2×), cereja (1×) |
| Extrair apenas duplicatas (2+) | Produz apenas as linhas que foram repetidas pelo menos duas vezes (ideal para encontrar registros duplicados). | maçã (3×), banana (2×) |
| Mantenha linhas estritamente únicas (1×) | Produz apenas linhas que apareceram exatamente uma vez e nunca se repetiram. | cereja |
Casos de uso comuns para remoção de linhas duplicadas
- ELimpeza de e-mail e lista de assinantes: Desduplicar boletins informativos exportados ou listas de e-mail de CRM usando o modo que não diferencia maiúsculas de minúsculas e corte de espaços em branco para que os assinantes nunca recebam campanhas duplicadas.
- SEO Auditoria de palavras-chave e backlinks: Mesclar exportações de palavras-chave ou listas URL do Google Search Console, Ahrefs e SEMrush e, em seguida, eliminar consultas duplicadas com um clique.
- Análise e depuração de log: Habilite Relatório de frequência em logs de servidor, listas de IP ou rastreamentos de pilha para ver imediatamente quais mensagens de erro ou endereços IP ocorrem com mais frequência.
- Code, Config e CSV Preparação: Limpe regras `.gitignore`, variáveis de ambiente, arquivos hosts ou identificadores CSV de coluna única sem perder a ordem de linha original.
Perguntas frequentes
Como removo linhas duplicadas mantendo a ordem original?
Deixe Sort Order definido como Keep Original Order (o padrão). A ferramenta retém a primeira ocorrência de cada linha na posição exata em que apareceu e remove quaisquer repetições posteriores.
Qual é a diferença entre “Manter a primeira ocorrência” e “Manter a última ocorrência”?
Ao preservar a ordem original ou fazer correspondência sem distinção entre maiúsculas e minúsculas, Keep First Occurrence mantém a posição mais antiga e a caixa de uma linha repetida, enquanto Keep Last Occurrence mantém a posição final e a caixa (útil para substituições de configuração ou registros cronológicos).
Por que duas linhas visualmente idênticas não foram removidas como duplicatas?
Geralmente isso acontece porque uma linha tem espaços no final ou pequenas diferenças entre maiúsculas e minúsculas. Mantenha Trim espaços em branco à esquerda e à direita marcado, habilite Normalize vários espaços internos e desmarque Comparação sensível a maiúsculas e minúsculas para capturar todas as variações ocultas.
Como posso ver quais linhas foram duplicadas na minha lista?
Selecione Extrair apenas linhas duplicadas (2+ vezes) em Modo de filtro (ou clique em Auditar apenas duplicatas (2+) preset). Isso oculta singletons exclusivos e exibe apenas as linhas que apareceram diversas vezes.