Remover linhas duplicadas

O que é a deduplicação de texto?

A deduplicação de texto (ou dedup) remove linhas duplicadas de um bloco de texto. É útil ao trabalhar com listas de dados, ficheiros de log, dados CSV, listas de email ou qualquer texto onde as entradas repetidas causam problemas. Em vez de verificar manualmente milhares de linhas, cole o seu texto e obtenha uma lista limpa e única instantaneamente.

Esta ferramenta compara linhas exatamente (por defeito) e remove todos os duplicados, mantendo apenas a primeira ocorrência de cada linha única. Pode opcionalmente ignorar as diferenças de capitalização (tratando 'Olá' e 'olá' como duplicados), remover espaços em branco e ordenar os resultados em ordem alfabética ou numérica.

Como utilizar esta ferramenta

Cole o seu texto na área de entrada. Cada linha é tratada como um item. Clique em deduplicar para remover todas as linhas duplicadas. A ferramenta mostra quantos duplicados foram encontrados e removidos. Pode escolher preservar a ordem original ou ordenar as linhas únicas. Copie o resultado limpo com um clique.

Opções de deduplicação

• Sensível a maiúsculas — 'Maçã' e 'maçã' são tratados como linhas diferentes (por defeito).
• Insensível a maiúsculas — 'Maçã' e 'maçã' são tratados como duplicados.
• Remover espaços em branco — remove espaços iniciais e finais antes de comparar.
• Ordenar resultado — ordena alfabeticamente as linhas únicas no resultado.

Casos de uso comuns

Limpar listas de email antes de enviar newsletters (os emails duplicados desperdiçam a quota de envio e incomodam os destinatários). Deduplicar listas de palavras-chave para pesquisa SEO. Remover entradas duplicadas de ficheiros CSV ou dados de folhas de cálculo. Limpar ficheiros de log para encontrar mensagens de erro únicas. Fundir listas de múltiplas fontes numa única lista única.

Perguntas frequentes

A ferramenta preserva a ordem original?

Sim, por defeito a ferramenta mantém a primeira ocorrência de cada linha única na sua posição original e remove os duplicados subsequentes. Se ativar a ordenação, o resultado é ordenado alfabeticamente. A opção de ordenação é útil quando a ordem original não importa e quer uma lista organizada.

Posso deduplicar com base numa parte de cada linha?

Esta ferramenta compara linhas inteiras. Para correspondência parcial (como deduplicar dados CSV com base numa coluna), precisaria de extrair essa coluna primeiro, deduplicar e depois fazer a correspondência de volta. Para casos simples, pode usar a opção de remover espaços em branco para tratar linhas que diferem apenas em espaços iniciais ou finais.