Vai al contenuto

Togliere le righe doppie

Duplicate Line Remover

Elimina le righe ripetute, tiene solo quelle ripetute, oppure conta quante volte compare ciascuna.

Toglie da un elenco le righe ripetute, oppure mostra soltanto quelle che si ripetono, con le regole di confronto dichiarate invece che indovinate. Gli spazi in fondo alla riga e la normalizzazione Unicode sono i due motivi per cui due righe che sembrano identiche sopravvivono entrambe a una deduplicazione qualunque.

🔒 Funziona interamente nel tuo browserdedupelinesclean

Righe

Regole

Che cosa resta

Tiene la prima copia di ogni riga. L’elenco, senza ripetizioni.

Il confronto avviene dopo la normalizzazione Unicode, così una «à» copiata da un Mac corrisponde alla stessa scritta su Windows: si vedono uguali e sono due sequenze di byte diverse.

Risultato

Righe in entrata

6

Diverse

3

Ripetute

2

Righe in uscita

3

Come si usa

  1. Incollare l’elenco

    Un valore per riga: indirizzi e-mail, numeri d’ordine, nomi presi da una colonna di foglio di calcolo.

  2. Scegliere che cosa tenere

    L’elenco senza duplicati, solo i valori comparsi una volta sola, oppure solo quelli che si ripetevano. L’ultimo è quello che serve quando il problema sono i duplicati e non il rumore.

  3. Impostare le regole di confronto

    La distinzione tra maiuscole e minuscole e gli spazi intorno sono le due che cambiano di più la risposta. Attivando i conteggi si vede quante volte è comparso ogni valore, che è una domanda diversa e spesso quella vera.

Domande frequenti

Due nomi identici sono stati tenuti tutti e due

Prima cosa da controllare, gli spazi in fondo: basta attivare «ignorare gli spazi intorno». Se non è quello, i due sono sequenze di byte diverse che si vedono uguali, ed è esattamente il compito della normalizzazione Unicode; questo strumento confronta già dopo aver normalizzato, quindi un nome scritto su un Mac corrisponde allo stesso nome scritto su Windows.

Mantiene l’ordine originale?

Sì. La prima copia di ogni valore resta dov’era, le successive spariscono. Non viene ordinato niente, a meno di portare il risultato nello strumento di ordinamento.

Posso togliere i duplicati in base a una sola colonna di un CSV?

Non qui: qui si confrontano righe intere. Lo strumento per i duplicati nei CSV lo fa in base alla colonna chiave e lascia intatto il resto della riga, che è quello che serve per dei dati in tabella.

Può ricevere da

Dopo

Questi accettano ciò che produce questo strumento, così il risultato può passare direttamente.