Al recopilar listas de suscriptores de correo, palabras clave o registros de acceso al servidor, es habitual encontrar entradas repetidas. Esta herramienta ofrece opciones de deduplicación tanto global como de líneas consecutivas:
Dada esta lista con entradas duplicadas:
apple
orange
apple
apple
banana
orange
Al aplicar la deduplicación global, se conserva únicamente la primera aparición de cada elemento único:
apple
orange
banana
Al cambiar a la deduplicación solo consecutiva, se mantienen las entradas repetidas que aparecen en distintas partes del archivo y se agrupan únicamente las repeticiones contiguas (por ejemplo, manteniendo separados el primer y el segundo bloque de apple).