Tworzenie list subskrybentów e-mail, słów kluczowych czy list dostępu do serwera często prowadzi do powstawania powtarzających się wpisów. To narzędzie oferuje zarówno globalne, jak i sąsiadujące usuwanie duplikatów:
Mając taką listę zawierającą zduplikowane wpisy:
apple
orange
apple
apple
banana
orange
Zastosowanie globalnej deduplikacji zachowuje tylko pierwsze wystąpienie każdego unikalnego elementu:
apple
orange
banana
Przełączenie na deduplikację tylko sąsiadujących wierszy zachowuje powtarzające się wpisy w różnych częściach pliku, ale scala te, które występują bezpośrednio po sobie (np. rozdzielając pierwszy i drugi blok wpisów apple).