uniq

uniq es un conversor de cadena encargado de eliminar lineas duplicadas. Normalmente reacciona a mayusculas y minusculas.

Tambien podr

Opciones

-c	Contea los duplicados
-d	Solo muestra las lineas duplicadas.
-u	Solo muestra lineas unicas
-i	Ignora mayusculas/minusculas