Si necesitas encontrar texto duplicado dentro de los ficheros de texto, con el comando uniq de Linux podrás hacerlo así...