Удаление дублей строк

Удаление дублирующихся строк, сортировка и очистка текста