Как пользоваться

Вставьте список в поле ввода, разместив каждый элемент на отдельной строке.
Выберите, учитывать ли регистр и пробелы по краям, а также нужно ли удалять пустые строки.
Выберите, какое вхождение каждой повторяющейся строки оставить — первое или последнее.
Скопируйте очищенный список из поля результата. В сводке указано, сколько строк удалено.

Как это работает

Две строки считаются дубликатами, если после применения выбранных параметров их текст совпадает. Если включить «Не учитывать регистр», строки «Apple» и «apple» будут считаться одинаковыми. Регистр сравнивается с учётом языка страницы, поэтому в турецком языке «İzmir» и «izmir» совпадают. Если включить «Не учитывать пробелы в начале и конце строк», строки « cherry» и «cherry» совпадут. Эти параметры влияют только на сравнение: сохранённая строка останется в точности такой, как в исходном тексте.

Порядок строк не меняется. При выборе «Первое вхождение» строка остаётся на месте первого появления, а последующие копии удаляются. При выборе «Последнее вхождение» удаляются предыдущие копии, а строка остаётся на месте последнего появления. Это удобно, когда более поздние записи актуальнее. Чтобы также отсортировать список, после этого воспользуйтесь инструментом «Сортировка строк».

Пустые строки сравниваются так же, как любые другие, поэтому несколько пустых строк сокращаются до первой. Включите «Удалить пустые строки», чтобы удалить их все, в том числе строки, состоящие только из пробелов. Распознаются окончания строк Windows (CRLF), старого Mac (CR) и Unix (LF); в результате используются окончания строк LF.

Примеры

Очистка списка рассылки

В списке рассылки, собранном из двух источников, есть адреса «anna@example.com» и «Anna@Example.com ». Если включить «Не учитывать регистр» и «Не учитывать пробелы», останется только первый адрес — в исходном написании.

Сохранение последней записи

В журнале изменений статуса «server-2» указан в строках 3 и 40. При выборе «Последнее вхождение» копия из строки 3 удаляется, а server-2 остаётся на более позднем месте.

Уникальные ключевые слова

Вставьте в одно поле списки ключевых слов, собранные с помощью разных инструментов, чтобы удалить повторы перед импортом в электронную таблицу.

Часто задаваемые вопросы

Изменится ли порядок строк?

Нет. Строки сохраняют исходный порядок — удаляются только повторы. Если нужен алфавитный порядок, отсортируйте результат отдельно.

Почему две одинаково выглядящие строки не удаляются?

В них есть незаметное различие: например, пробел в конце, табуляция, неразрывный пробел или другой регистр букв. Включите «Не учитывать регистр» и «Не учитывать пробелы» или сначала очистите текст с помощью инструмента «Очистка текста».

Можно ли удалить повторяющиеся слова внутри строки?

Нет, сравниваются строки целиком. Чтобы удалить повторяющиеся слова, сначала разместите каждое слово на отдельной строке — например, с помощью функции разделения в инструментах для строк.

Какой длины может быть список?

Фиксированного ограничения нет. Списки из сотен тысяч строк обрабатываются, хотя на старых телефонах это может занять некоторое время.

Конфиденциальность

Список обрабатывается только в вашем браузере. Он не загружается на сервер, не сохраняется и не включается в аналитику.