VELDAT

Удалить дубликаты строк

Текст обрабатывается в браузере и не отправляется на сервер.

Оставляет каждую строку списка один раз, в порядке первого появления. Сравнивать можно точно или без учёта регистра и лишних пробелов; пустые строки не трогаются.

Строк 0 · Символов 0 · Без пробелов 0 · Слов 0 · UTF-8

Шаги

Применённые операции появятся здесь — цепочку можно сохранить и повторить на новом тексте.

Дальше обычно делают

Зачем удалять дубликаты строк

Повторы появляются, когда список собирают из нескольких источников: склеивают выгрузки из 1С за разные месяцы, объединяют клиентов из CRM и Excel, копируют участников из нескольких чатов. Если их не убрать, клиент получит рассылку дважды, в отчёте появится лишняя позиция, а число контрагентов, артикулов или адресов окажется завышенным.

Часто дубли отличаются только регистром или пробелами, поэтому для списков, собранных вручную, обычно выбирают нестрогое сравнение. Если строки различаются опечатками, поможет операция Удалить похожие строки. А чтобы увидеть, что именно повторялось, а не просто убрать повторы, есть Оставить только повторы или уникальные.

Как пользоваться

  1. Вставьте список в поле или откройте файл .txt или .csv до 10 МБ.

  2. В параметрах операции выберите сравнение: точное или без учёта регистра и пробелов.

  3. Нажмите «Применить», затем скопируйте результат или скачайте его файлом.

Пример

Было
Москва
Казань
Москва
Самара
Казань
Тверь
Стало
Москва
Казань
Самара
Тверь

Вопросы и ответы

Какая строка остаётся, если есть повторы?

Первая. Следующие такие же строки удаляются, порядок оставшихся не меняется.

Считаются ли дублями «Москва» и «москва»?

При точном сравнении нет. Чтобы считать их одной строкой, выберите сравнение «Без учёта регистра и пробелов»: тогда не важны и лишние пробелы внутри и по краям строки.

Что происходит с пустыми строками?

Остаются на своих местах. Убрать их можно следующей операцией — Удалить пустые строки.

Как удалить дубли из столбца Excel?

Скопируйте столбец, вставьте сюда, удалите дубли и вставьте результат обратно в Excel. Если строк больше миллиона или повторы нужно искать по нескольким столбцам сразу, откройте файл в приложении Открыть большую таблицу и выполните запрос SELECT DISTINCT.

Уходит ли список на сервер?

Нет. Текст обрабатывается в браузере и никуда не отправляется, поэтому так можно чистить и списки клиентов с контактами.

Задача сложнее инструмента

Если такие правки приходится делать каждый день, это можно обсудить на консультации: выберите время, и вы получите письменный итог с конкретными шагами.

Записаться на консультацию