Что делает инструмент
Вы вставляете текст — по одной записи на строку, — а инструмент находит повторяющиеся строки и оставляет только первое вхождение каждой. Из списка в тысячу строк с повторами получается чистый список уникальных записей.
Дополнительно можно отсортировать строки по алфавиту, удалить пустые строки и обрезать лишние пробелы по краям. Все операции выполняются одним нажатием кнопки «Обработать текст».
Всё работает локально в браузере: текст никуда не загружается, регистрация не нужна. После обработки видна статистика: сколько строк было, сколько осталось и сколько удалено.
Подготовка текста
Главное правило: одна запись — одна строка. Если ваш список разделён запятыми или пробелами, сначала разбейте его по строкам — иначе инструмент увидит одну длинную строку.
Загляните в начало и конец строк: случайные пробелы делают строки разными для инструмента. Включите опцию «Обрезать пробелы» — и такие «псевдодубли» тоже найдутся.
Подумайте про регистр: «Москва» и «москва» — это дубли или разные записи? Если дубли — включите «Игнорировать регистр при поиске дублей».
Обработка за три шага
Вставьте текст в поле ввода. С большими списками — десятки тысяч строк — инструмент справляется без проблем.
Отметьте нужные операции галочками: удаление дублей, сортировка, удаление пустых строк, обрезка пробелов, игнорирование регистра. Комбинируйте их под свою задачу.
Нажмите «Обработать текст». Результат появится в поле вывода вместе со статистикой: сразу видно, сколько повторов нашлось.
Что делать с результатом
Готовый текст можно скопировать одной кнопкой «Копировать результат» и вставить куда нужно. В таблицу, в рекламный кабинет, в письмо.
Для больших списков удобнее скачать файл: кнопка «Скачать .txt» сохраняет результат текстовым файлом на устройство.
Исходный порядок строк сохраняется — удаляются только повторы. Если включили сортировку, строки встанут по алфавиту от А до Я.
Если чистите список регулярно — например, еженедельную выгрузку, — сохраните выбранный набор галочек в заметке. В следующий раз не придётся вспоминать настройки.
Шаги
- Откройте инструмент «Удаление дублей» на cubtools.com.
- Подготовьте текст: одна запись на строку.
- Вставьте текст в поле ввода.
- Отметьте нужные опции: удаление дублей, сортировка, обрезка пробелов.
- Нажмите «Обработать текст».
- Проверьте статистику: сколько строк удалено.
- Скопируйте результат кнопкой или скачайте его как .txt.
Частые вопросы
Это бесплатно?
Да, полностью и без регистрации. Ограничений на размер текста и число обработок нет.
Мой текст отправляется на сервер?
Нет. Обработка выполняется в браузере — текст не покидает устройство.
Сохранится ли порядок строк?
Да, если не включена сортировка: первое вхождение каждой строки остаётся на своём месте.
Справится ли с большим списком?
Да, десятки тысяч строк обрабатываются мгновенно в современных браузерах.