Удаление повторяющихся строк

Удаление повторяющихся записей из списка по одному элементу в строке. Решите, должен ли регистр или окружающие пробелы влиять на совпадение, затем просмотрите оставшиеся строки, прежде чем использовать их.

Прежде чем начать
Ввод
Простой текстовый список с одной записью в строке.
Вывод
Список, сохраняющий первое совпадение.

Инструмент загрузки…

Обработано на вашем устройстве. Ваши файлы и текст не загружаются на наш сервер.

Как использовать этот инструмент

  1. Вставьте список с одним элементом в строке.
  2. Выберите регистр, пробелы и пустые строки.
  3. Проверьте количество удаленных строк и скопируйте результат.

Понять результат

При точном сопоставлении Apple и apple рассматриваются как разные записи. Сопоставление без учета регистра может рассматривать их как дубликаты. Опция обрезки по совпадению игнорирует окружающие пробелы во время сравнения, сохраняя при выводе исходный текст первой совпадающей строки.

Как удалить повторяющиеся строки, сохранив исходный порядок?

Вставьте список с одним элементом в строке и сгенерируйте результат. Первое совпадение сохраняется, а последующие совпадения удаляются. Для Apple, Banana и Apple в отдельных строках результатом будет Apple, за которым следует Banana. Сортировка не применяется, а написание и пробелы в сохраняемой строке остаются неизменными.

Почему в моем списке все еще есть две похожие строки?

По умолчанию при сопоставлении учитывается регистр, а окружающие пробелы имеют значение. Включите Игнорировать регистр букв для Apple и яблока, чтобы они соответствовали; включите опцию интервала, чтобы игнорировать пробелы в начале и конце при сопоставлении. Выберите, следует ли сохранить, удалить или оставить только первую пустую строку. Инструмент не сравнивает отдельные столбцы CSV и не решает, относятся ли разные имена к одному и тому же элементу.

Попробуйте образец

Попробуйте обработать образец инструментом выше и проверьте результат перед использованием собственных файлов.

sample-list.txt ↓

Если результат не соответствует ожиданиям

Два похожих имени не были объединены.

Сопоставление основано на строках и выбранных правилах интервалов/регистра. Это не означает, что два разных написания являются одним и тем же человеком или анализируют столбцы CSV. Проверьте результат перед заменой списка источников.

Следующий полезный инструмент: Сравнение текста →

Важные ограничения

  • Соответствует полным строкам, а не похожим именам или записям базы данных. Столбцы CSV не анализируются.
  • Максимум 100 000 символов. Прежде чем заменять исходный список, просмотрите параметры интервала и регистра.

Часто задаваемые вопросы

Будет ли мой список отсортирован?

Нет. Поведение первого выпуска сохраняет порядок первого появления каждой сохраненной строки.

Дублируются ли пустые строки?

Обработка пустых строк – это отдельная опция. Выберите, следует ли сохранить, уменьшить или удалить пустые строки перед обработкой.

Вопросы или исправление? mrkcal@mrkcal.com

Прокрутить вверх