Очистка
Удаление дубликатов строк
Найдите повторы перед удалением, с полным контролем над тем, как регистр и пробелы влияют на сравнение.
Что считается дубликатом
Удаление дубликатов хорошо определено только после того, как вы решите, что значит «одинаковые», и настройки по умолчанию важнее алгоритма. Три вопроса определяют ответ.
Важен ли регистр? Для адресов email — нет: локальная часть технически чувствительна к регистру, но практически никогда не обрабатывается так, поэтому Hello@example.com и hello@example.com — одинаковый адрес. Для паролей или ID регистр абсолютно важен. По умолчанию здесь без учёта регистра.
Важны ли окружающие пробелы? Почти никогда. Строка с завершающим пробелом — то же значение, что и без него, а списки, скопированные из таблиц, полны ими. По умолчанию — обрезать перед сравнением.
Какая копия выживает? Этот инструмент сохраняет первое вхождение и сохраняет исходный порядок оставшихся, поэтому ваш список не молча пересортируется. Если вы также хотите сортировку — это отдельное действие.
Просмотрите перед удалением
Поведение по умолчанию большинства инструментов удаления дубликатов — вернуть более короткий список и ничего не сказать о пропавшем. Это нормально, когда вы доверяете входным данным, и рискованно, когда нет: случайный начальный пробел или неожиданная разница в регистре может означать, что инструмент удалил то, что было нужно, или сохранил то, что вы считали дубликатом.
Панель показывает, сколько строк удалено, сколько различных значений повторялось и какие значения повторялись чаще всего, прежде чем вы примените что-либо. «Оставить только дубликаты» инвертирует операцию, чтобы вы могли точно посмотреть, что повторяется — полезно для аудита рассылки или поиска случайных копирований в наборе ключевых слов.
Частые вопросы
Сохраняет ли инструмент первую или последнюю копию?
Первую, и порядок оставшихся строк сохраняется. Ваш список не молча пересортируется. Если вы также хотите сортировку — это отдельное действие.
Являются ли строки, различающиеся только регистром, дубликатами?
По умолчанию да, что обычно правильно для адресов email и ключевых слов. Включите «Учитывать регистр», когда регистр имеет значение — для паролей, ID и кода.
Могу ли я увидеть дубликаты перед удалением?
Да. Панель показывает, сколько строк повторяется и какие значения повторяются чаще всего, а «Оставить только дубликаты» инвертирует операцию, чтобы вы могли точно проверить, что повторяется.