Удалить дубли строк CSV
По всей строке или выбранному столбцу.
Можно перетащить файл сюда
CSVTSVTXT
UTF-8 · до 1 МБ · CSV и TSV
Вставить CSV вручную
Как пользоваться
- Откройте исходные файлы или добавьте данные.
- Выберите правило совпадения.
- Проверьте результат и скачайте его на устройство.
Пример
Уникальные города
Город;Код Вологда;35 Вологда;35 Пермь;59
Сравните всю строку, сохранив заголовок.
Город;Код Вологда;35 Пермь;59
Форматы и ограничения
Очистите список контактов, товаров или выгрузку от совпадающих записей. Укажите правило совпадения перед обработкой.
- На входе
- CSV UTF-8, TSV UTF-8, Вставленный текст
- Результат
- CSV, TSV
Таблица без повторов по всей строке или выбранному столбцу; сохраняется первое вхождение.
- Один файл до 1 000 000 байт; содержимое до 200 000 символов.
- До 5000 строк, 200 столбцов и 100 000 ячеек.
- Разделители: запятая, точка с запятой и табуляция. Экспорт до 1 миллиона символов.
Выберите ключ сравнения и учёт регистра. Разные строки с одинаковым ключом могут считаться дублями.
Обработка выполняется на вашем устройстве. Файлы и введённые данные не отправляются серверу; после обновления страницы редактор сбрасывается.
Обработка в памяти вашего браузера. Файлы не передаются серверу; после обновления страницы данные редактора исчезают. CSV или TSV в UTF-8, до 1 МБ и 200 000 символов на исходник. До 5 000 строк, 200 столбцов и 100 000 ячеек. XLSX не поддерживается. Формулы можно сохранить как текст с апострофом; проверьте результат в своей программе.
Вопросы об инструменте
Какая из повторных строк останется?
Сохраняется первая встреченная строка, последующие с тем же ключом исключаются.
Можно ли сравнить только один столбец?
Да. Отключите сравнение всей строки и укажите номер столбца. Проверьте, что потеря остальных значений допустима.
Считаются ли крайние пробелы частью ключа CSV?
Да. В этом инструменте нет настройки обрезки пробелов при сравнении: «код» и « код » различаются. Предварительно исправьте ячейки, если это нежелательно.
Что произойдёт с несколькими пустыми значениями выбранного столбца?
Они имеют одинаковый ключ и считаются дублями. Останется первая такая строка, даже если другие её ячейки отличаются.
Может ли совпадение заголовка и строки данных удалить строку?
При включённой настройке заголовков первая строка исключается из сравнения и сохраняется отдельно. Совпадение с ней не делает строку данных дублем.
Объединятся ли коды 00123 и 123?
Нет. Значения сравниваются как строки, без числового преобразования. Ведущие нули сохраняют различие ключей.