Удаление дубликатов CSV & очистка - Удаляйте повторяющиеся строки и приводите ваши данные в порядок
Объединённые экспорты и повторные импорты оставляют одни и те же строки дважды. Вставьте CSV, выберите, что считается дубликатом, и получите чистый файл с подсчётами, подтверждающими это.
Как использовать удаление дубликатов и очистку CSV
- Вставьте ваш CSV.
- При желании назовите ключевые столбцы (номера от 1 или имена заголовков) — пустое значение означает, что вся строка должна совпадать, чтобы считаться дубликатом.
- Отмечайте обрезку, удаление пустых строк или сопоставление без учёта регистра по мере необходимости.
- Нажмите «Удалить дубликаты & очистить» и проверьте подсчёты до и после.
- Скопируйте или скачайте очищенный CSV.
Как это работает
Дубликаты обнаруживаются с помощью точного ключа, построенного либо из всей строки, либо только из ключевых столбцов, которые вы перечислите, соединённых управляющим символом, который не может встретиться в обычных данных, — поэтому ab,c и a,bc никогда не может столкнуться. Первое вхождение каждого ключа сохраняется, а последующие считаются удалёнными. Обрезка происходит перед сопоставлением, поэтому " Ali " и "Ali" распознаются как одно и то же значение. Вывод повторно сериализуется с окончаниями строк CRLF и правильным заключением в кавычки. Строка заголовков никогда не удаляется как дубликат.
Часто задаваемые вопросы
Бесплатен ли этот инструмент удаления дубликатов?
Да — полностью бесплатно, без регистрации, без ограничений.
Что считается дубликатом?
По умолчанию строки, в которых совпадает каждая ячейка. При заданных ключевых столбцах — строки, которые совпадают только по этим столбцам, — сохраняется первая.
Влияет ли обрезка на сопоставление?
Да, когда отмечено: ячейки обрезаются перед обнаружением дубликатов, поэтому случайные пробелы не скрывают дубликаты.
Показываются ли подсчёты?
Да — общее количество строк до и после, и ровно то, сколько дубликатов было удалено.
Загружаются ли мои данные?
Нет. Очистка происходит на 100% в вашем браузере.
Связанные инструменты для разработчиков
Конвертер CSV в JSON
Преобразуйте CSV в массив JSON объектов — настоящий синтаксический анализатор, который обрабатывает запятые в кавычках и экранированные кавычки.
Конвертер JSON в CSV
Превращайте массив объектов JSON в чистый файл CSV — объединение всех ключей, надлежащие кавычки, один щелчок.
Просмотр CSV & редактор
Загрузите CSV в редактируемую сетку таблицы — редактируйте ячейки, сортируйте столбцы, добавляйте строки и скачивайте результат.