Логотип Loona AutomationLoona Інструменти для розробників
Головна › Інструменти для розробників › Видалення дублів і очищення CSV

Видалення дублів і очищення CSV - Видаляйте повторювані рядки й упорядковуйте дані

Коротко: видалення дублів і очищення CSV прибирає дублікати рядків (за цілим рядком або за ключовими стовпцями, які ви обираєте), обрізає випадкові пробільні символи, відкидає порожні рядки й нормалізує кінці рядків — і показує точні кількості рядків до/після.

Об’єднані експорти та повторні імпорти залишають ті самі рядки двічі. Вставте CSV, виберіть, що вважати дублікатом, і отримайте чистий файл із підрахунками, які це підтверджують.

Приватно за задумом: усе в цьому інструменті відбувається на 100% у вашому браузері за допомогою JavaScript. Ваші вхідні дані ніколи не передаються на сервер, ніколи не зберігаються й ніколи не бачаться нами: закрийте вкладку — і все зникло.

Як користуватися видаленням дублів і очищенням CSV

  1. Вставте свій CSV.
  2. За бажанням назвіть ключові стовпці (номери від 1 або назви заголовків) — порожнє означає, що весь рядок має збігатися, щоб вважатися дублікатом.
  3. За потреби поставте позначки обрізання, видалення порожніх рядків або зіставлення без урахування регістру.
  4. Натисніть «Видалити дублі й очистити» та перевірте кількості до/після.
  5. Скопіюйте або завантажте очищений CSV.

Як це працює

Дублі виявляються за точним ключем, побудованим або з цілого рядка, або лише з ключових стовпців, які ви перелічуєте, з’єднаних керувальним символом, який не може трапитися у звичайних даних, — тож ab,c і a,bc ніколи не може зіштовхнутися. Перше входження кожного ключа зберігається, а пізніші рахуються як видалені. Обрізання відбувається перед зіставленням, тож " Ali " і "Ali" розпізнаються як те саме значення. Вивід серіалізується заново з кінцями рядків CRLF і правильними лапками. Рядок заголовка ніколи не видаляється як дублікат.

Часті запитання

Чи цей інструмент видалення дублів безкоштовний?

Так — цілком безкоштовно, без реєстрації, без обмеження.

Що вважається дублікатом?

За замовчуванням — рядки, у яких збігається кожна клітинка. Коли задано ключові стовпці — рядки, які збігаються лише за цими стовпцями, — перший зберігається.

Чи впливає обрізання на зіставлення?

Так, коли позначено: клітинки обрізаються перед визначенням дублікатів, тож випадкові пробіли не ховають дублікати.

Чи показуються кількості?

Так — загальні рядки до й після і точно, скільки дублікатів було видалено.

Чи завантажуються мої дані?

Ні. Очищення відбувається на 100% у вашому браузері.

Пов’язані інструменти для розробників

Вбудуйте цей інструмент на свій вебсайт — безкоштовно

Додайте цей інструмент на власний вебсайт або блог — він повністю безкоштовний, не потребує реєстрації й завжди показує останню версію. Скопіюйте код нижче та вставте його на свою сторінку туди, де має з’явитися інструмент. Збереження маленького рядка авторства “Powered by Loona Automation” під вбудованим елементом допомагає зберігати цей інструмент безкоштовним — але ви можете стилізувати або прибрати його; інструмент працює в будь-якому разі.