Logo Loona AutomationLoona Narzędzia deweloperskie
Strona główna › Narzędzia deweloperskie › Usuwanie duplikatów i czyszczenie CSV

Usuwanie duplikatów i czyszczenie CSV - Usuwaj zduplikowane wiersze i porządkuj dane

W skrócie: Deduplikacja i czyszczenie CSV usuwa zduplikowane wiersze (według całego wiersza lub wybranych kolumn kluczowych), przycina zabłąkane białe znaki, odrzuca puste wiersze oraz normalizuje zakończenia linii - i pokazuje dokładne liczby wierszy przed/po.

Połączone eksporty i powtarzane importy zostawiają te same wiersze dwukrotnie. Wklej CSV, wybierz, co liczy się jako duplikat, i otrzymaj czysty plik wraz z liczbami, które to dowodzą.

Prywatne z założenia: wszystko w tym narzędziu dzieje się w 100% w przeglądarce przy użyciu JavaScript. Dane wejściowe nigdy nie są przesyłane na serwer, nigdy nie są przechowywane i nigdy nie są przez nas widziane - zamknij kartę, a wszystko znika.

Jak korzystać z Usuwania duplikatów i czyszczenia CSV

  1. Wklej swój CSV.
  2. Opcjonalnie nazwij kolumny kluczowe (numery od 1 lub nazwy nagłówków) - pusto oznacza, że cały wiersz musi się zgadzać, aby liczyć się jako duplikat.
  3. Zaznacz przycinanie, usuwanie pustych wierszy lub dopasowywanie bez względu na wielkość liter według potrzeb.
  4. Kliknij Usuń duplikaty i wyczyść oraz sprawdź liczby przed/po.
  5. Skopiuj lub pobierz wyczyszczony CSV.

Jak to działa

Duplikaty są wykrywane przy użyciu dokładnego klucza zbudowanego albo z całego wiersza, albo tylko z kolumn kluczowych, które wskażesz, połączonych znakiem kontrolnym, który nie może wystąpić w normalnych danych - więc ab,c oraz a,bc nigdy nie mogą się zderzyć. Pierwsze wystąpienie każdego klucza jest zachowywane, a późniejsze są liczone jako usunięte. Przycinanie odbywa się przed dopasowywaniem, więc " Ali " oraz "Ali" są rozpoznawane jako ta sama wartość. Wyjście jest ponownie serializowane przy zakończeniach linii CRLF oraz poprawnym cytowaniu. Wiersz nagłówka nigdy nie jest usuwany jako duplikat.

Często zadawane pytania

Czy to narzędzie do deduplikacji jest bezpłatne?

Tak - całkowicie za darmo, bez rejestracji, bez limitu.

Co liczy się jako duplikat?

Domyślnie wiersze, których każda komórka się zgadza. Przy ustawionych kolumnach kluczowych wiersze, które zgadzają się tylko w tych kolumnach - pierwszy jest zachowywany.

Czy przycinanie wpływa na dopasowywanie?

Tak, gdy zaznaczone: komórki są przycinane przed wykrywaniem duplikatów, aby zabłąkane spacje nie ukrywały duplikatów.

Czy wyświetlane są liczniki?

Tak - łączne wiersze przed i po oraz dokładnie ile duplikatów zostało usuniętych.

Czy moje dane są przesyłane?

Nie. Czyszczenie odbywa się w 100% w przeglądarce.

Powiązane narzędzia deweloperskie

Osadź to narzędzie na swojej stronie — za darmo

Dodaj to narzędzie do własnej strony internetowej lub bloga — jest całkowicie bezpłatne, nie wymaga rejestracji i zawsze pokazuje najnowszą wersję. Skopiuj poniższy kod i wklej go na swoją stronę tam, gdzie narzędzie ma się pojawić. Zachowanie małej linii kredytowej “Powered by Loona Automation” pod osadzeniem pomaga utrzymać to narzędzie bezpłatnym — ale możesz ją dowolnie stylować lub usunąć; narzędzie działa tak czy inaczej.