Дедупликация на CSV – премахване на дублирани редове
Дедупликацията на CSV намира и премахва повтарящи се редове от CSV данни. Сравнявайте редовете по всички колони или по избрано подмножество по индекс, после изберете дали да запазите първото или последното срещане. По избор можете да сравнявате стойностите без значение на главни и малки букви или след подрязване. Премахнатите редове се изброяват за преглед, а можете да копирате или изтеглите уникалния набор.
Дедупликацията на CSV е инструмент във вашия браузър за намиране и премахване на дублирани редове от CSV данни. Позволява ви да сравнявате всяка колона или да изберете подмножество от колони по индекс, после да изберете кое съвпадащо срещане да запазите. Резултатът е уникален набор от редове, а премахнатите редове се изброяват, за да можете да прегледате какво се е променило, преди да копирате или изтеглите резултата.
За да използвате Дедупликацията на CSV, поставете или въведете вашия CSV вход и настройте опциите за сравнение. Сравняването може да бъде без значение на главни и малки букви, а по избор можете да подрязвате стойностите преди сравняване. Избирането на всички колони прави ред да съвпада въз основа на пълния си набор от стойности; избирането на избрани индекси основава съвпадението само на тези колони. Настройката за запазване на първото или последното контролира кой съвпадащ ред остава.
CSV е текстов формат, често използван за представяне на редове и колони, така че повтарящи се записи могат да се появят, когато данните се обединят или експортират повече от веднъж. Дедупликацията на CSV не преобразува данните в друг формат: тя филтрира повтарящите се редове според избраното от вас правило за сравнение. Това помага, когато имате нужда от уникален CSV, като запазва структурата му от колони.
Обработката работи изцяло във вашия браузър; входните ви данни не се изпращат до сървър. Инструментът няма нужда от сървър, така че след зареждане на страницата продължава да работи офлайн. Можете да дедупликирате данни, без да инсталирате нищо локално или да изпращате вътрешно съдържание до услуга на трета страна. Разработчици и DevOps инженери могат да го използват за рутинно почистване на машината и браузъра, които вече имат.
Стъпка 1: Поставете или въведете съдържанието си в CSV. Така инструментът получава редовете, които да провери за дубли.
Стъпка 2: Изберете как да сравнявате редовете. Сравнявайте всички колони или изберете подмножество от колони по индекс.
Стъпка 3: Настройте кой съвпадащ ред да запазите. Изберете първото или последното срещане и по избор сравнявайте без значение на главни и малки букви или след подрязване.
Стъпка 4: Прегледайте премахнатите редове, после копирайте резултата или изтеглете уникалния набор.
Случай на употреба: Почистете CSV експорт, който съдържа повтарящи се записи, преди да го използвате в друг работен процес. Изберете дали дубликатът се определя от целия ред или от избрани индекси на колони.
Случай на употреба: Дедупликирайте данни, обединени от няколко CSV файла. Запазете първото или последното съвпадащо срещане, за да контролирате кой ред остава.
Случай на употреба: Подгответе уникален списък въз основа на конкретни полета, а не на всяка колона. Сравняването по избрани индекси помага, когато другите колони се различават, но не бива да определят дали редовете са дубли.
Случай на употреба: Уеднаквете сравненията, когато стойностите се различават само по големина на буквите или по околни празни разстояния. Включете сравняване без значение на главни и малки букви или подрязване, за да приложите тези правила за сравнение.
Случай на употреба: Одитирайте почистването, преди да използвате резултата. Прегледайте изброените премахнати редове, за да видите кои записи са изключени.
Случай на употреба: Обработете рутинна задача за дедупликация на CSV в браузъра, без да инсталирате нищо локално. Това е полезно, когато работите на машина без обичайните си инструменти.