CSV 데이터 정리 도구
CSV 중복 행 제거 및 데이터 정리: 이름, 이메일, 불필요한 공백 제거
CSV 또는 Excel 파일을 업로드하면 중복 행과 빈 행을 없애고, 불필요한 공백과 보이지 않는 특수문자를 제거하며, 이메일은 소문자로, 이름 표기는 통일하여 돌려드립니다. 행 전체가 완전히 같거나 이메일·회사명이 겹치는 행을 중복으로 처리할 수 있으며, "ACME, Inc."와 "acme inc" 같은 유사 일치 항목도 동일한 값으로 인식합니다. 어떤 행이 어느 행과 중복되어 제거되었는지 정리한 목록도 함께 제공됩니다. 최대 1,000행까지의 파일은 전체 무료이며, 더 큰 파일은 $5 1회 결제로 이용하실 수 있습니다.
작업 완료 후 제공되는 파일
contacts.clean.csv와 같이 깔끔하게 정리된 파일과 제거된 행 목록을 다운로드할 수 있습니다. 결제 전 화면에서 중복 행, 빈 행, 수정된 셀의 개수와 함께 정리된 앞부분 행을 미리 확인하실 수 있습니다.
- CSV로 올리면 동일한 구분자, 인코딩, 헤더를 유지한 CSV로 출력됩니다. Excel로 올리면 서식과 수식을 제외하고 깔끔한 값만 담긴 Excel 시트로 출력됩니다(수식의 계산 결과값은 유지됩니다).
- 중복된 데이터 중 첫 번째 행은 원래 위치에 그대로 유지되고, 이후에 나타나는 중복 행만 제거됩니다.
- 모든 셀의 앞뒤 공백을 다듬고, 연속된 공백을 하나로 줄이며, 줄 바꿈 방지 공백(NBSP), 너비가 없는 특수문자 및 제어 문자를 제거합니다. Email과 같은 열의 텍스트는 소문자로 변환됩니다.
- 이름 관련 열(Name, Company, Customer, Contact, Vendor 또는 직접 지정한 열): 전체 대문자나 전체 소문자로 입력된 단어는 각 단어 첫 글자만 대문자로 정리되어 "maria GARCIA"는 "Maria Garcia"로 바뀌며, Inc., LLC, Ltd, GmbH 같은 회사 형태 접미사 표기도 하나로 통일됩니다.
- 제거된 각 행과 원래 값, 그리고 중복의 원인이 된 원본 행 번호가 담긴 CSV 파일을 함께 제공합니다.
AI 챗봇과 이 도구의 차이점
코드 실행 도구를 갖춘 AI 챗봇도 작은 파일의 중복을 제거할 수 있고, 스프레드시트 프로그램도 완전히 일치하는 중복은 제거해 줍니다. 하지만 유사 일치 항목 처리, 제거된 내역 기록, 복사해 붙여넣기엔 너무 큰 파일 처리는 이들만으로 해결하기 어렵습니다.
| 상황 | AI 챗봇 | 이 도구 |
|---|---|---|
| 명백한 중복이 포함된 짧은 목록 | 대체로 처리 가능 | 완벽 처리, 최대 1,000행까지 무료 |
| 100,000행 | 대화창에서 한 번에 읽지 못하며, 직접 검증해야 하는 코드를 작성해야 함 | $5에 파일 전체를 최대 200,000행까지 정리 |
| "ACME, Inc."와 "acme inc" | 아주 구체적으로 요청하지 않으면 서로 다른 데이터로 취급 | 유사 일치 옵션을 켜면 동일한 데이터로 인식 |
| 같은 사람이지만 대문자로 입력된 이메일 | 놓치는 경우가 많음 | 이메일을 소문자로 변환하여 비교 |
| 무엇이 제거되었는가? | 행 단위로 정확히 알려주는 경우가 드묾 | 제거된 모든 행과 중복 대상 행이 기록된 CSV 제공 |
| 다음 달에 다시 실행할 때 | 대화를 새로 시작해야 하며 결과 규칙이 달라질 수 있음 | 매번 항상 일관된 규칙 적용 |
CSV에서 중복 데이터를 제거하는 방법
-
1
파일 업로드 및 일치 기준 선택
.csv, .tsv, .xlsx 파일을 끌어다 놓으세요. 행 전체를 기준으로 할지, 이메일 같은 특정 열을 중복 기준으로 할지 선택하고, 유사 일치를 포함할지 지정합니다.
-
2
개수 및 앞부분 행 확인
발견된 중복 행과 빈 행의 수, 정리된 앞부분 행을 미리 확인하세요. 작은 파일은 전체 무료입니다.
-
3
다운로드
정리된 파일과 제거된 행 목록을 다운로드하세요. 1,000행을 초과하는 파일은 $5에 전체 잠금 해제 후 다운로드할 수 있습니다.
유사 중복 제거가 까다로운 이유
단순 일치 비교 방식은 글자 하나하나를 그대로 대조하므로 "ACME, Inc."와 "acme inc", 혹은 "[email protected]"과 "[email protected]"을 서로 다른 데이터로 남겨둡니다. 연락처 목록이라면 동일 인물에게 이메일이 두 번 발송되고, 거래처 목록이라면 한 회사에 계정이 두 개 생기게 됩니다.
이 도구는 지정한 열을 바탕으로 각 행의 비교 기준 키를 생성합니다. 유사 일치 옵션을 켜면 대소문자, 공백, 문장 부호를 무시하며, 회사 열에서는 Inc, LLC, Ltd, GmbH, S.A. 같은 법인 표기 접미사도 건너뜁니다. 키가 일치하는 행은 중복으로 처리되어 첫 번째 행만 남고 나머지는 별도 목록에 기록됩니다. 기준 열이 비어 있는 행끼리는 중복으로 처리되지 않습니다.
주요 활용 사례
- CRM이나 이메일 마케팅 도구에 가져오기 전 연락처 및 리드 목록 정리
- 서로 다른 시스템에서 내보낸 데이터를 병합하고 겹치는 데이터 제거
- 동일한 회사명이 여러 방식으로 입력된 거래처 및 고객 목록 정리
- 중복 응답이 포함된 설문조사 또는 회원가입 내보내기 데이터 정리
- VLOOKUP 수식 적용이나 데이터베이스 임포트 전에 빈 행과 불필요한 공백 제거
- 신청서에 모두 대문자로 잘못 입력된 이름 서식 바로잡기
선택 사항: AI를 활용한 유사 이름 및 오타 교정
일반적인 규칙만으로는 "Intl Business Machines"와 "IBM"이 같은 회사라는 사실을 알아낼 수 없습니다. AI 옵션을 선택하면 각 이름 열의 고유한 이름들이 AI 모델로 전송되어 회사나 인물당 하나의 일관된 표기로 통일하고 명백한 오타를 수정합니다(확신이 없는 이름은 변경하지 않고 유지). 이 과정은 중복 행을 찾은 후에 실행되므로 결과 파일의 표기 방식만 바뀌며 제거되는 행에는 영향을 주지 않습니다. 이 옵션을 켜지 않으면 어떤 데이터도 AI 모델에 전송되지 않습니다.
알아두어야 할 제한 사항
작업 1회당 파일 1개, 최대 100 MB까지 지원되며, Excel의 경우 헤더 행이 있는 첫 번째 시트가 사용됩니다. 1회 결제 시 최대 200,000행까지, 무제한 플랜은 최대 500,000행까지 처리됩니다(제한을 초과하는 행은 변경 없이 파일 끝에 그대로 복사됩니다). "DeShawn"이나 "McKenzie"처럼 대소문자가 섞인 고유 이름은 그대로 유지되며, IBM처럼 짧은 대문자 회사명은 약어로 인식되어 보존됩니다.
언어·상황별
온라인 CSV 중복 제거
CSV를 업로드하면 중복 행을 정리하고 각 데이터의 첫 번째 행만 남겨 돌려드립니다. 대소문자, 불필요한 공백, 문장...
더 보기 →대용량 Excel 파일 중복 행 제거
.xlsx 파일을 업로드하면 중복 행이 제거되고 첫 번째 항목만 남은 깔끔한 .xlsx 파일과, 제거된 모든 행 및 해당 행...
더 보기 →이메일 기준으로 연락처 목록 중복 제거
연락처 목록을 CSV 또는 Excel 파일로 업로드하면 이메일 주소당 하나의 행으로 깔끔하게 정리해 드립니다. 이메일은...
더 보기 →엉망인 CSV 데이터 정리
정리되지 않은 CSV나 Excel 파일을 업로드하면 모든 셀의 앞뒤 공백 제거, 연속 공백 정리, 보이지 않는 문자 삭제,...
더 보기 →요금 안내
소용량 파일
무료
최대 1,000행까지의 파일은 다운로드를 포함해 전체 무료로 정리해 드립니다. 더 큰 파일의 경우 회원가입 없이 화면에서 정리된 개수와 앞부분 행을 미리 확인하실 수 있습니다.
파일 전체
$5
파일 1개당 1회 결제: 최대 200,000행 처리 및 제거된 행 목록 제공. 구독 없음, 만료 기한 없음.
무제한 플랜
주당 $19
사이트 내 모든 도구 이용 가능, 최대 500,000행 파일 지원.
자주 묻는 질문
ChatGPT로 CSV의 중복을 제거할 수 있나요?
작은 파일이라면 보통 코드를 작성해서 처리할 수 있습니다. 하지만 대용량 파일은 대화창에 다 들어가지도 않고, "ACME, Inc."와 "acme inc"처럼 유사한 데이터는 놓치기 쉬우며, 무엇이 삭제되었는지 목록으로 확인하기도 어렵습니다. 이 도구는 모든 행에 동일한 규칙을 적용하고 삭제된 모든 행의 목록을 제공합니다.
중복 데이터 중 어떤 데이터가 남나요?
원래 위치에 있던 첫 번째 데이터가 유지됩니다. 이후에 나오는 중복 데이터는 삭제되며, 어떤 행과 중복되었는지 행 번호와 함께 목록으로 표시됩니다.
이메일 기준으로만 중복을 제거할 수도 있나요?
네, 가능합니다. "열 기준"을 선택한 후 이메일(Email)을 입력하거나, 이름, 성, 회사처럼 데이터를 식별할 수 있는 열을 지정하세요. 해당 열이 비어 있는 행은 삭제되지 않고 유지됩니다.
어떤 경우가 '유사 일치'로 처리되나요?
유사 일치 기능을 켜면 대소문자, 공백, 문장 부호의 차이를 무시합니다. 회사명 열에서는 Inc., LLC, Ltd, GmbH 같은 법인 형태 표기의 차이도 동일하게 인식합니다.
기존 데이터의 내용이 변형되나요?
안내된 항목에 한해서만 정리됩니다. 불필요한 공백과 보이지 않는 문자 제거, 이메일 소문자 변환, 전부 대문자나 소문자로 된 이름의 첫 글자 대문자화, 회사 법인 표기 통일, 그리고 중복 및 빈 행 제거만 진행됩니다. 그 외의 데이터는 원래 그대로 유지됩니다.
얼마나 큰 파일까지 정리할 수 있나요?
$5 1회 결제로 최대 200,000행까지, 무제한 플랜으로는 최대 500,000행까지 가능하며, 파일 크기는 최대 100 MB까지 지원합니다.
무료로 이용할 수 있나요?
최대 1,000행까지의 파일은 다운로드를 포함해 완전 무료입니다. 그보다 큰 파일은 중복 건수와 첫 부분 미리보기가 무료로 제공되며, 정리된 전체 파일은 $5 1회 결제로 다운로드할 수 있습니다.
파일의 보안과 개인정보는 안전한가요?
작업 결과는 본인만 열어볼 수 있습니다. 데이터 정리는 자체 서버에서 진행되며, AI 옵션을 선택하지 않는 한 어떤 데이터도 AI 모델로 전송되지 않습니다. AI 옵션을 켜더라도 이름 열에 있는 고유한 이름만 전송됩니다. 회원가입 없이 업로드한 작업은 7일 후 자동 삭제되며, 언제든지 직접 즉시 삭제할 수도 있습니다.
2026년 10월 25일 업데이트 · APPFACT STUDIO LTD