상품 CSV에서 반복되는 이미지 URL 찾기

상품 데이터의 중복 이미지 URL

중복 이미지 URL이란

중복 이미지 URL은 상품 파일의 여러 행에 나타나는 하나의 이미지 주소를 말합니다. 두 행이 모두 이미지 열에 https://cdn.example/img/blue-shirt.jpg를 적었다면 그 두 행은 이미지 URL을 공유합니다. ImageDup은 그 주소로 행을 묶고, 같은 주소가 한 번 넘게 쓰인 그룹을 모두 보여 줍니다.

이것은 텍스트 비교입니다. ImageDup은 URL 문자열을 읽어 몇 가지 안전한 조정 — 공백 제거, 스킴과 도메인 소문자화, #프래그먼트 제거 — 을 한 뒤 결과가 같은지 확인합니다. 이미지를 열거나 내려받거나 픽셀을 비교하지 않습니다. 두 행은 이미지 주소가 일치할 때만 일치합니다.

카탈로그에 이미지 URL 반복이 생기는 이유

대부분의 이미지 URL 반복은 의도적인 선택이 아니라, 상품 데이터가 만들어지고 내보내지는 방식에서 생기는 부수 효과입니다.

• 변형 행. 많은 플랫폼이 크기나 색상마다 한 행씩 내보냅니다. 다섯 가지 크기의 셔츠는 다섯 행이 되고, 크기 변형에 별도 사진이 없으면 다섯 행 모두 같은 이미지를 가리킵니다.
• 복사로 만든 상품 등록. 시간을 아끼려고 기존 상품을 복제해 새 상품을 만들면서 이미지 필드를 바꾸지 않습니다.
• 플레이스홀더 이미지. ‘준비 중’ 이미지나 카테고리 공통 이미지가 실제 사진이 없는 모든 상품에 배정됩니다. 수백 개 행이 하나의 플레이스홀더를 공유하기도 합니다.
• 피드 조인과 재내보내기. 여러 테이블을 조인해 피드를 만들거나, 교체가 아니라 추가하는 시스템에서 반복해 내보내면, 같은 상품이 같은 이미지로 여러 행에 나타날 수 있습니다.
• 마이그레이션 잔여물. 플랫폼을 옮기면 여러 옛 필드가 하나의 새 이미지 열로 매핑되어 반복이 생기는 경우가 많습니다.

이미지 URL 반복이 문제가 아닐 때

이미지 URL 반복이 자동으로 문제가 되는 것은 아닙니다. 흔한 이유도 있습니다.

• 사진상 구분이 되지 않아 상품과 그 변형이 실제로 한 장의 사진을 공유하는 경우 — 세 가지 사이즈의 반지, 같은 표지의 양장본과 문고본 책 등.
• 번들이나 선물 세트가 의도적으로 구성품의 사진을 재사용하는 경우.
• 같은 실물에 대한 두 개의 등록, 예를 들어 일반 SKU와 프로모션 SKU가 의도적으로 한 이미지를 쓰는 경우.
• 브랜드가 통일감 있는 소규모 라인 전체에 하나의 연출 이미지를 쓰는 경우.

ImageDup은 이런 경우를 대신 판단하지 않습니다. 이미지가 어디에서 재사용되고 서로 다른 상품 ID가 몇 개 관련되는지 보여 줄 뿐이며, 그 재사용이 의도된 것인지는 여러분이 판단합니다.

중복과 검토

ImageDup은 반복되는 이미지 URL을 다음 두 그룹 중 하나로 분류합니다.

• 중복 — 같은 이미지 URL이 서로 다른, 비어 있지 않은 상품 ID 두 개 이상에 연결되어 있습니다. 별개의 상품이 한 사진을 공유하므로 수정이 필요할 가능성이 가장 큰 경우입니다.
• 검토 — 같은 이미지 URL이 반복되지만 행에서 서로 다른 상품 ID 두 개 이상을 확인할 수 없습니다. 한 상품 ID가 여러 행에 있거나, 행이 완전히 중복되거나, 상품 ID가 빈 경우입니다. 대개는 무해한 변형 행이지만 데이터 문제를 숨기고 있을 수도 있어, 무시하지 않고 목록에 넣습니다.

상품 ID가 없는 행은 그 자체로 중복을 만들지 않습니다. 한 상품에 속하는지 여러 상품에 속하는지 ImageDup이 알 수 없기 때문입니다.

상품 CSV 파일

상품 CSV는 전자상거래 플랫폼, PIM, 마켓플레이스, 피드 도구 등에서 내보낸 일반 텍스트 표입니다. 각 행은 상품 또는 상품 변형이고, 각 열은 SKU, 제목, 가격, 이미지 URL 같은 필드입니다. ImageDup은 첫 행을 헤더로 읽은 뒤, 필요한 두 필드 — 상품 식별자와 이미지 URL — 와 선택 필드 두 개(결과를 읽기 쉽게 하는 제목, 이미지 해시)를 여러분의 열에 매핑하도록 합니다.

열 이름은 시스템마다 다릅니다 — image_link, Image Src, main_image, photo_url 등. 그래서 ImageDup은 헤더 텍스트로 매핑을 추정하고, 확인이 필요한 추정에 표시를 합니다. 추정이 틀렸다면 드롭다운에서 올바른 열을 고르세요.

카탈로그 정리와 피드 점검

이미지 URL 반복 확인은 더 넓은 카탈로그 점검의 한 단계입니다. 일반적인 점검에서는 누락된 이미지, 깨진 이미지 링크, 없는 제목이나 설명, 일관되지 않은 가격, 중복 SKU도 함께 봅니다. ImageDup은 이미지 URL 문제에 집중하고, 표시된 모든 행을 그룹 번호와 사유가 붙은 CSV로 내려받게 해 줍니다. 원본 데이터를 관리하는 담당자에게 그대로 목록을 넘길 수 있습니다.

내보내기를 할 때마다, 또는 피드를 제출하기 전마다 이 확인을 실행하면, 새 상품이나 바뀐 내보내기 설정으로 생긴 반복을 스토어프런트나 판매 채널에 도달하기 전에 잡을 수 있습니다.

정확 일치 URL 대조의 한계

정확 일치는 정밀하지만 문자 그대로입니다. 다음은 놓칩니다.

• 같은 이미지가 두 주소에 있는 경우. https://cdn.example/a.jpg와 https://images.example/a.jpg, 또는 CDN URL과 그 원본 URL은 한 사진을 제공하지만 서로 다른 문자열입니다. ImageDup은 이를 다른 것으로 취급합니다.
• 캐시 무효화 매개변수가 붙은 같은 이미지. photo.jpg?v=1과 photo.jpg?v=2는 따로 둡니다. 쿼리 문자열이 응답을 정당하게 바꿀 수 있기 때문입니다.
• 크기 조정되거나 다시 인코딩된 사본. 한 사진의 썸네일과 원본 크기 버전은 서로 다른 URL의 서로 다른 파일입니다.

또한 설계상 http와 https, www와 도메인만, 끝의 슬래시도 합치지 않습니다. 모두 다른 리소스를 가리킬 수 있기 때문입니다.

서로 다른 URL로 제공되는 같은 사진을 잡으려면, 내보내기에 이미지 해시 열 — 파일의 MD5나 pHash·dHash 같은 지각 해시를 16진수로 — 을 추가해 매핑하세요. 그러면 ImageDup은 해시가 있는 행은 해시로 대조하고 없는 행은 URL로 대체합니다. 그래도 해시를 직접 계산하거나 이미지를 시각적으로 비교하지는 않으며, 여러분이 제공한 해시 값을 신뢰합니다.