IP 위치 정보에 독립적인 벤치마크가 필요한 이유

서로 다른 사용자, 같은 문제

IP 위치 정보에 의존하는 사람들에게는 확신 있는 결정을 내리기 위한 정보가 부족합니다:

세 유형 모두 같은 문제를 공유합니다: 중립적인 기준이 없습니다. 정확도 주장은 제공업체 스스로가 자체 데이터셋으로, 자체 통제 환경에서, 거의 공개하지 않는 방법론으로 검증한 것입니다.

연구가 말하는 것

위치 정보 데이터베이스의 한계는 새로운 것이 아닙니다. 학계에서는 10년 넘게 이를 기록해 왔습니다:

각 연구는 중요한 기여를 했지만 구조적 한계를 공유합니다: 특정 시점의 고정된 IP 집합을 테스트하고, 비공개(ISP 데이터) 또는 합성(WHOIS, DNS 호스트명, 랜드마크) 기준 데이터에 의존하며, 최종 사용자 트래픽보다는 인프라 IP에 주로 초점을 맞춥니다.

시카고 대학교의 최근 논문에서는 소비자 속도 테스트의 기기 위치 데이터를 기준 위치로 활용하는 방법을 탐구했습니다. 실제 사용자 위치 대비 IP 위치 정보를 대규모로 검증한 최초의 연구입니다. 정확도는 지역, 통신사, 접속 방식에 따라 크게 달라지며, 이러한 차이는 사용자 위치 기반 기준 데이터로만 확인할 수 있다는 것을 발견했습니다.

IP Accuracy Arena는 어떻게 작동하나요?

아레나는 사용자 위치를 기준점으로 삼는 접근 방식을 기반으로 하며, 지속적인 크라우드소싱 수집에 맞게 설계되었습니다:

1. 참여자가 아레나를 방문하여 브라우저 Geolocation API를 통해 위치 권한을 부여합니다. 모바일 기기에서는 일반적으로 GPS(정확도 5~15m)를 사용합니다. 데스크톱에서는 Wi-Fi 측위 등의 신호로 대략적인 위치를 파악합니다. 정밀도는 낮지만 도시 수준 비교에는 충분합니다.
2. 기기 좌표를 역 지오코딩하여 기준 도시, 지역 및 국가를 산출합니다. 이것이 기준 위치(ground truth)입니다.
3. 참여자의 공인 IP 주소를 테스트 대상 모든 제공업체에 동시 전송합니다. 각 제공업체가 반환하는 좌표, 도시, 지역 및 국가 정보를 수집합니다.
4. 각 제공업체의 좌표는 기준 위치 생성에 사용된 것과 동일한 서비스로 역 지오코딩되어 일관된 명명 규칙을 보장합니다. 역 지오코딩 결과를 정규화하여 도시, 지역 및 국가 일치 여부를 비교합니다. 제공업체 좌표와 기기 좌표 간의 하버사인 거리 오차를 계산합니다.
5. 결과는 역분산 가중치(1/accuracy²)를 사용하여 실시간 순위표에 집계되므로, GPS 정확도가 높은 측정이 순위에 더 큰 영향을 미칩니다. 동일 IP에서 동일 위치로의 반복 테스트는 7일 기간 내에서 중복 제거되어 최신 결과만 유지됩니다.

비교 방식

도시명 일치 비교는 단순하지 않습니다. 제공업체가 반환한 원시 이름을 직접 비교하는 대신, 기준 위치에 사용한 것과 동일한 지오코딩 서비스로 모든 제공업체의 좌표를 역 지오코딩합니다. 이를 통해 양측이 동일한 명명 규칙, 행정 경계, 언어 등을 사용하도록 보장합니다.

거리 오차는 하버사인 공식을 사용합니다. 제공업체별 가중 중앙값 거리 오차를 보고하며, 각 제출은 1/accuracy²(역분산 가중치)로 가중됩니다. GPS 정확도가 5km를 초과하는 제출은 IP 기반 브라우저 폴백으로 인한 결과 오염을 방지하기 위해 제외됩니다. 동일 IP에서 동일 위치로의 반복 테스트는 7일 롤링 기간 내에서 중복 제거됩니다.

기존 연구와의 차이점

개인정보 보호

기기 위치 데이터는 민감한 정보입니다. 사용자의 좌표는 실시간 비교 용도로만 사용되며 절대 저장되지 않습니다.

알려진 한계

참여 방법

가장 간단한 참여 방법은 테스트를 실행하는 것입니다. 데이터가 부족한 지역, 모바일 네트워크, 비서구권 지역의 테스트가 특히 중요합니다 — 제공업체 간 차이가 가장 크고 기존 데이터가 부족한 곳이기 때문입니다.

방법론은 공개되어 있습니다. 테스트 대상 포함을 원하는 제공업체나 데이터셋에 관심 있는 연구자는 arena@ipaccuracy.com으로 연락해 주세요.