웹 크롤링, 마음껏 해도 될까?

웹 크롤링, 마음껏 해도 될까?

 

웹 크롤링(Web Crawling) 또는 웹 스크래핑(Web Scraping)은 웹사이트의 데이터를 자동으로 수집하는 기술을 의미합니다. 빅데이터, AI 시대에 반드시 필요한 기술이죠. 하지만 '공개된 정보니까 괜찮겠지'라고 생각하고 무작정 크롤링을 시작했다가는 자칫 법적 분쟁에 휘말릴 수 있습니다.

오늘은 웹 크롤링을 둘러싼 주요 법적 쟁점들과 함께, 최근 법원의 판단 기준을 명확하게 보여준 주요 판례들을 알기 쉽게 정리해 드리겠습니다.

 

---

 

크롤링, 왜 법적 문제가 될까?

크롤링 자체가 불법인 것은 아닙니다. 하지만 아래와 같은 행위는 법적 책임을 질 수 있습니다.

• 정보통신망 침입: 웹사이트의 접근 제한(로그인, 캡차 등)을 우회하거나, 허용되지 않은 정보를 빼오는 행위.
• 저작권 및 데이터베이스권 침해: 상당한 노력과 투자가 들어간 데이터베이스를 무단으로 복제하여 사용하는 행위.
• 부정경쟁행위: 경쟁사의 데이터를 '무임승차'하여 부당한 이득을 취하는 행위.
• 개인정보보호법 위반: 개인정보가 포함된 데이터를 동의 없이 수집하거나 이용하는 행위.

이러한 문제들 때문에 법원은 크롤링의 목적, 방법, 대상 정보의 성격 등을 종합적으로 판단합니다.

 

---

 

주요 판례 분석: 법원의 판단 기준은 무엇인가?

최근의 주요 판례들을 보면, 크롤링의 합법성 여부를 판단하는 두 가지 핵심 기준이 명확하게 드러납니다.

 

1. 정보의 '공개성'과 '접근 통제' 여부

<야놀자 vs 여기어때 소송> - 대법원 2022. 5. 12. 선고 2021도1533 판결

• 사건: 야놀자가 경쟁사 여기어때의 앱 서버에 접속해 숙박업소 정보를 크롤링한 사건.
• 법원 판단: 대법원은 야놀자의 크롤링 행위가 무죄라고 판단했습니다. 그 이유는 다음과 같습니다.
  • 해당 숙박업소 정보는 누구나 볼 수 있도록 공개된 정보였다.
  • 여기어때가 별도의 접근 제한(로그인, 비밀번호 등)을 두지 않았다.
  • 통신 프로토콜을 역분석해 접근했더라도, 이는 불법적인 '침입'이 아니다.
• 시사점: 이 판결은 기술적 접근 제한 없이 공개된 정보를 수집하는 행위는 원칙적으로 불법이 아니다라는 중요한 기준을 세웠습니다. 단순한 '우회' 기술만으로는 정보통신망 침입죄가 성립하지 않는다는 뜻입니다.

 

2. 데이터의 '가치'와 '노력'의 정도

<직방 vs 방픽 소송> 

• 사건: 직방의 매물 정보를 크롤링해 사용한 스타트업 방픽에 대해 직방이 소송을 제기한 사건.
• 법원 판단: 법원은 직방의 손을 들어주며 방픽에 손해배상 책임을 부과했습니다. 그 이유는 다음과 같습니다.
  • 직방이 상당한 인적·물적 투자를 통해 매물 정보 데이터베이스를 구축했으므로, 이는 저작권법상 보호 대상인 '데이터베이스'에 해당한다.
  • 방픽의 크롤링 행위는 직방의 노력에 무임승차하는 부정경쟁행위에 해당한다.
• 시사점: 이 판결은 단순히 공개된 정보라도, 그 데이터베이스를 만드는 데 상당한 노력과 비용이 들어갔다면 법적인 보호를 받을 수 있다는 점을 명확히 했습니다. 경쟁사의 핵심 자산을 무단으로 활용하는 행위는 '데이터베이스권 침해' 또는 '부정경쟁행위'로 처벌받을 수 있습니다.

 

---

 

크롤링, 이것만 기억하세요!

위 판례들을 통해 알 수 있는 웹 크롤링의 법적 기준은 다음과 같이 정리할 수 있습니다.

• 첫째, '접근 제한'이 있는가?
  • 로그인, 캡차, IP 차단 등 기술적인 접근 통제가 걸려 있다면, 이를 우회하는 행위는 정보통신망법 위반으로 이어질 수 있습니다.
• 둘째, '노력과 투자'가 들어간 데이터인가?
  • 데이터베이스 구축에 상당한 인적·물적 투자가 있었다면, 저작권법이나 부정경쟁방지법에 의해 보호받을 가능성이 매우 높습니다. 경쟁사의 데이터는 함부로 긁어오면 안 됩니다.
• 셋째, '이용약관'을 확인했는가?
  • 대부분의 웹사이트는 이용약관에 크롤링 금지 조항을 명시하고 있습니다. 이를 무시할 경우, 민사상 손해배상 청구의 근거가 될 수 있습니다.

 

크롤링은 유용한 기술이지만, 법의 테두리 안에서 윤리적으로 활용해야 합니다. 데이터를 수집하기 전, 대상 웹사이트가 어떤 정보를 어떻게 공개하고 있는지, 접근을 제한하는 기술적 조치가 있는지, 그리고 이용 약관은 어떻게 규정하고 있는지를 꼼꼼히 확인하는 것이 중요합니다.