<aside> ✔️ 네이버 지도와 카카오맵을 크롤링하는 과정에서 발생한 문제들을 기록합니다.

1. Java + 네이버 지도 크롤링
2. Python + 네이버 지도 크롤링
3. Python + 카카오맵 크롤링 </aside>

#1. Chromedriver 실행 시 오류 : ‘chromedriver’은(는) Apple에서 악성 소프트웨어가 있는지 확인할 수 없기 때문에 열 수 없습니다.

원인

• macOS는 다운로드 한 파일에 대해 quarantine 이라는 보안 기능을 사용한다.
• quarantine 은 파일이 다운로드 된 웹 사이트와 연관된 정보를 저장하고, 실행되기 전에 사용자에게 경고를 표시하거나 실행을 차단한다.

해결

• Chromedriver 실행 파일에서 quarantine 속성을 제거한다.

  // Chromedriver 파일 위치에서 실행한다.
  
  xattr -d com.apple.quarantine chromedriver
  

#2. Java 프로젝트 실행 시 Chromedriver 에러 : Resolve java.io.IOException: Invalid Status code=403 text=Forbidden in Chromedriver | Selenium

2023-03-11 22:51:30.328  INFO 38080 --- [ null to remote] o.o.selenium.remote.ProtocolHandshake    : Detected dialect: W3C
2023-03-11 22:51:30.371  WARN 38080 --- [cHttpClient-1-4] o.openqa.selenium.remote.http.WebSocket  : Invalid Status code=403 text=Forbidden

java.io.IOException: Invalid Status code=403 text=Forbidden

원인

• Chromedriver가 원격으로 연결된 Chrome 브라우저에서 URL에 액세스할 권한이 없기 때문에 발생한다.

해결

• Chrome 브라우저의 보안 설정을 변경한다.
• 원격으로 제어되는 브라우저에서 모든 요청을 수락하도록 허용한다. 보안상의 위험이 있지만, 로컬 개발 환경에서 테스트할 때는 유용하다.