Gabojago-Crawling

selenium 3.14.1 버전 사용

1. MJ

• 사용 데이터: 공공데이터포털 - 소상공인시장진흥공단_상가(상권)정보
• 크롬 드라이버: 운영체제와 크롬 버전에 맞게 선택 및 다운
• 네이버 플레이스 크롤링

공공데이터포털의 상가정보 데이터를 기반으로, 네이버 플레이스 검색을 통해 상가 정보 크롤링.

🧐사용법

• 소상공인시장진흥공단_상가(상권)정보 csv 데이터를 MJ > spot 폴더 아래에 두기
• main.py의 35번째 줄: csv 파일명을 설정
• main.py의 112, 116번째 줄: 크롤링된 상가 정보가 저장될 파일명을 설정
• main.py 실행

📌데이터 csv파일의 한글이 깨지면 인코딩 변경하기!

📌MJ/util/db_connection.py 파일에 db connection 코드를 작성하여 사용

2. HM

• 크롬 드라이버 : 운영체제와 크롬 버전에 맞게 선택 및 다운
• 네이버 지도 맵 크롤링

지역 이름과 맛집, 여행 의 키워드를 함께 검색한 상가 정보 크롤링.