본문 바로가기

웹 크롤링3

웹 크롤링 - [Python]파이썬으로 웹 사이트 이미지 저장 오늘은 웹 페이지에 있는 이미지를 저장하는 방법을 알아보도록 합니다. 크롤링을 할 사이트는 바로 https://m.post.naver.com/viewer/postView.nhn?volumeNo=31538876&memberNo=6408050 이곳입니다. 아이즈원 밍구리(김민주)의 하스 바자 코리아 5월 화보 이미지입니다. 예쁜 밍구리의 화보 사진을 저장해보도록 할게요. from selenium import webdriver from urllib.request import urlretrieve from urllib.request import urlopen from bs4 import BeautifulSoup options = webdriver.ChromeOptions() options.add_argument.. 2021. 6. 11.
웹 크롤링 - [Python]파이썬으로 카카오 맵 API 사용하기(2) - 특정 범위 검색 목표 '위도, 경도, 키워드를 조합해, 46개 이상의 모든 결과 값을 가져오겠습니다.' 지난 포스팅에서 키워드 만으로 결과 값을 도출해 내었습니다. 하지만 키워드만 검색해서는 46개 이상의 결과를 가져올 수 없었습니다. '성산일출봉 전기충전소'의 검색 결과는 60여개가 넘게 나오는데, 가져올 수 있는 건 45개만 가져옵니다. 총 검색 결과 개수만 알려주고, 결과는 45개만 가져오게 해주는 나쁜 카카오API........ 여기서 굴복할 수 없져 ㅋㅋㅋ 이런 문제를 해결하고자 위도와 경도, 키워드 3가지를 이용해 모든 결과를 가져오도록 하겠습니다. 위도, 경도, 키워드를 이용한 검색 검색 키워드는 '공영주차장'으로 정했고, 이번에는 검색 범위를 정해봅시다. 대략적으로 범위를 직사각형으로 잡았으면 왼쪽 아래 .. 2021. 3. 31.
웹 크롤링 - [Python]파이썬으로 카카오 맵 API 사용하기(1) - 키워드 검색 목표 카카오 맵 API를 사용하여 검색한지점의 위도와 경도를 얻고, folium으로 지도에 결과 값을 좌표를 찍겠습니다. 먼저 KAKAO DEVELOPER(developers.kakao.com)에서 4가지 Key를 발급받았고 이렇게 플랫폼(Android, IOS, Web) 중에 Web을 만든 상태에서 진행을 합니다. Web을 만들 때 Redirect URL을 입력해야 합니다. 저는 192.168.0.2:9999로 했고, 그냥 제가 아이패드에서도 주피터 노트북 쓰려고 열어놓은 내부 서버 IP입니다. (당연히 바깥에서 쓸 때는 외부 서버로 씁니다.) 주피터 서버를 열지 않으신 분들은 http://localhost:3000(개발자 임시 서버)으로 적으셔도 됩니다. 그러면 모든 준비가 됐네요. 카카오 맵 API.. 2021. 3. 30.