본문 바로가기

Crawling (크롤링)/네이버 쇼핑

(3)
크롤링 - webdriver(selenium)으로 네이버 쇼핑 크롤링하기 크롤링할 콘텐츠 나이키 스우시 드라이핏 캡 548533 : 네이버쇼핑 판매되는 상품의 수량에 대해 2주, 1개월, 3개월, 6개월 단위로 추이를 보여주는 정보입니다. search.shopping.naver.com https://steadiness-193.tistory.com/119 크롤링 : webdriver(selenium)으로 네이버 쇼핑 긁어오기 나이키 스우시 드라이핏 캡 548533 : 네이버쇼핑 판매되는 상품의 수량에 대해 2주, 1개월, 3개월, 6개월 단위로 추이를 보여주는 정보입니다. search.shopping.naver.com 위 네이버 쇼핑의 1페이지 내용을 � steadiness-193.tistory.com 위 포스팅에서 만든 코드를 get_data 함수로 정의한다. https://..
크롤링 - webdriver(selenium)으로 네이버 쇼핑 긁어오기 나이키 스우시 드라이핏 캡 548533 : 네이버쇼핑 판매되는 상품의 수량에 대해 2주, 1개월, 3개월, 6개월 단위로 추이를 보여주는 정보입니다. search.shopping.naver.com 위 네이버 쇼핑의 1페이지 내용을 긁어보자 정확히는 판매처, 상품명, 판매가, 배송비 + 주소를 가져올 것이다. 1. BeautifulSoup으로 page_source 얻기 총 20개의 섹션이 있다. 이 20개를 먼저 찾아내야 한다. 2. 20개 찾기 이상하게도 21개가 나왔다. 맨 처음 것을 보면 맨 상단의 컬럼 같은 것까지 가져왔다. 맨 처음 것을 제외하면 원하던 20개의 섹션을 얻을 수 있다. 3. 판매처 찾기 그냥 글씨로 적혀있는 판매처와 이미지로 되어있는 판매처의 태그는 각각 다르다. 4. 상품명과 판..
크롤링 - webdriver(selenium)으로 네이버 쇼핑 페이지 넘기기 * 안내 크롤링한 코드 파일이 보이지 않아 보내드리기 어렵습니다. 😢 [2020년 7월 12일 기준] 향후 태그명이 달라질 수도 있음. 나이키 모자 네이버 쇼핑 페이지 나이키 스우시 드라이핏 캡 548533 : 네이버쇼핑 판매되는 상품의 수량에 대해 2주, 1개월, 3개월, 6개월 단위로 추이를 보여주는 정보입니다. search.shopping.naver.com 1. 페이지 바 찾기 웹드라이버 이용 (변수명 : browser) 브라우저로 위 url 접속 페이지 바 찾기 위 페이지 바의 태그의 아이디는 _price_list_paging 이다. 이를 page_bar 변수에 넣자 2. 페이지 바의 페이지들 찾기 위에서 찾은 page_bar 이용 이 페이지 바의 'a'태그에는 11개의 객체가 있다. 하나씩 꺼내..