Selenium (1) 썸네일형 리스트형 [Web crawling] 구글에서 자동으로 원하는 이미지 다운받기 이미지 크롤링(image crawling) 이번 시간에는 딥러닝에 쓸 데이터셋을 구하던 중, 웹 크롤링의 방법이 생각보다 다양하여 한번 정리하고자 합니다. 웹 크롤링 기법이 사용된 이후로, selenium, beautifulsoup4 등 다양한 라이브러리들이 개발되고 있는데요. 이번 차시에서는 다른 것은 생략하고 깔끔하게 이미지만을 다뤄보겠습니다. - google 이미지 사이트에서의 동적인 이미지 크롤링을 진행합니다. selenium은 동적 크롤링을 지원합니다. 쉽게 말해, 이리저리 브라우저를 움직이면서 더 많은 데이터를 수집할 수 있는 것이 동적 움직임이 적거나 없는 것이 정적 크롤링 입니다! (*동적도 입력값이 작으면 더 적은 데이터를 가져올 수 있습니다) 전체 소스코드는 가장 아래에 공개하겠습니다... 이전 1 다음