CS/Data Science
-
데이터 크롤링(with Mechanize)CS/Data Science 2024. 3. 31. 19:03
데이터를 수집하는 방법에는 여러가지가 있는데, 오늘은 크롤링 도구를 이용한 웹스크랩핑 방법에 대해 알아보고자 한다. 많은 데이터를 제공하는 기상청 사이트에서 기상 정보를 수집해보자! 아래 페이지에서 데이터를 수집할것이다. https://www.weather.go.kr/w/obs-climate/land/past-obs/obs-by day.do?stn=108&yy=2012&mm=4&obs=1 과거관측 - 일별자료 - 기상청 날씨누리 개편된 날씨누리 홈페이지 첫 화면에서 지도를 통한 실시간 기상정보와 레이더영상, 전국 특보 현황을 조회할 수 있으며, 내 지역의 현재 기상상황과 대기질 상태, 일출/일몰 시각을 확인할 수 www.weather.go.kr 데이터 크롤링의 큰 구조는 아래와 같다. 'Mechanize..