데이터엔지니어링 (1) 썸네일형 리스트형 [K리그 데이터 분석] 1. K리그 데이터 포털 크롤러 구현 K리그 축구 전문 데이터 포털K리그의 모든 것이 담겨있습니다. 경기전 관전포인트 부터 전문 분석 매치서머리까지 지금 방문해보세요. 로그인 없이 이용하실 수 있습니다.data.kleague.com 첫번째 포스팅 겸 포트폴리오 준비로 K리그 매치 데이터를 양적 데이터 분석을 위해 크롤링하여 분석 가능한 형식으로 변환하는 파이프라인을 구현해보려고 한다. 이런 걸 데이터 파이프라인이라고하면 데이터 엔지니어분들이 화내실거 같아서... selenium과 bs4를 처음 배울 때에는 By.ID 와 By.CSS_SELECTOR 등을 이용하여 크롤링 코드를 작성했다.하지만, 해당 페이지의 경우 Javascript 함수로 페이지 요소가 변경되는 방식이라 새로운 방법을 찾아야 했고,driver.excute_script로 .. 이전 1 다음