웹 스크래핑 토이 프로젝트 -1 에 이어 다음 과정을 공유하고자 합니다. 지난 포스팅에서 백준 알고리즘 사이트에서 원하는 데이터를 출력하는 것까지 성공했습니다. 이번 포스팅에서는 가져온 데이터를 DB에 저장하고 저장한 데이터를 BI Tool로 시각화하는 것으로 마무리하겠습니다.
웹 크롤링 토이 프로젝트 (기획부터 스크래핑까지) – 1
알고리즘 스터디를 진행하면서 불편한 점이 있었습니다. 코딩 문제 풀이 사이트가 엄청 많다는 점입니다. 한 곳에서 몰아서 보고 싶은 욕구가 강렬하게 들었습니다. 무언가 만들고 싶다는 생각이 오랜만에 들었습니다. 알고리즘 스터디에서 개별 문제 선정할 때 미약하게나마 도움이 될 것은 느낌이 들어서 웹 크롤링 프로젝트를 계획해 보았습니다.
Python부터 Web Scraping 까지 최단 시간에 익혀보자
Web Scraping 개념이 Crawling 보단 큰 개념으로 사용되고 있었습니다. 웹에서 데이터를 추출에 대한 정보를 얻고 싶은 경우에는 Web Scraping 이란 키워드로 검색하는 경우에 많은 정보를 얻을 수 있었습니다.
최신 댓글