정리

웹 크롤러(Web Crewler) 

1. 웹 페이지를 방문하며 자동적으로 수집하는 프로그램(기술)

2. 조직적, 자동화된 방법으로 월드 와이드 웹을 탐색하는 프로그램 

 

---

주로 사용하는 프로그램은 

beautiful soup4 

참고 사이트 : https://www.crummy.com/software/BeautifulSoup/bs4/doc/