웹크롤링 썸네일형 리스트형 데이터 블로그 챌린지 9일 - 크롤링을 하기 전 알아두면 좋은 점들 웹 크롤링 - Python을 이용한 beautifulsoup과 selenium 라이브러리를 활용하여 데이터 분석이 용이해졌습니다. 이와 관련하여 크롤링을 하기 전에 알아보면 좋은 점들에 대해 이야기하는 좋은 글을 추천해보고자 합니다. ▶ 요약 크롤링은 개인, 단체에서 웹 페이지의 구조를 분석하고, 파악하여 필요한 데이터를 긁어옵니다. [크롤링의 합법과 불법 기준] "정보통신망법 제 48조 정보통신망 침해행위 금지" → 수집한 데이터를 영리적, 혹은 상업적인 용도로 사용 주의 → 상대에게 피해를 주지 않도록 주의 → robots.txt를 통해 접근범위 확인 [정적 크롤링 vs 동적 크롤링] * 정적 크롤링 : 한 페이지에서 원하는 정보가 전부 있는 정적인 데이터를 가져옴 * 동적 크롤링 : 여러 페이지를 .. 더보기 이전 1 다음
