네이버 평점1 네이버 영화평점 크롤링 (python) bs4 네이버 영화 평점 크롤링 requests로 주소를 받아오는데 페이지 번호만 하나씩 증가시켜 주면서 다음 페이지를 가져온다 페이지 조작이 필요 없기 때문에 BeautifulSoup를 사용해서 selenuim보다 빠르게 정보를 가져온다. 원하는 정보의 태그 값을 확인해서 각각 받아오고 하나의 리스트에 넣어 수집이 끝나면 데이터 베이스로 저장 중간에 에러가 나면은 에러 정보를 출력하고 데이터 베이스를 재접속한다 주의할 점은 무한 루프이기 때문에 이상한 에러가 나도 계속 돌아간다 무한 루프 사용 시 주의 import requests from bs4 import BeautifulSoup import sqlite3 import time import datetime # sqlite3 데이터 베이스 사용 conn=sq.. 2023. 3. 29. 이전 1 다음