파이썬 다음-뉴스 크롤링 하기 -1
코딩 동영상 간단 페이지 범위 구하기 다음뉴스를 예로 들겠습니다. 전체뉴스 다음뉴스 news.daum.net 화면이 잘 보이지는 않지만 페이지 번호를 Ctrl+클릭 하면 URL 에 페이지 파라미터가 보입니다. 다음과 같이 반복하면서 페이지를 돌 수 있습니다. url = 'https://news.daum.net/breakingnews/entertain/variety?page={}' i = 0 while True: i += 1 print(f'page : {i}') res = requests.get(url.format(i), headers=headers) 코드 오늘 날짜의 연예 기사를 첫 페이지부터 끝 페이지까지 돌면서 페이지, 타이틀, URL 을 JSON 파일로 저장하는 코드입니다. CSV 혹은 JSON 파..