1 dryscrape 라이브러리를 사용하여 동적으로 페이지 캡처
Js 스크립트는 브라우저에서 실행되며 정보를 반환합니다. 따라서 js 가 실행된 페이지를 캡처하는 가장 직접적인 방법 중 하나는 python 을 사용하여 브라우저의 동작을 시뮬레이션하는 것입니다. 웹킷은 오픈 소스 브라우저 엔진입니다. Python 은 이 엔진을 호출하는 많은 라이브러리를 제공합니다. dryscrape 가 그 중 하나입니다. WebKit 엔진을 호출하여 js 등이 포함된 웹 페이지를 처리합니다!
2 selenium 웹 테스트 프레임워크
Selenium 은 로컬 브라우저 엔진을 호출하여 웹 페이지 요청을 전송할 수 있는 웹 테스트 프레임워크로, 페이지 캡처 요구 사항도 구현합니다.