나루하루의 블로그

📌 목차Playwright와 무한 스크롤 자동화 소개코드 구조 및 기능 설명브라우저 설정 및 초기화YouTube 검색 자동화무한 스크롤 구현 방법페이지 높이 변화 감지 메커니즘결론 및 활용 방안 Playwright와 무한 스크롤 자동화 소개 웹 자동화는 반복적인 작업을 효율적으로 처리하는 강력한 도구입니다. 특히 무한 스크롤(Infinite Scroll)이 적용된 웹사이트에서데이터를 수집하거나 콘텐츠를 분석할 때 자동화 스크립트는 큰 도움이 됩니다. 이 글에서는 Python의 Playwright 라이브러리를 활용하여YouTube의 검색 결과 페이지에서 무한 스크롤을 자동화하는 코드를 상세히 분석합니다. Playwright는 Microsoft에서 개발한 브라우저 자동화 도구로,Selenium보다 더 현대..

📑 목차코드 개요라이브러리 임포트 분석비동기 함수 구조Playwright 브라우저 제어BeautifulSoup을 활용한 HTML 파싱asyncio.run() 실행 메커니즘코드 실행 흐름 정리1. 코드 개요제시된 코드는 Playwright와 BeautifulSoup 라이브러리를 결합하여네이버 웹사이트의 HTML 콘텐츠를 가져오는 파이썬 스크립트입니다.이 코드는 비동기 프로그래밍 방식을 사용하여 웹 페이지를 로드하고,그 내용을 파싱하는 과정을 보여줍니다.전체 코드는 크게 세 부분으로 나눌 수 있습니다:라이브러리 임포트, 비동기 스크래핑 함수 정의, 그리고 함수 실행 및 결과 출력입니다.2. 라이브러리 임포트 분석 import asynciofrom playwright.async_api import async..

📌 목차1. Playwright 소개2. 비동기식(Async) 방식으로 브라우저 최대화하기3. 동기식(Sync) 방식으로 브라우저 최대화하기4. 코드 분석 및 함수 설명5. 예외 처리 방법6. 주요 차이점 비교7. 마치며Playwright 소개Playwright는 Microsoft에서 개발한 웹 브라우저 자동화 라이브러리로,웹 테스트 및 스크래핑에 강력한 기능을 제공합니다.이 도구는 Chrome, Firefox, Safari 등 다양한 브라우저를 지원하며,동기식과 비동기식 두 가지 방식으로 코드를 작성할 수 있습니다.이번 포스팅에서는 Playwright를 사용하여브라우저를 최대화된 상태로 실행하는 방법을동기식과 비동기식 코드로 나누어 살펴보겠습니다.비동기식(Async) 방식으로 브라우저 최대화하기비동기..