셀레니움을 사용하는 장점은 실제 사용자가 클릭하는 것과 구분하기 어려워 대부분의 사이트를 크롤링할 수 있다는 것입니다.

기술 스택

Python, Selenium, Chromium, Visual Studio Code

실행 환경

Windows, Mac

프로젝트

인스타그램 크롤링

인스타그램의 특정 아이디의 프로필, 이미지, 비디오, 글, 태그, 좋아요, 시간 등의 정보를 가져옵니다.

비디오 크롤링

회원 가입 등 절차가 복잡한 특정 사이트의 비디오를 다운로드 합니다.

스트리밍 비디오 크롤링

속도가 너무 느려 2배속 또는 건너뛰기를 하고 싶은데 사이트의 플레이어로는 되지 않아 스트리밍(rtmp) 파일을 다운로드 하도록 했습니다.