반응형
서버에서 403에러를 응답하여 크롤링이 불가능한 서버는 요청할때 requests header에 user-agent를 지정해줘야 합니다.
import requests
url = '크롤링할 링크'
#User-Agent값으로 유저 정보 입력
headers = {'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.77 Safari/537.36'}
res = requests.get(url, headers=headers)
유저 정보는 아래의 링크에서 확인하실 수 있습니다.
http://www.useragentstring.com/
공감과 댓글은 작성자에게 많은 힘이됩니다. 감사합니다😄
반응형
'프로그래밍 > Python' 카테고리의 다른 글
파이썬 셀레니움(selenium) 모바일 버전(화면)으로 접속하기 (1) | 2022.01.04 |
---|---|
파이썬 selenium 타오바오 자동 로그인 & 이미지 검색 (1) | 2021.07.28 |
파이썬 selenium 타오바오 로그인하기 (0) | 2021.07.28 |
파이썬 selenium 쿠팡 로그인하기 (6) | 2021.07.28 |
파이썬 - 셀레니움으로 네이버 로그인하기, 캡차(보안문자) 우회 (3) | 2021.02.28 |
댓글