형님들 코딩 질문좀 할께용

[익명(36.38)]

디시 크롤링 하는 코드 인터넷에서 긁어서 공부하고 있는데 결과가 공백으로 나오네요?

url 뒤에 링크를 네이버 뭐 그런걸로 바꾸면 잘 긁어오고, dcinside.com 도 잘 긁어오던데 gall이 들어가니까 안되는거 같아요..

뭐가 문제일까요 ㅜㅜ

[익명(name13579)]

[해당 댓글은 삭제되었습니다.]

해당 댓글은 삭제되었습니다.

[익명(36.38)]

뷰리풀수프가 문제인가여..

[익명(36.38)]

셀레니움써서 뭉태기로 긁어오고 그중에 키워드를 BeautifulSoup로 추출한다는거져?

[익명(36.38)]

셀레니움 공부해서 해보고 안되면 다시 질문하겠읍니다 감사함다

[익명(36.38)]

집중해서 보겠읍니다 감사합니당~

[인크(124.59)]

헤더에 유저에이전트 박아

[인크(124.59)]

일단 urllib.request 쓰지말고 requests 모듈 받아서 임포트하고

[인크(124.59)]

html = requests.get(url, headers=headers) 로 하고

[인크(124.59)]

soup = BeautifulSoup(html.text, 'html.parser') 로 선언하고

[인크(124.59)]

리퀘스트 겟 api 위에 headers = { 'user-agent' : '유저에이전트값' } 박으면 잘됨