단어선택이 좀 이상한가ㅎㅎ

크롤링을 아무리 막았다고해도 실제 브라우징하는 유저는 사이트의 내용을 읽어들이고 볼수있잖아

어쨋든간에 데이터는 받았으니 그냥 저상태에서 크롤링하면 되지않냐 이거임

봇돌려서 크롤링하는거보다는 자원소모가 많아질것 같은데 그래도 안될건없지않음?