초당 몇백회 request 해도 다 받아주는데 rate limit 아예 없음?
AI 훈련용 빅데이터 많이들 수집해갈듯
역시 유식대장 통이크노
기술이 안돼
robot.txt도 안보이는거 같은데 그냥 정도껏 긁어가면 봐주는듯?
기술이 안돼
robot.txt도 안보이는거 같은데 그냥 정도껏 긁어가면 봐주는듯?