디시 크롤링 질문 있음

[익명(222.113)]

https://m.dcinside.com/robots.txt
이거 보면 
일부 갤러리 제외하고 딜레이 30초 걸 경우 가능하다는 뜻 맞음?

requests 쓸때마다 30초 딜레이 넣으면 차단 안당할 수 있는거 맞나?

[프갤러 1(121.172)]

크롤링은 니들이 쓰는 걸 크롤링이라구 안 그램. 니들이 쓰는 건 그냥 문서 수집하는 거구. 크롤링은 10분에 10기가 정도는 수집해야 크롤링이라고 불리쥐.