상업적 이용이 아니면
사이트가 robots 통해서 거부 의사를 명시하거나
텍스트로 엄포를 놨다한들 수집해가는게 왜 불법임?
기술적으로 브라우징과 하나도 다를바가 없는데?