Allow:*
robots.txt보고 크롤링 괜찮은지 보면 되는거 아님?
익명(106.102)
2020-02-13 16:37
추천 0
댓글 3
다른 게시글
-
수학과가 그렇게 비전 없나? [4]ㅅㅅ(223.39) | 20.02.13추천 0
-
당장 디지털노마드 하기 쉬운 분야가 어딜까 [6]익명(106.101) | 20.02.13추천 0
-
이쪽으로 가려면 4년제 필수냐 [6]익명(124.58) | 20.02.13추천 0
-
컴퓨터과학 전공 커리큘럼 조언 좀 부탁드립니다...! [20]익명(112.162) | 20.02.13추천 0
-
마블 영화 나올 때마다 크롤링 했는데 우쨔지뉴비(75.144) | 20.02.13추천 0
-
9급이 돈 못번다는데 [19]ㅇ(223.39) | 20.02.13추천 0
-
니들 요즘에 크롤링하면 좆된다 [4]익명(106.102) | 20.02.13추천 2
-
공부할 때 여친의 존재는 중요합니다. [4]뉴비(75.144) | 20.02.13추천 0
-
명문대는 사업 안할거면 전자나 컴퓨터보다 통신 가는게 좋다더라 [3]익명(42.28) | 20.02.13추천 9
-
본인도 근본개발자가 되기로함익명(1.240) | 20.02.13추천 0
그건 구글봇님 어서옵쇼할 때 쓰는거지 우리같은 좆밥봇들은 바로 차단 및 고소장 날라온다
통신사 ip임.
맞음