robots.txt 이거

[익명(115.188)]

User-agent: *

Disallow: /

Allow : /$ 

메인페이지 빼고 전부다 크롤링 허용한다는거 맞지?

네이버 존나 관대하네

[익명(175.176)]

왜 반대로 해석함

[익명(115.188)]

반대라고??

[익명(175.176)]

/ -> 모든 페이지 /$ -> 메인 페이지

[익명(115.188)]

맞네. 내가 띨빡이였네