웹사이트 만들면서 모든 접근에 대한 로그를 만들어서 들여다보니까
구글봇이 사이트 긁어가면서 자꾸 링크탈 때 에러내더라
동적 링크는 버튼같은 거 클릭해야 제대로 탈텐데
그냥 소스만 긁어가서 거기에 박혀있는 url 포맷이면 다음으로 넘어가던데
소스에 박혀있는 것도 /example/some/ + 1
이런 식이면 /example/some/으로 크롤링해서 번호 빠지면서 에러냄
그래서 구글봇 위해서 모든 동적 링크 url처럼 안보이게 소스 고치고
대신에 관련 영역의 태그 속성에 someAttribute="/example/some/1"
이렇게 소스 읽다가 구글봇이 제대로 링크타지게 죄다 고쳤음
웹을 해보니까 웹은 구글봇 위해서 열심히 일해야하는 거 같음
댓글 0