단어를 입력하면 전세계 모든 웹사이트를 뒤져서 결과를 가져올수 있는 검색엔진은 없나?
만능 검색엔진은 없는걸까?
익명(117.55)
2016-08-27 15:25
추천 0
댓글 11
다른 게시글
-
js가 5년안에 망한다고 치자 [3]익명(39.7) | 16.08.27추천 0
-
근데 STL 질문 [4]커헠(msca8h) | 16.08.27추천 0
-
dart 좋음??? [1]익명(1.243) | 16.08.27추천 0
-
구글 푸시아 해외기사 번역 [3]익명(211.173) | 16.08.27추천 1
-
하 님들 다 필요없고 자료구조, 알고리즘열심히 하세요 [8]whatugonna..(sibal214) | 16.08.27추천 0
-
러스트는 윈도우에서 돌아가냐? [2]ㅋㅋ(125.152) | 16.08.27추천 0
-
요즘 뜨는언어 4개 최근 5년간 트렌드비교 [7]익명(211.173) | 16.08.27추천 0
-
노드제이에스를 삼성에서 삿는데 [1]ㅋㅋ(125.152) | 16.08.27추천 0
-
실상 GO로 할수있는게 아무것도 없음. [3]노드장인(124.254) | 16.08.27추천 0
-
C언어로 자산관리대장은 어케만드냐ㅋㅋ(125.152) | 16.08.27추천 0
http://google.com
ㄴ 네이버처럼 검색로봇 차단해놓은 사이트까지 검색할 방법은 없음?
기술적으론 가능한데 robots.txt 규약 지키는거지 거부 의사표시 했으면 수집 안하기로
ㄴ기술적으로 어떻게 하면 되는데?
기술적으로 그냥 다 긁으면됨
http://gall.dcinside.com/robots.txt
이렇게 웹사이트마다 Disallow로 못긁게 해놓으면 구글은 걍 안긁고 넘어감. 긁으려면 저거 쌩까고 걍 긁으면 됨
그거 개인은 못하는거?
함 근데 넌못함
로봇 쌩까면 차단먹인다던데
할려면 무슨 공부가 필요해? 나 정보수집기술이 필요해서