사이트 내에서 새로고침 버튼을 누르면,
OO대학교 공식 사이트 << 에서 과제 정보를 가져와서
이쁘게 사이트에 보여주는걸 만들려고 합니다.
(웹 파싱한 결과를 txt파일에 저장해서 그걸 가져와서 보여주는 식으로...)
파이썬 셀레니움으로 만든 프로그램이 있는데
이걸 html에 접목시키면 좋겠다만 그게 쉽지는 않네요...
방법이 있는지 궁금합니다.
사이트 내에서 새로고침 버튼을 누르면,
OO대학교 공식 사이트 << 에서 과제 정보를 가져와서
이쁘게 사이트에 보여주는걸 만들려고 합니다.
(웹 파싱한 결과를 txt파일에 저장해서 그걸 가져와서 보여주는 식으로...)
파이썬 셀레니움으로 만든 프로그램이 있는데
이걸 html에 접목시키면 좋겠다만 그게 쉽지는 않네요...
방법이 있는지 궁금합니다.
방법1. cron을 이용해서 일정시간마다 파일을 갱신시킨다. 그 파일을 읽어서 보여주는 api를 만든다 방법2. 매 요청마다 사이트를 크롤링한다. 적절히 메모리 캐시를 이용해 반복된 요청을 처리한다 - dc App
지금 해야할 일. 1. crontab에 대해 알아본다. 2. rest api server에 대해 알아본다. - dc App
글쓴이입니다. 조금 늦었지만 감사의 말씀 올립니다!!!
스크래핑 검색
cron보다는 캐싱 전제로 매 요청시에 받아오는 게 맞을듯? 1. 학교 사이트의 자료 받아오기(는 완료된거고) 2. 받아온 자료 정리하기 3. 정리된 자료를 보기 이쁘게 만들어 사이트에 뿌리기 하면 되는데 2는 bs4나 regex로 하면 되고 3은 flask로 서버 띄우면 됨
감사합니닷!!1
https://m.dcinside.com/board/github/42367