자꾸 아이피 제한 땜에 속도가 안나는데
aws 람다에 배포하고 동시성 제한 최대로 풀어놓고
람다 요청을 의도적으로 딜레이를 좀 주면서 blocking하게 처리해서 여러 람다 인스턴스가 생기게 유도할 수 있나요?
만약 가능하다면 이런 식으로 여러 아이피로 크롤링 대상 사이트에 요청이 가능한가요?
aws 람다에 배포하고 동시성 제한 최대로 풀어놓고
람다 요청을 의도적으로 딜레이를 좀 주면서 blocking하게 처리해서 여러 람다 인스턴스가 생기게 유도할 수 있나요?
만약 가능하다면 이런 식으로 여러 아이피로 크롤링 대상 사이트에 요청이 가능한가요?
한사이트를 공격해서 속도 뽑아낼 궁리 좀 하지 말고 긁어야 되는 다른 여러 사이트를 동시에 긁어서 속도 올릴 생각을 해라
한 사이트만 긁으면 되는데 아이피 제한이 걸려요