@tpdns90321 님께서 말씀하신 스택이 제가 보기에도 제일 나아 보입니다. AWS cloudwatch로 cron을 걸어서 python 혹은 nodejs를 통해 api 쿼리를 하고 s3에 저장을 하든 db에 put을 하면 좋겠습니다. 람다가 프로세싱 타임 제한이 3분인것으로 기억하는데, 이시간내에 한번 연산이 끝날수 있다면 가능한 이야기구요. (비동기식으로 처리도 가능) 100만쿼리까지는 과금이 안되는 것으로 기억합니다.
@tpdns90321 님께서 말씀하신 스택이 제가 보기에도 제일 나아 보입니다. AWS cloudwatch로 cron을 걸어서 python 혹은 nodejs를 통해 api 쿼리를 하고 s3에 저장을 하든 db에 put을 하면 좋겠습니다. 람다가 프로세싱 타임 제한이 3분인것으로 기억하는데, 이시간내에 한번 연산이 끝날수 있다면 가능한 이야기구요. (비동기식으로 처리도 가능) 100만쿼리까지는 과금이 안되는 것으로 기억합니다.
최대한 파이프라인 방식으로 순서와 시간을 쪼개는 노동이 되는 대신 안정성이 확보가 됩니다.
그리고 어떻게 할지 기획서로 작성했습니다.