비동기 구조로 바꿀 시 -> 크롤링과 요약의 속도를 분리 -> CPU가 유휴 상태로 낭비되는 것을 막을 수 있음 -> Semaphore(세마포어)로 속도조절해서 429피할 수 있긴 함 허나 -> Rate Limit 폭발할 수 있고 -> 현재 무료 api를 사용하는 만큼 무작정 비동기를 사용하는게 좋을 지 잘 모르겠음 -> 429를 최대한 피하는게 일단 최우선 순위라고 생각하긴 함
비동기 구조로 바꿀 시
-> 크롤링과 요약의 속도를 분리
-> CPU가 유휴 상태로 낭비되는 것을 막을 수 있음
-> Semaphore(세마포어)로 속도조절해서 429피할 수 있긴 함
허나
-> Rate Limit 폭발할 수 있고
-> 현재 무료 api를 사용하는 만큼 무작정 비동기를 사용하는게 좋을 지 잘 모르겠음
-> 429를 최대한 피하는게 일단 최우선 순위라고 생각하긴 함