크롤링 스케쥴러에 nginx 같은 리버스 프록시가 필요가 있을까?

진행중인 프로젝트에 데이터 크롤링 부분을 컨트롤할 스케쥴러를 구현하고 있다. 장고로 구현하는 도중 의문이 든 부분이 있는데 장고는 웹서버의 기능을 못하기 때문에 nginx 같은 리버스 프록시에 도움을 받아야 된다는 말이 많았다. 장고를 처음 사용하는 사용자 입장에서 얼마나 겁이 났는지 모른다.

주요기능에서의 로드 밸런싱에 대한 필요는 aws 로드 밸런서를 통해 해결할 것이고, 크롤링 인스턴스에서 보내오는 로그들을 몽고디비에 저장하는 과정에서의 보안적 측면에서의 ip 필터링은 vpc내에서 해결될 것이라고 본다.

이 정도로 정리 가능 할것같은데 nginx의 기능을 쭉보면서 약간 애매한 부분이 많은거 같아 구현하면서의 필요에 대해서 계속 수정할 생각이다.

끝