Condor-annes vs Celery

on my background

결론:  

비슷하다  

Celery는  long running jobs는 fail할 경우가 있다. 그래도 나쁘지 않다고 한다.

Celery는 Web이랑 관련된 작업에서 많이 쓰인다

Celery은 gevent , flower 등을 관리해준다

Celery 는 web-based management system 

Spot Instance일 경우 -> restart node 해준다, rabbitmq 라는 broker를 설치해서 다시 시작해야한다.

---

---

HtCondor

Container도 있다. 

Spot Instance Bid하는 것도 있었다.

cvmfs를 통해 nfs가 가능해진다고도 했다.

여기서도 network File System(NFS) 이 쓰인다 shared data is available to any worker nodes.

checkpoint도 있다.