Дополню картину:
nginx в роли балансировщика нормально работает, если в upstream локальные адреса, например запущены джанговские проекты.

Связки nginx+gunicorn+django, запущенные на серверах — работают в докере, может быть это как-то мешает..