map не помогает - директива server не хочет принимать переменные в качестве аргумента.
Единственный вариант, который вижу - скопировать конфиг и в нём переопределить upstream делать не хочется. Конфигов таких планируется несколько.
--
Панфилов Михаил