Докер предлагает решать эту пробему с помошью режима swarm. Сделайте ваш главный хост менеджером роя:
docker swarm init --advertise-addr xxx.xxx.xxx.xxx:2377
Хотя если вы используете docker-compose он скорее всего у вас уже в режиме swarm.
Выполните для генерации команды подключения второго хоста в качестве рабочего
docker swarm join-token worker
или в качестве резервного менеджера
docker swarm join-token manager
Скопируйте полученную команду и выполните ее на втором хосте, подключив второй хост к swam:
docker swarm join --token <какой-то токен> xxx.xxx.xxx.xxx:2377
Разверните ваши сервисы используя docker-compose на одном из менеджеров.
Докер обещает, что все ваши сервисы через load balancer
будут видны по IP любого из хостов, а так же разворачивать и администрировать ваше приложение можно обращаясь к любому менеджеру, как будто все сервисы находятся на одной ноде.