Als u https://hub.docker.com/_/postgres/ leest, wordt in de sectie 'Deze afbeelding uitbreiden' uitgelegd dat elke .sql in /docker-entrypoint-initdb.d na de build wordt uitgevoerd.
Ik moest alleen mijn Dockerfile.db wijzigen in:
FROM postgres
ADD ./devops/db/dummy_dump.sql /docker-entrypoint-initdb.d
En het werkt!