När du läser https://hub.docker.com/_/postgres/, förklarar avsnittet "Utöka den här bilden" att alla .sql i /docker-entrypoint-initdb.d kommer att exekveras efter build.
Jag behövde bara ändra min Dockerfile.db till:
FROM postgres
ADD ./devops/db/dummy_dump.sql /docker-entrypoint-initdb.d
Och det fungerar!