"Caixa d'água" ou "caixa-d'água" ou "caixa de água"?

Primeiramente, o mais correto é usar o "apóstrofo". Dizer "caixa de água" dá a ideia de que a caixa é feita de água. Para dar a ideia de que a caixa armazena água é melhor usar o "d'água".

Então, vem outra regra: sempre que usamos o apóstrofo nas palavras compostas nós devemos usar o hífen. Logo, o correto é "caixa-d'água", assim como "espelho-d'água", "pé-d'água", "mestre-d'armas", "gota-d'água" e por aí vai.

No caso do plural, devemos dizer "caixas-d'água".