to throw the baby out with the bath water

We did not want to throw the baby out with the bath water, however.

Wir wollten aber nicht das Kind mit dem Bade ausschütten.

But when applying the rules of competition to the postal service, you must be careful not to throw the baby out with the bath water.

Bei der Anwendung der Wettbewerbsregeln auf den Postdienst muß man jedoch darauf achten, das Kind nicht mit dem Bade auszuschütten.