我们家的电热水器开了很久大概四个多小时放出来的水是冷的

你们用的来是电热水器吧，自而且发热功率不高，加上冬天天气冷烧的慢是正常的。
热水器容积是一定的，掺冷水少热水用的就相应快咯。
一般家用50L的功率为2000瓦。保温与烧水的功率消耗比大概为2:5。以你们两天洗一次澡的频率，肯定保持24小时保温要浪费电，还是用前再插电烧吧。