房间太小可以拆掉两房间之间的砖墙换薄的材料嘛

那要具体看原墙体是什么墙。如果是承重墙，不能拆掉，否则有可能会影响结构安全。
如果不是承重墙，可以拆掉换其他材料，但是应注意选择墙体材料类型，太薄有可能影响隔音和牢固度。
事实上，一般的内隔墙厚度200mm或者240mm，换成薄的墙体通常也不会小于100mm，所以这点空间实际上也无足轻重，要是随便更改引起其它使用问题反而得不偿失。