不可以拆因为交钱给村里建的房是一种合法的建筑行为，是在按照国家的规定和标准下建造的，一旦建成就不能任意拆除。

此外，拆除房屋会涉及到法律问题，会面临处罚和赔偿等法律责任。

如果需要拆除房屋，必须要经过相关部门的批准和规定程序，如获得拆迁许可证、进行评估和赔偿工作等。