如果你已经和老人家签订了购房合同并支付了定金或首付款项，那么兄弟们是不能反悔的。因为在法律上，双方达成意向并签订了正式合同，就具有法律效力，一旦违约将承担相应的法律责任。

但如果你们之间尚未签订合同或者签订的合同中有关于违约罚金的约定，那么你们可以尝试与老人家协商处理。当然，在退房之前，你需要了解一下具体的法律规定，避免发生违约造成不必要的经济损失。