窗户关不上的情况下，可以更换窗户。

更换窗户的方法如下：

测量窗户的尺寸，并确定窗户的类型和位置。

准备所需的材料和工具，例如螺丝刀、电钻、腻子、涂料等。

拆下旧窗户，清理窗户框和墙面。

安装新窗户，确保窗户框与墙面之间的密封性和牢固性。

对窗户进行调试和调整，确保窗户的开启和关闭顺利。

使用腻子和涂料等材料对窗户进行装饰和修整。