如果四楼的水管冻住了，可以尝试以下几种方法快速疏通：

1. 用热水烫：可以用热水袋或热水瓶等容器装满热水，然后将其放在冻住的水管上，这样可以逐渐解冻水管。

2. 用热风吹：可以使用电吹风或其他热风设备，对着冻住的水管吹热风，这样可以加速解冻。

3. 用蒸汽熏：可以使用蒸汽熨斗或其他蒸汽设备，对着冻住的水管熏蒸汽，这样也可以加速解冻。

4. 用火烤：如果其他方法都无效，可以使用火源对着冻住的水管加热，但要注意安全，避免火源引燃周围物品。

需要注意的是，在进行以上操作时，要时刻关注水管的解冻情况，避免水管突然解冻导致水流喷出，造成财产损失或其他安全问题。如果自己无法解决，建议寻求专业人士的帮助。