一般来说是可以的，但要注意以下几点：

出门前要做好保暖措施，穿厚一点，戴帽子、围巾和口罩等。

出门时要选择合适的交通工具，避免拥挤的公共交通工具。

在澡堂里要注意保暖，不要着凉，可以提前打开浴霸等设备提高室内温度。

洗澡时间不宜过长，尽量控制在20分钟左右，避免过度疲劳。

洗完澡后要及时穿好衣服，注意保暖，避免吹风。

总之，在坐月子期间出门去澡堂洗澡是可以的，但要注意保暖和休息，避免过度劳累。