Se você tiver acesso ao tubo congelado ou à cavidade na parede / piso, é possível usar um secador de cabelo para aquecer o ar ao redor do tubo (um secador de cabelo barato que explode na parede de um porão descongelou um tubo em poucos minutos para mim). Eu não aplicaria calor alto (por exemplo, pistola de calor) diretamente ao tubo, pois você pode fazer com que a água se expanda e danifique. Se você tiver acesso direto ao local onde o tubo está congelado, aplicar uma toalha embebida em água quente é outra opção.
Se você é dono da casa, procure isolar os canos e a cavidade em que eles estão. Se você alugar, informe o dono do problema.