Estou a pensar que calafetar removível pode funcionar. Eu usei-o para selar janelas durante o inverno, e é muito fácil de vidro e plástico, então pode funcionar.
Isso lhe daria algo um pouco maior para trabalhar, tanto quanto garantir que ele atinge todos os pontos certos, bem como ao tentar removê-lo mais tarde. Deixar uma conta grande também facilitaria a colagem da fita.
IDK se a fita grudar nela, mas é uma ideia. Eu também não sei o quão bem ele sairia da argamassa, ou se iria danificá-lo ao tentar retirá-lo.