Substituir o subfloor não será fácil, é provável que seja executado sob as paredes. Você terá que cortar em volta do perímetro e erguer as tábuas que provavelmente também estão emborcadas.
Se você quiser que a cola seja removida, tente uma lixadeira de cinta com um papel de 40 ou menor e veja o quão bem ela remove a cola. Você vai chupar muitos cintos, mas a área ainda é pequena. Use uma máscara de pó.