O método simples na resposta anterior, com uma toalha de papel, é certamente bastante simples e deve funcionar se estiver bastante úmido.
Se você precisar de uma medição mais precisa, use um medidor de umidade:
Estes são mais usados para ver como a madeira seca é, mas eles também trabalham em sheetrock. Há caras e baratas disponíveis em grandes lojas, lojas de hardware, etc Um barato é provavelmente bom o suficiente para o que você precisa fazer.