Existem duas soluções que devem ser mais fáceis e mais baratas que o cimento ou argamassa.
O cimento certamente poderia funcionar, se você conseguir que ele permaneça no lugar enquanto seca. Pegue um pouco de lã de aço, que os ratos não vão roer, e uma lata de espuma de spray, como Great Stuff (há até uma versão repelente de pragas disponível no Home Depot). Coloque lã de aço ao redor do buraco e preencha-o com espuma de spray, que se expandirá e poderá ser cortada com uma faca depois que ela secar. Isso manterá os bugs fora e a lã de aço evitará que os ratos mastiguem, e é rápido, fácil e barato.
Como alternativa, você pode obter um pequeno pedaço de metal. Use algum adesivo de construção para mantê-lo no lugar e ele deve manter os insetos e os camundongos para fora.