Você está certo, dissipar magia vai trabalhar na cabana.

Spells and other magical effects can't extend through the dome or be cast through it.

Formação do elenco dissipar magia estaria lançando um feitiço at a cabana, não através (por exemplo, para um alvo dentro ou do outro lado). Um lançador de pé do lado de fora da barreira que lança um dissipar magia nele, teria como alvo a barreira e não exigiria que o feitiço lançado viajasse através da própria barreira.

Assim, não há razão para que dissipar magia não iria funcionar nisso.

Minúscula Cabana bloqueia feitiços em criaturas ou objetos dentro cabana; mas não bloqueia feitiços em si mesmo

Para dar um exemplo concreto: se um lançador de feitiços lançasse Dissipar Magia em uma criatura que eles sabiam estar dentro da cúpula, o feitiço falharia, independentemente de serem fisicamente capazes de ver seu alvo ou não (uma circunstância que depende, entre outras coisas, se o interior foi escurecido ou não, por a descrição do feitiço).

Mas se o mesmo lançador de feitiços visasse a própria cabana, a cabana seria eliminada. Não há regras na 5th edição que julguem a ideia de que Dissipar Magia- ou qualquer outro tipo de mágica de abjuração - é necessário "atravessar" seu alvo como parte do mecanismo de afetá-lo; existe apenas o requisito implícito de que um feitiço deve atingir um alvo, passando por quaisquer obstáculos entre o lançador e o alvo. Como resultado, um lançador de feitiços que lança tal feitiço só precisa fazer com que o feitiço "atravesse" a cabana se o feitiço disser especificamente que é isso o que faz, o que Dissipar Magia não.

Choose one creature, object, or magical effect within range. Any spell of 3rd level or lower on the target ends. For each spell of 4th level or higher on the target, make an ability check using your spellcasting ability. The DC equals 10 + the spell's level. On a successful check, the spell ends.

—Dispel Magic, Player's Handbook, pg. 234