São ambos.
Dos apêndices de O Senhor dos Anéis, primeiro lemos:
Umbar is made into a great fortress of Númenor.
E:
King Eärnil I takes Umbar, which becomes a fortress of Gondor
E:
King Ciryandil slain in the siege of Umbar.
Estes sugerem que é uma cidade-fortaleza murada, que sabemos de outros lugares também é uma cidade portuária.
No entanto, em uma nota de rodapé dos apêndices, também lemos:
The great cape and land-locked firth of Umbar had been Númenorean land since days of old...
O que sugere que o nome Umbar também foi usado na região que contém a cidade.