Ele estava errado. O dragão de Aegon, Balerion, o Medo Negro, simplesmente sobrevoou as muralhas e soprou seu fogo no castelo, assando todos dentro e derretendo a maior parte do castelo com ele. Harren e todos os seus problemas morreram naquele dia.
Aegon então deu o castelo para a Casa Qoherys que, como os Targaryens, eram originalmente de Valyria. Por fim, por motivos não revelados, House Qoherys morreu.
Em seguida, foi dado a House Towers, que também morreu. Razões desconhecidas.
O castelo então foi para a Casa Harroway, que eram relacionados ao rei Maegor I Targayen através do casamento. Eles também foram extintos.
Harrenhal foi então dado a House Strong. Vários membros daquela casa morreram em fogos misteriosos, até que a casa morreu.
Os próximos senhores que ocuparam Harrenhal foram a Casa Lothston, que tinha uma reputação muito temível e horrível. Lady Danelle Lothston foi dito para enviar morcegos gigantes para capturar as crianças para os seus cookpots, e uma louca Lady Lothston (possivelmente Danelle) é dito ter banhado em sangue e se banquetear em carne. O último dos Lothstons foi morto em circunstâncias desconhecidas.
A última casa a morar em Harenhal foi House Whent, cujo fundador era originalmente um ferreiro que trabalhava para os Lothstons. Quando a Guerra dos Cinco reis começou, Lady Shella Whent entregou o castelo a Tywin Lannister.