Fra midten av tallet ble trebygningene i kongsgården erstattet med steinhaller, blant dem Håkonshallen , og anlegget ble omgitt av murer med tårn.