Brough castello fu costruito nel 1090's in un angolo dei resti di una fortezza romana. è stato uno dei primi castelli pietra ad essere costruita in Gran Bretagna e alcune delle pareti mostra la lisca tipico della massoneria di Norman. Nel 1174 Brough fu attaccato il re scozzese, Guglielmo il Leone e lasciate in uno stato rovinoso dopo che ha costretto la resa impostando il fuoco al castello. Nel 1180, che il castello fu ricostruito da Theobald de Valoignes, che costruì un nuovo dongione quattro piano sul sito di quella precedentemente distrutto.