アバーガベニー城の天守閣はビクトリア朝時代に狩猟小屋に改装され、現在は小さな博物館になっています。城と町の歴史が語られ、19 世紀のウェールズの農家の台所、馬具工房、バジル ジョーンズの食料品店が再現されています。店は 1980 年代に閉店した際に移転され、1930 年代や 1940 年代にさかのぼる品々が数多く展示されており、興味深い展示となっています。
城自体は、北西側の門番所の両側にある印象的な城壁を除いてほとんど残っていません。1175 年にノルマン人の領主ウィリアム・ド・ブローズがライバルのウェールズ人をクリスマスディナーに招き、虐殺するという悪名高い事件が起きた場所です。城は度々包囲されましたが、一度も陥落することはありませんでした。1645 年の内戦中、議会の手に渡らないようにするため、王党派の軍隊によって破壊されました。