Kastel ini dibangun sekitar tahun 1020-1030 oleh Graf Radbot dari Klettgau. Pada masa pembangunannya, kastel ini merupakan bagian dari Kadipaten Schwaben.
Kastil Habsburg tidak lagi menjadi kastel yang penting setelah keturunan ketujuh Radbot, Rudolf, memindahkan pusat kekuasaan Wangsa Habsburg ke Austria pada tahun 1276. Kastel ini tetap dimiliki oleh Wangsa Habsburg hingga tahun 1415. Sesudah itu, kastel ini beserta wilayah Aaargau secara keseluruhan jatuh ke tangan Konfederasi Swiss.