Een middeleeuws overblijfsel in de Hautes-Alpes
Oorspronkelijk een wachttoren gebouwd door de Ridders van Sint Jan van Jeruzalem in de 13e eeuw, behoorde het land in 1322 toe aan Arnaud de Trians. Hij werd de eerste heer van Tallard die een versterkt kasteel bouwde op basis van het bestaande gebouw (ruïnes van de huidige woning).
Treed in de voetsporen van de familie Clermont-Tonnerre, die de oude vesting restaureerde tot een mooie residentie en er de vertrekken van de wacht, de Seigneuriale kapel, het poortgebouw en het Garenne park aan toevoegde.
Dit imposante fort doorstond talrijke veldslagen en aanvallen tijdens de godsdienstoorlogen, evenals de verschrikkelijke brand van 1692, toen de hertog van Savoye en zijn troepen het kasteel aanvielen en in brand staken.
Het bleef verlaten tot 1897, toen het werd gekocht door Joseph Roman, een historicus en archeoloog. In 1927 werd het kasteel verkocht aan gravin Blanche de Clermont Tonnerre, die het tot haar dood in 1944 weer tot leven wekte. Het kasteel werd geërfd door haar achternicht, Marie Christine de Bourbon Sicile, die toen pas 10 jaar oud was en niet in staat om het te onderhouden. De gemeente Tallard kocht het kasteel in 1957.
In 1958 werd het Corps des Gardes geclassificeerd als Historisch Monument. Dit was het begin van een periode van restauratiewerkzaamheden die werden uitgevoerd onder toezicht van het Comité de sauvegarde du château de Tallard, een zijtak van de Société d'Études des Hautes-Alpes.
In 1964 werd een erfpachtcontract voor 99 jaar getekend, waarmee de Société d'Études de restauratie- en beschermingswerkzaamheden kon voortzetten: het hele kasteel werd in 1969 op de monumentenlijst geplaatst.
De huurovereenkomst werd uiteindelijk in juni 2012 beëindigd en de gemeente Tallard nam de volledige eigendom van het kasteel over.