La construction du premier château de Pionsat remonte à la fin du XlVe siècle, au cœur de la Guerre de Cent ans. La moitié du corps de logis et une tour en subsistent encore. En 1482, Jacques de Chazeron acheta la terre de Pionsat et embellit le château (tour carrée de la cour). Ses descendants, François et Antoine de Chazeron, conseillers à la Cour, eurent des projets plus grandioses d’embellissement. Le château Renaissance avait été prévu pour être très vaste, et sa construction, si elle avait été menée complètement à bien, aurait vraisemblablement fait disparaître la forteresse médiévale. Commencée vers 1550, cette construction fut arrêtée vers 1610. C’est donc un édifice inachevé que Charlotte de Chazeron transmit à la famille Chabannes par son mariage avec Jacques de Chabannes. En 1793, Elisabeth Bernard de Coubert, veuve de Jean-Baptiste de Chabannes, dut vendre le château et son parc. Au cours du XIXe siècle, les bâtiments situés à l’est furent malheureusement détruits et remplacés. Depuis 1920, le château Renaissance, propriété de la commune de Pionsat, est classé Monument Historique. Le château médiéval (propriété privée) est inscrit à l’inventaire supplémentaire des Monuments Historiques.