Le poème de Pierre de Ronsard Mignonne, allons voir si la rose est inspiré de l'idylle entre Ronsard et Cassandre, fille de Salviati. C’est au cours d’une fête donnée au château de Blois le 21 avril 1545 que le poète rencontre Cassandre. Il lui composa également 184 sonnets qui forment « les Amours de Cassandre » dans le premier livre des Amours[6].
Durant les guerres de religion, le poète Théodore Agrippa d'Aubigné, protestant, trouve refuge au château de Talcy en 1572. Il tombe amoureux de Diane Salviati, la nièce de Cassandre[6]. Celle-ci le repousse cependant. Agrippa d'Aubigné fait référence à ce château dans quelques-uns des vers de ses Tragiques.
En 1562, pendant les guerres de religion, le château accueille Catherine de Médicis et Charles IX pour la Conférence de Talcy. Elle réunit pour la dernière fois les représentants catholiques et protestants. Les chambres dites de Catherine de Médicis et de Charles IX sont nommés en mémoire de cet événement au XiXe siècle [7].
Lors de la guerre franco-allemande de 1870, le général Chanzy y établit son quartier général en décembre mais il en fut chassé par les Prussiens.