Villefagnan a été jusqu'à la Révolution un fief des évêques de Poitiers. Le logis des Tours est ce qui reste du château Lesvescault, le château de l'évêque construit au xve siècle dans le bourg de Villefagnan.
Source Wikipédia, que vous pouvez consulter ci-dessous.