Depuis le XIVéme siècle les évêques de Viviers avaient quitté leur antique demeure près de la cathédrale et vivaient dans leurs autres résidences ( Donzère, St Martin d'Ardèche, Largentière ou Bourg-Saint-Andéol).
Lorsqu'en 1723, François Renaud de Villeneuve fut désigné pour le siège épiscopal, le pape, dans ses bulles, lui imposa l'obligation d'une demeure épiscopale à Viviers.
La première pierre fut posée en 1732; l'évêque l'habita dès 1737, mais le bâtiment ne fut terminé qu'en 1741. Et encore ... l'aile droite prévue au départ pour abriter la chapelle et la serre ne fut jamais réalisée, faute de moyens.
Travaux réalisés dans le cadre des Ateliers l'Ecole Chaillot