El palacio tenía una clara inspiración en los chateau de la campiña Francesa. Para su construcción se utilizaron muchos componentes traídos directamente de Europa
El " Palacio" fue construido en 1861 por una dama criolla de abolengo español, Doña Dorotea Villa de Moros. En un gran terreno de dos manzanas de superficie ( 15 mil metros cuadrados ), en la ciudad de Montevideo. tenía una clara inspiración en los chateau de la campiña Francesa. Para su construcción se utilizaron muchos componentes traídos directamente de Europa, en especial de Francia, como puertas, herrajes y fundiciones diversas, mármoles, vitrales y boiseries, y trabajaron en la obra a lo largo de 9 años cerca de 40 obreros, constructores y artesanos. En 1914, el único hijo decidió ampliar y remodelar la mansión para volverla aún más grandiosa. Encargó las reformas al arquitecto también francés Camille Gardelle, el mismo que en Montevideo hizo los planos del actual Palacio de la Suprema Corte de Justicia, que perteneció originalmente a la familia Piria
