Построенный Матвеем Казаковым в 1786—1796 годах на месте разобранных зданий Василия Баженова, дворец стал главной постройкой для несостоявшейся подмосковной резиденции Екатерины II.