Его частые сетования на это сыграли свою роль. Царица Елизавета “подкинула” ему 40 тысяч. В “Санкт-Петербургских ведомостях” было напечатано уведомление читателе о том, что “23 ноября (с.с.) 1758 года освящена была церковь в новопостроенном доме графа Михаила Ларионовича Воронцова. Ее императорское величество изволило кушать у его сиятельства, а для новоселья вручила ему указ на 40000 рублей”. Но эта субсидия не выручила Воронцова. Теперь он жаловался, что приходится тратить большие средства на частые балы и “машкерады”. И в 1763 году Воронцов продал в казну свой дворец, получив за него от Екатерины II 217600 рублей. До 1770 г. здание пустовало. Затем в нем временно поселили брата прусского короля Фридриха II – принца Генриха. Он вел переговоры с Екатериной II о разделе Польши. После этого во дворце недолго жили другие высокопоставленные лица. Подошел к концу XVIII век. Павел I сменил на престоле свою мать Екатерину II. 29 ноября 1798 г. Павел I принял титул Великого магистра мальтийских рыцарей. Он подарил Воронцовский дворец российской ветви Мальтийского ордена.