Владелицей нового особняка на сквозном участке Балка, в границах набережной реки Мойки и Миллионной улицы, становится его младшая дочь, названная в честь свой знаменитой бабки Матреной. Любимая фрейлина Елизаветы Петровны через некоторое время становится официальной владелицей отцовского дома. Вскоре Матрена Павловна Балк выходит замуж за камергера Сергея Васильевича Салтыкова, доброго приятеля будущего российского императора Петра III и, как многие считали, первого любовника его супруги, будущей российской императрицы Екатерины Великой. Тогда же великая княгиня в своих записках описала обстоятельства, при которых, собственно, и совершился брак фрейлины Матрены Балк с красавцем Сергеем Салтыковым. Это произошло весной 1750 года в Царском Селе, куда по распоряжению императрицы выехал «малый двор» великого князя Петра Федоровича и великой княгини Екатерины Алексеевны. Молодежь веселилась, ездила на охоту и каталась на качелях. «На этих качелях, – вспоминала Екатерина Алексеевна, – девица Балк пленила Сергея Салтыкова, камергера великого князя. На другой же день он ей сделал предложение, которое она приняла, и в скором времени он на ней женился».

С.В. Салтыков, камергер

Бытовало мнение, что Сергей Васильевич Салтыков оказал «дружескую услугу» наследнику, в результате которой на свет появился будущий российский император Павел I. После подобного «патриотического» поступка Елизавета Петровна, для которой вопрос об отцовстве не являлся секретом, забирает внука к себе на воспитание, подальше от наследника с его явными признаками полного мужского бессилия, а фактического продолжателя рода правящей династии – камергера С.В. Салтыкова срочно отправляет с дипломатической миссией в Стокгольм, а затем повелевает исполнять полномочия российского посла в Гамбурге, Париже и Дрездене. Его имя все реже и реже упоминается на светских столичных раутах и в аристократических салонах. Многие полагали, что камергер намеренно удалился от двора. Правда, петербургский краевед А.А. Ива нов в книге «Дома и люди» предполагает, ссылаясь на мемуары одного из издателей популярной столичной газеты «Северная пчела», что «Греч в своих „Записках“ указывает год его смерти – 1807-й, но трудно сказать, насколько это достоверно. Несомненно лишь то, что жена намного пережила мужа, скончавшись лишь в 1813 году, но ее долгая жизнь не оставила каких-либо следов в истории». Матрена Салтыкова «прославилась» разве что своей скупостью, имея обыкновение нарочно ссориться с подрядчиками, чтобы прогнать их, не уплатив за уже выполненную работу. Овдовев, она продала дома на Миллионной мужу своей сестры Марии Павловны Балк-Полевой-Нарышкиной – князю С.К. Нарышкину.

Княгиня М.П. Нарышкина

Князь Семен Кириллович – представитель старинного знатного княжеского рода, богатый вельможа и близкий родственник Петра Великого. Женитьбой на Марии Павловне Балк он намного увеличил свое состояние.

Это была замечательная пара. Мария Павловна в молодости отличалась красотой, статной фигурой и величественной осанкой, всегда с изысканностью одевалась, вызывая приступы зависти и ненависти у царицы Елизаветы Петровны. На балах и светских приемах императрица открыто демонстрировала свое крайнее недовольство изысканностью нарядов супруги князя С.К. Нарышкина. Однажды, выйдя из себя, она на глазах у шокированных придворных собственноручно срезала ножницами с головы княгини Нарышкиной милое украшение из лент.

Овдовев, Мария Павловна унаследовала по духовному завещанию внушительных размеров состояние, и все же, несмотря на это, через два года после кончины князя она дала объявление в газету о продаже великолепной библиотеки своего мужа: «Декабря, с 1 числа будет с публичного торгу продаваться в доме ее высокопревосходительства М.П. Нарышкиной, состоящем в большой Миллионной, подле главной аптеки, оставшаяся библиотека после покойного супруга ее, обер-егермейстера Семена Кирилловича Нарышкина, состоящая большей частью из французских книг».

Князь П.П. Щербатов

29 мая 1793 года секретарь российской императрицы Екатерины Великой – А.В. Храповицкий внес очередную запись в дневнике: «Вчера ввечеру умерла Марья Павловна Нарышкина. Ее Величество сказывала мне о том с сожалением, вспоминая, что в молодых летах вместе с нею резвилась и спрашивала: жива ли сестра ее, княгиня Щербатова? Но та за год уже умерла».

Дом и огромный сквозной участок от Мойки до Миллионной улицы перешли по завещанию сыну ее старшей сестры князю Павлу Петровичу Щербатову – племяннику русского историка М.М. Щербатова.

Получив столь большое наследство, тридцатилетний князь Павел Петрович оставляет военную службу в гвардейском Преображенском полку, Екатерина II жалует ему должность действительного камергера, женится по любви на фрейлине Анастасии Валентиновне, дочери генерал-фельдмаршала графа В.П. Мусина-Пушкина. Князь оказался весьма рачительным хозяином, привел в должный порядок запущенный огромный усадебный участок и великолепный особняк (дом № 6), выходящий своим фасадом на Миллионную улицу.

Заботясь об увеличении доходности огромного сквозного земельного надела, П.П. Щербатов в конце 80-х годов XVIII столетия возводит на набережной Мойки двухэтажный каменный флигель (дом № 5) с аркадой в первом этаже, с девятью торговыми лавками, сдаваемыми в аренду местным купцам. Через год по распоряжению князя здание надстроили третьим этажом, оформили фасады дома рустом и лепными деталями. В результате перестройки здания на набережной Мойки появился оригинальный образец доходного жилого дома с уличной торговой галерей на девять лавок и обращенными во двор галереями-коридорами. Князь Павел Петрович иногда сдавал в аренду некоторые покои в своем главном особняке на Миллионной улице. В 1810-х годах в его доме несколько лет жил знаменитый французский художник-портретист Шарль-Бенуа Митуар, удостоенный в 1813 году звания академика Петербургской Академии художеств.

Граф А.Н. Зубов

Считают, что французский художник написал четыре прекрасных портрета князя П.П. Щербатова и его супруги – княгини Анастасии Валентиновны. Ранее эти работы приписывались кисти О.А. Кипренского.

Однако большинство отечественных искусствоведов, основываясь на результатах объективных технических экспертиз, все же продолжают утверждать, что автором замечательных портретов князя и княгини Щербатовых является их гость из Франции. Споры и дискуссии об авторе портретов продолжаются, поэтому ныне они выставляются под нейтральной подписью: «Работа неизвестного мастера первой четверти XIX века».

После смерти четы Щербатовых их наследница, единственная дочь Наталья Павловна, вышедшая замуж за графа А.Н. Зубова, приняла решение о продаже родового надела и особняка.

Покупателем оказалась некая Рубцова, перепродавшая через несколько лет особняк и огромный сквозной участок жене действительного статского советника О.П. Зубовой.

В 1857 году бывший участок Балков – Нарышкиных – Щербатовых казна выкупает у О.П. Зубовой под строительство служебного корпуса Запасного дворца и Конюшенного двора при Ново-Михайловском дворце. Перестроечными работами тогда руководил придворный зодчий А.И. Штакеншнейдер. Весь земельный участок вскоре заняли многочисленные конюшни и жилые помещения для прислуги великого князя Михаила Николаевича, дворец которого располагался неподалеку дом № 18 по Дворцовой набережной и № 19 по Миллионной улице.