Только один раз он попытался быть со мной грубым. Это было на заседании Политбюро. Как всегда, я записываю резолюции на картонной карточке и передаю её ему через стол, а он, прочтя, возвращает её мне. По каким-то разногласиям с членами Политбюро (не имевшим ко мне ни малейшего отношения) он рассердился и хотел показать членам Политбюро своё плохое расположение духа. Для этого он не нашёл ничего лучшего, как не возвращать мне через стол карточки, а швырять их через стол. Моя реакция была немедленной — следующую карточку я тоже не передал ему через стол, а бросил. Он удивлённо посмотрел на меня и сразу перестал бросать карточки.

Он совсем перестал понимать меня, когда в один прекрасный день в результате моей внутренней эволюции, став антикоммунистом, я потерял желание быть полезным винтиком этой политбюровской машины. Я сказал ему, что хотел бы перейти работать в Наркомфин (Сокольников предлагал мне руководить Финансово-экономическим бюро Наркомфина, заменившим Учёный совет царского министерства финансов). Сталин удивился: «Почему?» Настоящую причину я ему, конечно, сказать не мог, и ответил, что хотел бы усовершенствоваться в государственных делах финансово-экономического порядка. Он ответил, что я могу это делать, продолжая мою работу, и она от этого только выиграет. «И потом, партия поручает вам очень важную и ответственную работу; нет никакого резона от неё отказываться». Я начал работать и в Наркомфине (я дальше об этом расскажу), но для Сталина, для которого власть была всё, моё равнодушие к власти и готовность от неё уйти, были загадкой. Он видел, что во мне чего-то не понимает. Может быть, поэтому он был всегда со мной отменно вежлив.

В те времена (20-е годы) Сталин ведёт очень простой образ жизни. Одет он всегда в простой костюм полувоенного образца, сапоги, военную шинель. Никакого тяготения ни к какой роскоши или пользованию благами жизни у него нет. Живёт он в Кремле, в маленькой, просто меблированной квартире, где раньше жила дворцовая прислуга. В то время как Каменев, например, знает уже толк в автомобилях и закрепил за собой превосходный Роллс-Ройс, Сталин ездит на мощном, но простом Руссо-Балте (впрочем, дорог для автомобилей нет, ездить можно практически только по Москве, а выехать за город можно только чуть ли не по одному Ленинградскому шоссе). Конечно, для него, как и для других большевистских лидеров, вопрос о деньгах никакой практической роли не играет. Они располагают всем без денег — квартирой, автомобилем, проездами по железной дороге, отдыхами на курортах и т. д. Еда приготовляется в столовой Совнаркома и доставляется на дом.

Обычные регулярные заседания Политбюро начинались утром и заканчивались к обеду. Члены Политбюро расходились обедать, а я оставался в зале заседания, чтобы сформулировать и записать постановления по последним обсуждающимся вопросам. Сделав это, я отправлялся к Сталину. Обычно в это время он начинал обедать. За столом были он, его жена Надя и старший сын Яшка (от первой жены — урождённой Сванидзе). Сталин просматривал карточки, и я отправлялся в ЦК заканчивать протокол.

Первый раз, когда я попал к его обеду, он налил стакан вина и предложил мне. «Я не пью, товарищ Сталин». — «Ну стакан вина, это можно; и это — хорошее, кахетинское» — «Я вообще никогда ничего алкогольного не пил и не пью». Сталин удивился: «Ну, за моё здоровье». Я отказался пить и за его здоровье. Больше он меня вином никогда не угощал.

Но часто бывало так, что, выйдя из зала заседаний Политбюро, Сталин не отправлялся прямо домой, а, гуляя по Кремлю, продолжал разговор с кем-либо из участников заседания. В таких случаях, придя к нему на дом, я должен был его ждать. Тут я познакомился и разговорился с его женой, Надей Аллилуевой, которую я просто называл Надей. Познакомился довольно близко и даже несколько! подружился.

Надя ни в чём не была похожа на Сталина. Она была очень хорошим, порядочным и честным человеком. Она не была красива, но у неё было милое, открытое и симпатичное лицо. Она была приблизительно моего возраста, но выглядела старше, и я первое время думал, что она на несколько лет старше меня. Известно, что она была дочерью питерского рабочего большевика Аллилуева, у которого скрывался Ленин в 1917 году перед большевистским переворотом. От Сталина у неё был сын Василий (в это время ему было лет пять), потом, года через три, ещё дочь, Светлана.

Когда я познакомился с Надей, у меня было впечатление, что вокруг неё какая-то пустота — женщин подруг у неё в это время как-то не было, а мужская публика боялась к ней приближаться — вдруг Сталин заподозрит, что ухаживают за его женой, — сживёт со свету. У меня было явное ощущение, что жена почти диктатора нуждается в самых простых человеческих отношениях. Я, конечно, и не думал за ней ухаживать (у меня уже был в это время свой роман, всецело меня поглощавший). Постепенно она мне рассказала, как протекает её жизнь.

Домашняя её жизнь была трудная. Дома Сталин был тиран. Постоянно сдерживая себя в деловых отношениях с людьми, он не церемонился с домашними. Не раз Надя говорила мне, вздыхая: «Третий день молчит, ни с кем не разговаривает и не отвечает, когда к нему обращаются; необычайно тяжёлый человек». Но разговоров о Сталине я старался избегать — я уже представлял себе, что такое Сталин, бедная Надя только начинала, видимо, открывать его аморальность и бесчеловечность и не хотела сама верить в эти открытия.

Через некоторое время Надя исчезла, как потом оказалось, отправилась проводить последние месяцы своей новой беременности к родителям в Ленинград. Когда она вернулась и я её увидел, она мне сказала: «Вот, полюбуйтесь моим шедевром». Шедевру было месяца три, он был сморщенным комочком. Это была Светлана. Мне было разрешено в знак особого доверия подержать её на руках (недолго, четверть минуты — эти мужчины такие неловкие).

После, того как я ушёл из секретариата Сталина, я Надю встречал редко и случайно. Когда Орджоникидзе стал председателем ЦКК, он взял к себе Надю третьим секретарём; первым был добродушный гигант Трайнин. Зайдя как-то к Орджоникидзе, я в последний раз встретился с Надей. Мы с ней долго и по-дружески поговорили. Работая у Орджоникидзе, она ожила — здесь атмосфера была приятная, Серго был хороший человек. Он тоже принял участие в разговоре; он был со мной на ты, что меня немного стесняло — он был на двадцать лет старше меня (впрочем, он был на ты со всеми, к кому питал мало-мальскую симпатию). Больше я Надю не видел.