Мемуары домочадцев Черткова поистине вызывают изумление. Вот, например:
«Мы, дети и подростки, всегда радовались, когда Гоголь к нам приходил… Гоголь был носаст, у красавицы Елизаветы Григорьевной Чертковой также был большой, но изящный нос. Сопоставление этих носов давало Гоголю повод к разным шуткам…»
Не только Гоголь посещал этот знаменитый дом. Здесь бывали Пушкин, Жуковский. Дело в том, что Чертков превратил его в библиотеку — первую публичную библиотеку в России. Он первым стал собирать книги, посвященные своему Отечеству. И ему это удалось — все, что было напечатано на любом языке мира касательно России, оказалось собранным в библиотеке Черткова. И это было не просто хранилище — уникальные книги становились источником для новых литературных произведений и исторических исследований. Именно здесь Лев Толстой работал над романом «Война и мир». А основоположник космонавтики Константин Циолковский изучал книги по точным наукам.