Близкий друг Тургенева Яков Полонский передал его воспоминания об отце. «Отец мой был великий ловец перед Господом, – говорил он словами Библии, сказанными о Нимвроде. – Раз одна барыня, уже пожилая, честная и прямодушная, вспоминая об отце моем, которого она знала в молодости, проговорилась, что однажды, оставшись с ним наедине, она, прежде чем успела что-нибудь сказать или подумать, как уже была в его власти. Он действовал на женщин как магнит. Был ласково-настойчив и всегда достигал того, чего никогда нельзя достичь, не зная сердца женщины». Показалось тогда Полонскому, что говорил это Иван Сергеевич с некоторой завистью в голосе.

Знаменитый биограф Тургенева Борис Константинович Зайцев так описывал судьбу его отца: «Как бы ни прожил Сергей Николаевич жизнь с некрасивою и старше его женою, несомненно, что он знал и Любовь истинную. Иногда ее профанировал. Но иногда отдавал ей всего себя и потому понимал страшную ее силу и силу женщины. Сергей Николаевич обычно побеждал, все-таки роковой характер Эроса знал. И не было в нем колебаний, половинчатости…»

Если Варвара Петровна вначале страдала от измен мужа, то быстро оправилась и стала отвечать той же монетой, но более беззастенчиво, открыто, по-хозяйски. В Спасском она завела любовника, молодого домашнего доктора Андрея Берса, причем происходило все это на глазах у других. Ей в то время было уже сорок пять лет, а Андрею Берсу всего двадцать четыре года. Позднее Берс женился и стал отцом жены Льва Толстого Софьи.

Отношение Варвары Петровны к молодому любовнику было своеобразным. Она самодовольно писала подруге о Берсе: «Вымуштруй же себе пса, как я вымуштровала своего. Он лежит у моих ног, глядит мне в глаза, целует мне руки. Любить! Любить – это так прекрасно!» В июне 1833 году в Спасском-Лутовинове Варвара Петровна родила от своего «вымуштрованного пса» незаконнорожденную дочь, названную в честь матери Варварой.

Сергей Николаевич не мог перенести такого унижения и переселился в Петербург. Последние годы он болел каменной болезнью, долго и безуспешно лечился, врачи предлагали операцию, но ничего не помогало. Долгое время перед смертью лежал Сергей Николаевич в Петербурге почти недвижим. Иван вспоминал: «Мы его больного, расслабленного все еще боялись, как огня. Каждое утро и каждый вечер мы обязаны были приходить, целовать у него руку, но затем уже больше не смели входить в его комнату». 30 октября 1834 года в возрасте всего 40 лет Сергей Николаевич умер в Петербурге после трёхдневных мучений от приступа почечнокаменной болезни. При этом присутствовали сыновья Иван и Николай.

Варвара Петровна во время последней болезни мужа была за границей. Ее известили о смерти мужа, однако на похороны она не явилась и вернулась из своего путешествия лишь в июне 1835 года, то есть спустя восемь месяцев. Сергея Николаевича Тургенева, в отсутствие странствующей по Европе жены, похоронили на Смоленском кладбище его брат Николай Николаевич и сыновья.

Некоторые биографы полагают, что перед отъездом за границу была Варвара Петровна снова беременна не от мужа и потому уехала в мае 1834 года, чтобы родить там, вдали от посторонних глаз. Уехала якобы на лечение со свитой, но без мужа. Родила она мальчика в одном из итальянских городов, позднее его перевезли в Париж и доверили на воспитание молодой девушке скромного поведения. Звали этого мальчика Луи Поме. Иван Сергеевич много позже восстановил с ним связь и в зрелые годы поддерживал дружеские отношения. Познакомил своего незаконнорожденного брата со своим окружением и с русской поэзией, в частности с поэзией Лермонтова, и Луи Поме даже сделал перевод на французский язык стихотворения «Мцыри».