36 лет назад он потерял свою первую жену Татьяну и маленькую дочь Ольгу в аварии на железной дороге в Каменске-Шахтинском. Той ночью грузовой поезд потерял управление и врезался в пассажирский состав, в котором ехали близкие Ливанова.

Ливанов, вспоминая последние моменты проводов, говорит о неизгладимой боли, которую он испытал, опознавая своих близких:
И спустя столько лет горечь потери не уменьшилась: «Время притупляет боль, но не лечит». Он часто проезжает мимо места трагедии, где теперь стоит памятный крест, и не может сдержать слёз.Самое страшное в этой жизни — опознавать своих близких. Родных тогда рядом не было, были незнакомые люди, которые сопереживали. Мама бы не выдержала...



Ливанов говорит, что часто думает о погибших детях и первой жене, их фотографии всегда с ним. Актёр уверен, что это не конец их истории, а её продолжение, и они всегда остаются в его сердце.
Зрители сочувствуют артисту и восхищаются его силой духа. «Пережив такое, не сломался», «Сильный мужчина», – пишут интернет-пользователи. Досталось и его второй жене Ирине: «Бумеранг прилетел», «Получила по заслугам», – намекая на то, что спустя много лет Сергей Безруков бросил её ради другой женщины.